Новая тема   Ответить

 despero
Человеки гляньте шо не так с этим блядским роботекстом , решил старые блоги до ума довести (там вообще дефолтовый какой то был из пары строк)ну я его поменял на вот эту х*уню - итог в гугле десяток страниц осталось , в яше одна главная и цука не хера не востанавливается
User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /webstat/
Disallow: /feed/
Disallow: /trackback
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Disallow: /category/*/*
Disallow: /wp-content/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /comments

User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /webstat/
Disallow: /feed/
Disallow: /trackback
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Disallow: /category/*/*
Disallow: /wp-content/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /comments
Host: ****.net

Sitemap: http://www.****.net/sitemap.xml

 Semen_ssr
Ну если у тебя реврайтов нет, то в индексе остануться только морда, таги и категории.

 Vyacheslav
Как по мне так иногда лучше без роботс или с дефолтным, чем с таким нагромождением.
А что для вордпресса в идеале надо оставить в индексе?

 despero
больше двух сотен постов есть

 despero
Vyacheslav писал:
Да отож бля подсмотрел у модных блогов , думаю пилять у людей башка большой значит умный ну захерачил
думал оно только мусор из выдачи поубирает а оно пля вот такую хрен ко всему подряд лепит даже к постам
ТУТ БЛЯ НАЗВАНИЕ ПОСТА потом
ввв.домен.нет/?p=613 Описание веб-страницы недоступно из-за ограничений в файле robots.txt. Подробнее...

в идеале хотелось бы одни посты оставить ))

Последний раз редактировалось: despero (26/09/12 в 09:56), всего редактировалось 1 раз

 Semen_ssr
Код:
и как ты себе это представляешь ?

http://robotstxt.org.ru/

по простому:
Disallow - запрещать
Allow - позволять

что хочешь, то и собери.

 despero
Semen_ssr писал:
подозревал что может выкосить все где будет знак вопроса но какой то у мник выложил как бы идеальный образец роботекста ну я и поверил

 despero
все разобрался мать его всем спасибо

 Taras_Bulba
despero писал:
Ты лучше на звёзды внимание обращай

 despero
та я думаю вообще больше не заморачиваться пусть гугля че хочет то и жрет
какая разница что за страница в выдаче будет висеть , главное что бы висела , да и не думаю что это кардинально что то меняет видел оптимизированные по всем правилам блоги с посещаемостью сто уников , так помню на моем первом корявеньком блоге на блогспоте сотни три за день набегало

 Taras_Bulba
во-во. Больше стоит переживать, когда гугль бот НЕ заходит туда, куда надо, чем заходит туда, куда не надо

 karbonv
Гугл изначально пытается сожрать все что есть, а уж потом пытается выкинуть

 Sergeyka
зачем на блоги роботс?
гугл и так прекрасно знает вп как свои 5 пальцев, и в выдаче только тематические страницы...

нах городить велосипед?

 Taras_Bulba
Sergeyka писал:
и изобретать огород

 despero
велосипедить огород
Цитата:
да блин начитался всякой поебени а дальше как в анкдоте
сидит мужик и причитает ну нахера.... ну нахера я их позвал .. лом то к земле примерз

 Sergeyka
despero: ну вот и удали его нахуй и все, и спи спокойно