Новая тема   Ответить

 zJ
Как сделать так, чтобы индекс домена индексировался, а все что /?par1=tratata&par2=... нет?
Мне в голову вот что пришло:
User-agent: *
Disallow: /?

 xreload
насколько я знаю нельзя , только целиком директорию или файл.

 SAV
Чтобы заблокировать доступ ко всем URL, включающим вопросительный знак (?), можно использовать следующую запись:

User-Agent: *
Disallow: /*?*

 zJ
Спасибо, попробую.
Кстати вариант как у меня в первом посте я нашел к примеру у яндекса еще, но неизвестно конечно чего они хотели этим добиться: _http://www.yandex.ru/robots.txt

 ICOOGLE Project
лучше так
Disallow: /?*

иначе попадёт и /qwe.php?par3=

вообще * не все СЕ поддерживают, это расширение стандарта robots.txt (гугл точно поддерживает)

 Pedronas
это яндекс не поддерживает * а все нормальные западные поисковики понимают

 taljanich


а яндекс не поддерживает звёздочку только в названиях файлов и папок, которые не надо смотреть? или useragent'a тож не понимает?