Master-X
Форум | Новости | Статьи
Главная » Форум » Поисковые Системы » 
Тема: Дубли морды в индексе и robots.txt
цитата
22/05/08 в 22:34
 FireStarter
Имеется сидж. Трейдеры шлют траф на него линками http://domen.com/?trader.com соответственно в индексе гугля по запросу
site:domen.com помимо главной страницы domen.com дофига страниц вида:
domen.com/?trader1.com
domen.com/?trader2.com
domen.com/?trader3.com
Налицо дублированный контент.
Вопрос: как избавиться от этих страниц в индексе гугля? Как с помощью robots.txt запретить индексацию таких domen.com/?trader.com стриниц и предотвратить появление их в будущем?
цитата
23/05/08 в 21:25
 Chin
301 редирект
цитата
23/05/08 в 23:15
 FireStarter
боюсь таким макаром весь трейдерский траф попадет в notrade (скрипт аврора, на всякий случай)
цитата
26/05/08 в 23:25
 Hkey
вот инфа о роботс.тхт http://bajron.od.ua/faq/robotstxt/


Эта страница в полной версии