Master-X
Форум | Новости | Статьи
Главная » Форум » Поисковые Системы » 
Тема: Как запретить индексацию сайта ?
цитата
06/10/10 в 12:07
 Alexs
Привет есть вопрос как по надежней запретить индексировать сайта google и прочим ?
Итак есть
domain.com/
domain2.com/
Контент одинаковый но в domain2.com/

лежит robosts.txt

User-agent: *
Disallow: /

domain2.com/ не будет не как влиять на выдачу domain.com/
правильно?

Или можно еще что-то сделать для того чтобы поисковики не лезли на domain2.com/ по типу
user agent googlebot зарезать через htaccess

всем рейтинг по максимуму

Последний раз редактировалось: Alexs (06/10/10 в 14:59), всего редактировалось 1 раз
цитата
06/10/10 в 14:55
 taj
По спецификации всё верно - поисковики которые их слушаются лезть не будут )
цитата
14/10/10 в 16:17
 Crypo
<meta name="robots" content="noindex,follow"> - но не все его слушаются. Если не хочешь индексировать, то закрой доступ к сайту паролем и все.


Эта страница в полной версии