Новая тема   Ответить

 Retox
Хочу закрыть
http://domen.com/tag/xxxx
http://domen.com/tag/yyyy
.....
http://domen.com/page/1/
http://domen.com/page/2/
.....

Как правильно будет!
1)
Disallow: /page/
Disallow: /tag/

2)
Disallow: /page
Disallow: /tag

3)
Disallow: /page/*/
Disallow: /tag/*

 Semen_ssr
2) верно.

/* - это закрываешь типа - /?4p.php и ему подобные.

 x123p
А вообще в будущем если вопросы по robots.txt возникают не ленись глянуть сюда: http://robotstxt.org.ru/

 Retox
Спасибо, рейтинг выставил