Новая тема   Ответить

 Twich
..большие сайты, у которых в "робот" зпрещенно индексировать их поисковиками, дайте пару ссылочек на такие сайты?
---
..хотя наврядли кто-нить знает.. :-)

 color
крутоп

 arachnO
color, аналогично хотел сказать да ты опередил

 xislt
http://www.google.com/robots.txt

 Twich
:-))))
кроме крутопа и поисковиков с каталогами.. :-)

 EvGenius
http://web.archive.org/robots.txt
а тебе зачем собственно?

 Twich
ха-ха.. :-))) ..бывает же.., а еще какие-нить сайты? :-)
..надо. ;-)