Новая тема   Ответить

 gleoz
Мне надо вычислить всех гуугл ботов)
Или их датацентры - может кто таким уже занимался и есть список - или подскажите как это лучше сделать.
за ранее спасибо
все рейтинг

 Блогер
это уже давно не актуально т.к. гугл помимо своих закупает айпишники у крупных провайдеров и ходит под ними, так что всех не пропасешь

 WannaSex
Кто-то где-то говорил здесь в каком-то топике, что гугл не предоставляет список ip-ов по которым бродит => я думаю это крайне тяжело будет сделать

 _s_[sov]
все реализуемо, только вот актуально ли это как уже сказали

 gleoz
это актуально) меня инетересуют методы по которым можно их вычислить

 _s_[sov]
анализируй логи

 FTS
Да, скорее всего только через логи.

 _s_[sov]
ну почему, можно например через пыхапе, составить свой лог запросов но имхо зачем..

 Блогер
ТС глянь еще на форуме blackhatworld.com там клоакеры водятся и частенько выкладывают списки айпишников гуглботов

 gleoz
спасибо всем рейт отсыпал +6
по прежнему ищу советов) как лучше поступить.

 sergio21
gleoz http://en.utrace.de/

вбиваешь IP посетителя, и видишь, откуда он пришел. часто прямо так и написано: гугл-датацентр.
но, если гугл маскируется, как тут выше писали, то нужны и какие-то другие методы.

 Farel777
66.249.71.16 ип гуглкомовского бота, юса, 5к - 25к инов дейли получается,по норефу можно ловить их.
пс: от твоего дата центра будет зависеть и многое от сайта.

 WannaSex
Farel777 писал:
Оффтопик: 25к СЕ трафа с гугла получается в сутки? А люди парятся... ищут решение...

 _s_[sov]
чета я сомневаюсь что гугл будет заходить с 1 айпи причем в таком количестве

 zerec
Если в php, используй gethostbyaddr($_SERVER['REMOTE_ADDR']), получишь имя хоста, оно должно содержать googlebot.com, но это только если гугл не шифруется...