Master-X
Форум | Новости | Статьи
Главная » Форум » Поисковые Системы » 
Тема: С каких ip заходят гугл боты?
цитата
06/06/08 в 16:32
 Diana Fox
Нужно закрыть доступ к русскоязычным сайтам всем, кроме России и Украины (другие страны - это не нужная и бесполезная нагрузка на кластер) и тем россиянам и украинцам, кто прийдёт по гуглу. То есть, кроме русского и украинского трафа надо пропустить ещё гугл-боты. Подскажите - какую страну для гугл ботов открыть? Одной США хватит, или они ещё откуда-нить приходят? Сайты как в ру зоне, так и в сом и info (если это важно).

Спасибо заранее, всем рейтинг.
цитата
06/06/08 в 17:09
 XXL Fuck
у гугла много датацентров в разных странах и с разными ипами, т.е. если нужно пропустить ботов то по странам их имхо не отсеить.
и какой смысл пропускать гуглботов если всех сёрферов с гугла патом фильтровать?
имхо просто редиректить всех кроме России и Украины.
цитата
06/06/08 в 17:34
 FTS
Смотри переменную HTTP_USER_AGENT - гугл-боты оставляют там следующее:
Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)
+1 за редирект - дополнительные деньги, хотя гугл скорее всего забанит рано или поздно как за блокировку, так и за редирект icon_smile.gif
цитата
06/06/08 в 19:47
 shahfil
66.249.64.0/19 и 64.233.160.0/19 если только гугль нужен
цитата
07/06/08 в 03:01
 Chin
Так можно санкции словить. От того же гугля за клоакинг.
цитата
07/06/08 в 03:25
 Diana Fox
Спасибо! Всем рейтинг по максимуму.

Да не очень критично - забанит, не забанит гугл. Мы по другому решили задачу привлечения СЕО трафа. Бороться за первые места в выдаче не к чему, экономически нецелесообразко (именно нам), а на 10 странице и так никто не увидит. КПД отрицательный у борьбы за топ в выдаче (для нас). Есть другой путь привлечения СЕО трафика.

Я вот что не поняла - (ну тут всем огромное спасибо за советы) - не поняла вот что - а как это редирект ставить - если поставлю редирект на все страны кроме России и Украины, то и гугль-боты будет редиректить. Так что я не поняла +1 за редирект.

Ясно, что не просто блокируем 403, а редиректим и монетизируем ненужный траф. Это и так понятно.

То есть вопрос простой - кто нибудь в живую видел гугл-боты не с американскими IP ?
цитата
13/10/08 в 02:06
 Don Lamer
Вот ip этой нечисти:
66.249.64.0 - 66.249.95.255
64.233.160.0 - 64.233.191.255
72.14.192.0 - 72.14.255.255

У меня доры на таком редиректе живут и очень хорошо себя чуствуют
<script language='javascript'>
var1=71;
var2=var1;
if(var1==var2) document.location='url';
</script> smail101.gif smail101.gif smail101.gif

Да здраствует PHP - любой редирект пройдет
цитата
14/10/08 в 17:59
 masta_sh00ter
что же у вас за ру и юа траффик такой, что кластера под это дело используются... аж с трудом представляется.


Эта страница в полной версии