Новая тема   Ответить

 benzole
"Another reason I've seen for pages not being crawled is because they are set to require a cookie when a visitor gets to the page. Well, guess what, folks? Spiders don't eat cookies! (Sure, they like beer, but they hate cookies!) No, you don't have to remove your cookies to get crawled. Just don't force-feed them to anyone and everyone. As long as they're not required, your pages should be crawled just fine."

Что это за force-feed куки, и как ведут себя сиджовые/тдс скрипты (особенно GB CJ), если через сайт проползает гугльбот, который куки естественно не понимает и не принимает?
Мне нужно, что бы на корне домена стоял GB CJ, но при этом сайт активно индексировался.

 XXL Fuck
у меня стоял в корне сидж (аврора) и сайт индексировался, а гуглбот не переходит по ссылкам сразу, а просто собирает линки для следующих визитов имхо, иначе тада он был бы побанен во всех сиджах и вообще всех траффик ресурсах как кликбот, он ведь скрытые антиботовые линки тоже видит

 benzole
С кликботом-то понятно. Интересно узнать, что происходит, когда скрипт пытается поставить гуглботу куку и эта тема не проходит? Индексирует ли он страницу дальше?

 XXL Fuck
скорее всего гуглбот имеет статус "но куки" , факт то что у меня сидж в корне домена проиндексировался и достаточно неплохо

 Alpha_Juno
>Мне нужно, что бы на корне домена стоял GB CJ, но при этом сайт активно индексировался.

у меня где то была аврора с тюнинхом под это дело=)) сам пиши

 XXL Fuck
Alpha_Juno писал: а в чем прикол то? вопрос типа "как хаваеца гуглботом кука цепляемая сиджем, не обидица ли гуглбот" ответ: "я гуглбота таким кормил, он хавает и ему нравица" а при чем тут версия сиджа? вопрос в куке

 Alpha_Juno
прикол в том что нужно переделывать скрипт

 benzole
Alpha_Juno, спасибо, но мне нужен именно GB CJ.
Поступлю проще - уберу его с индекс-паги. Мне гугльбот дороже =)