Новая тема   Ответить

 Coolman
Всем привет!
У меня вот такая пробема, почему-то гугль индексирует только страницы report bad link посморите сами site:http://www.jimmy-bitches.com
Вопрос! Как сделать так чтоб он убрал их из индексации? В robots.txt вроде бы закрыл папку cgi-bin, а он всё равно туда лезет.

 CKA3KA
http://www.google.com/webmasters/remove.html

 Coolman
Большое спасибо Надеюсь сработает

 JpS
насколько я помню, конструкция вида:
Код:
не является стандартом и потому такой файл запросто мог быть интерпретирован гулем как неверный и проигнорироваться полностью.

 Coolman
А например, есть разница между

User-agent: *
Disallow: /cgi-bin

и

User-agent: *
Disallow: /cgi-bin/

И будет ли такое работать для гугля ?

 JpS
http://www.searchengineworld.com/cgi-bin/robotcheck.cgi

 Mauser
Coolman, да есть. В первом случае ты запрещаешь все что с этих слов начинается, а во-втором содержимое директории.

 JpS


кстати неплохой бы вопросик "на засыпку" был бы начинающему оптимизатору. очень правильно отметил, я даже не обратил на это внимания, когда читал.

 Scooter
А если в роботс тхт закрыта папка cgi-bin и на сайте стоят ссылки вида cgi-bin/cjout.php?http://www.mydomain.com/ он просто не будет обращать внимания на такие ссылки и просто не пойдёт по ним да? проще говоря получается для него это тоже самое что и ссылка на картинку без альта...

 Stax


У меня в robots:

Код:

Но cjout.php всё равно проиндексировались.

 JpS
Stax писал:

попробуй теперь явно удалить эту страницу из гугла на основоании рекомндаций отсуюда
http://www.google.com/webmasters/remove.html
в тот момент когда ты делаешь удаление чтраницы через скрипт гугля, он проверяет что страница либо 404, либо закрыта robots.txt и если все правильно - удалит. иначе выдаст ошибку с рекомендациями как это делать.

 Tonic
кул!

в букмарк!

 kit
Tonic забанен за бесмысленные сообщения.