Google игнорирует файл Robots.txt?
Похоже, Гугл-бот не всегда внимает призыву “Не трожь!”, который содержится в авторитетном файле Robots.txt. На днях Rand отметил это, и пустил волну на форуме SEW, начав тему под названием «Какой смысл в файле Robots.txt, если Google его игнорирует?»
Я тоже обратил внимание на то, что Google индексирует мою папку с изображениями, хотя я явно запретил ВСЕМ ПОИСКОВЫМ ПАУКАМ индексировать эту папку, в силу разных причин. Этот файл robots.txt находится в корневом каталоге моего сайта с момента его запуска, и мне обидно и досадно за Google, который игнорирует его и продолжает индексировать папку.
Может быть, в этом кроется ответ на вопрос, почему Матт Каттс
не пользуется этим файлом?
После того, как топикстартер заверил, что robots.txt отформатирован по всем правилам, он привел еще несколько доказательств своего утверждения. Я сам понаблюдаю за логами своего сайта, чтобы обнаружить подобные примеры.
Читайте и оставляйте свои комментарии на
Search Engine Watch Forums
Постинг Rand’а на SEOmoz Blog
Об этичности оптимизаторов сказано немало - а как обстоят дела с хитрыми клиентами?
Аммон Джонс (Ammon Johns) надел свою парадную шляпу «Профессора бизнеса и менеджмента» в прекрасном топике на форуме Cre8asite, под заголовком
“Защита от беспринципных заказчиков, избегайте клиентов, которые могут вас ограбить”. Он пишет:
“Люди выставляют себя клиентами, чтобы попросту получить идеи, и затем использовать эти идеи, не собираясь покупать их. Подобные ситуации настолько распространены, что практически все онлайновые сервисы сталкивались с ними”.
Когда нужно пользоваться договором? Кому верить? Если вы выступаете в роли консультанта, насколько глубоко можно вдаваться в детали, если вам за это не платят? Стартовый постинг Аммона сам по себу хорош, но он начинает крайне поучительную ветку, наполненную конкретными советами и ориентирами со стороны знающих людей.
“Опасайтесь любого потенциального клиента, который хочет узнать, как вы будете что-то делать, вместо того, чтобы интересоваться, что вы будете делать”, - предлагает Аммон.
Это не только повод для размышления, но и широкая арена для дискуссии и обмена идеями. Если вы предоставляете какой-либо сервис, читать обязательно.
27.02.06
Источник:
SERoundTable.
Автор:
SERoundTable. Перевод:
Seva.