Happy Oyster
Ситуация такая
в domen.com лежит блог
а в domen.com/galleries/ лежат стопицот галер (отличаются только картинками)
хочется сделать так, чтобы поисковики игнорировали галеры
Достаточно ли для этого поместить в robotsв корне домена строку
Disallow: /galleries/
Или как то по-доугому надо делать?
leroy_17
если добавишь по 1к текста то он еще и ранжировать их будет.
я не закрываю галеры, у меня их больше 40 K гугл все нормально берет
zialionka
Если будет хоть одна внешняя ссылка, то не смотря на запрет робот все равно проиндексит урл (без содержимого) - подобные страницы не ищутся по точному вхождению текста, по тайтлу, в кэше пусто. Используем мета-тэг noindex для новых страниц или URL Removal Tool для тех страниц что попали уже в индекс.