RiverVanRain
В WP вот такой вот стандартный robot.txt
Код:
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-content/uploads
Disallow: /trackback
Disallow: /feed
Disallow: /comments
Disallow: /category/*/*
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Соответственно, в Google WMT не индексируются все рубрики блога.
Какие последствия для блога, если я разрешу ботам сканировать все categories?
Нормально, если в индексе блога только страницы, а посты туда не попадают?
FreeMann
RiverVanRain писал:
Какие последствия для блога, если я разрешу ботам сканировать все categories?
по моему в wp надо закрывать все директории тэгов и категорий от индексирования, чтобы недопускать дублирование контента