kit
Местами немного путанно, но в целом проблема серьёзная. Проблема нев пауках а в том, что на основе выкачанных и структурированных нужным образом данных, строят сервисы конкурирующие с исходным источником данных.
Недавно была опубликована статья близкой тематики:
Поисковые системы подобны пиявкам на теле Сети
У нас недавно был такой прецедент:
Одно чудо стало почти целиком брать наши обзоры и пуликовать усебя на сайте, (с указанием истоника). Всё бы ничего, только цитировал он каждый обзор почти целиком. И получилось так, что у него был сайт с весьма неплохой подборкой обзоров от нас и наших друзей-конкурентов.
PS. Пришлось его творение жестоко растерзать.