CrazyMen
Хай пипл! Нужен скрипт собирающий все урлы с заданных сайтов.
Т.е.: Есть фаил sait.txt c урлами вида domain.com или domain.com/page2.html,; скрипт берет от туда адрес и собирает все ссылки с этого сайта и кладет в фаил grab_url.txt допустим. И так по всем ссылкам. Скрипт не сложный как понимаю. Думаю что на пхп можно реализовать. Пишите с предложениям в личку.