Master-X
Форум | Новости | Статьи
Главная » Форум » Реклама, Объявления » 
Тема: Robochek - краулер robots.txt
цитата
15/03/10 в 20:55
 gameover
robocheck - программа для поиска информации в robots.txt на большом числе хостов.

robocheck:
- работает под Linux
- написан на C
- многопоточен
- не требует установки дополнительных библиотек

На вход принимает:
- файл с хостами с которых надо забрать robots.txt
- файл со строками которые надо искать в robots.txt
- количество потоков для работы
- таймаут на обработку одного хоста

На выходе выдает:
- файл с хостами и строками из robots.txt которые удалось найти
- файлы с хостами при обработке которых произошли те или иные ошибки

Изучаю будет ли спрос на такое предложение, возможно изменение краулера под ваши требования.
Цена договорная, со всеми вопросами и предложениями стучите 4-8-008-4-8
цитата
15/03/10 в 22:17
 ibiz
нет, такое пишется на рнр в 10 строк средней руки кодером за пару часов по цене не дороже 10вмз
цитата
16/03/10 в 12:51
 gameover
когда речь идет о промышленных масштабах слово "php" не уместно
цитата
16/03/10 в 13:29
 alex.raven
gameover писал:

когда речь идет о промышленных масштабах слово "php" не уместно


кто-то основательно промыл вам мозги, уважаемый. icon_lol.gif
цитата
16/03/10 в 13:40
 ibiz
gameover писал:
когда речь идет о промышленных масштабах слово "php" не уместно


конечно, уместно включить мозг и решить задачу наименьшими ресурсами http://www.google.com/search?q=%22Disallow%3A+admin%22+filetype%3Atxt
цитата
16/03/10 в 14:02
 gameover
alex.raven писал:
кто-то основательно промыл вам мозги, уважаемый. icon_lol.gif

хорошо что это были не вы, уважаемый icon_lol.gif
цитата
16/03/10 в 14:08
 gameover
ibiz писал:
конечно, уместно включить мозг и решить задачу наименьшими ресурсами http://www.google.com/search?q=%22Disallow%3A+admin%22+filetype%3Atxt

ололо, включенный мозг скоро сведет задачу к "найти что-нибудь в каком-нибудь robots.txt"
цитата
16/03/10 в 14:25
 Sha
Топик в рекламу, автора в бан.

По проге:
Такая прога сделанная под винду с супер 3Д интерфейсом, качественным звуком, между делом зарабатывающая на форексе пятьсот баксов в час может кого и заинтересовала бы.
Но любой кто знает что такое Linux сам напишет аналогичную на ПХП и не за пару часов, а за пол часа.
цитата
16/03/10 в 14:55
 gameover
Sha писал:
Топик в рекламу

Перенесите плз, если ошибся разделом.


Эта страница в полной версии