Новая тема   Ответить

 just_beginner
Я в этом человек новый, так что за слэнг особо не пинать.
Итак, нужен фри-сервис по парсингу выдачи гугля (если пропарсить дальше первых 100 резалтов невозможно физически - то дальше можно не читать ибо первые 10 страниц я отпарсил вручную). Нужно вытянуть все урлы вида http://mydomain.com/some_file... т.е. задать "маской" определенный домен и все что по нему есть - высосать. Вся соль в том что нужно вытащить и так называемые "опущенные результаты"... поэтому нужен парсер либо с возможностью установления параметров (filter=0) в урле гугля либо чтоб сам парсер понимал что и оттуда нужно тащить...
если кто что непонял спрашивайте - я отвечу...

 just_beginner
попробую объяснить внятней - нужен парсер в котором можно фтыкать урл вида http://www.google.com/search?q=keyword&start=0&ie=utf-8&…S:official
понимаете не?

 Do
Думаю написать парсер не очень дорого. Найди кодера и он тебе напишет то что нужно.

 just_beginner
возможно, но не так сразу...
столько всяких фри парсеров вокруг... и неужели нет такого которому можно давать полность урл который парсить?

 Do
http://se.smartsol.biz/web_parser.pl
Вот парсер,посмотри может подойдет.
И все таки обратись к кодеру. Написание займет ну час максимум,и цена будет не большой. Удачи

 Kn
just_beginner писал:
В гугле есть кнопочка настройки - там можно поставить выводить 100 результатов на странице - по крайней мере когда надо что то ыбстро вручную просмотреть - все легче

 just_beginner
Kn писал:

 just_beginner
кстати, вопрос "между строк" остался незамеченным
где то читал про эту проблему (чота вот нихрена не запонил)... немогу найти где. Результаты после сотого как нибудь вообще получить можно?

 benzole
У Гринвуда парсилка с параметрами гугля есть. тока больше 200-280 результатов не покажет. зато покажет ПР каждой найденной ссылки.

 pashtet
А http://www.siteposition.ru/check.php чем не устраивает?

 just_beginner
benzole писал:
чего то забыл я про нее... значит вопрос номер два, а именно:
just_beginner писал:
снят...

Последний раз редактировалось: just_beginner (24/12/05 в 00:42), всего редактировалось 1 раз

 just_beginner
pashtet писал:
эээ.... курим еще раз то что мне нужно
курим внимательно

 just_beginner
benzole писал:
неа, она тоже не идет в "опущенные результаты"

 benzole
в смысле &filter=0 ?

 just_beginner

в прямом... есть у гугли такой параметр урла... если фтыкаешь его то он показывает опущенные результаты... те, что он пощитал схожими...

 xreload
если готов потратить средства на сабж , стучи , че нить придумаем.

 ibiz
Попробуй вот этот парсер...
Запрос вида
Код:
Фигачишь сюда:
igorek
P.S. Просьба обо всех багах мне в аську отписать или тут...

Последний раз редактировалось: ibiz (05/01/06 в 10:37), всего редактировалось 1 раз

 sadkox
у меня есть для личных нужд :-)
всю 1000 (всё короче что гугл выдает по твоему запросу) просматривает и урлы сохраняет в текстовом файле
токо работает он не на серваке а локально, на дельфях написан
если надо - стучи :-)
поговрим о цене

 just_beginner
ibiz писал:
ВОООО!!! респект тебе
только мне нужно еще чтоб он не постранично выдавал, по 10 резалтов а все сразу

 ibiz
just_beginner писал:

Можно все организовать, тока не на моем сервере, т.к. парсер работает без проксей =)))
Кинь ТЗ в аську, попробую реализовать если несложно.

 just_beginner
ibiz писал:
ну какое там ТЗ
зацикли это дело на 10 страниц гугли и добавь возможность высасывать только урлы из того что выдает скрипт
хост есть...

 ibiz
just_beginner писал:

Да нет проблем, в свободное время, еще и на заказ скрипты пишу, правда редко оно бывает =)))

 just_beginner
рЫспект ibiz'у
помог мне очень

 Do
Я же говорил что кодер быстро сделает свое дело. Удачи...))

 Sergeyka
just_beginner писал:

Дал бы попользоваться?