парсинг Goggle, Bing, Yandex, etc на заказ

[sergeospb]

Есть возможность организовать в тестовом варианте (прощупать рынок) парсинг Goggle(пока только Goggle). Если будет интерес организуем всевозможных SE. По цене скажем 40-50$ за 1 000 000 результатов уникальных по домену. Запросы без inurl, intitle, etc. Иначе банит ip моментально и не "отпускает" временами до недели. К сожалению, при таком варианте будет попадаться "мусор". Так как скорость парсинга зависит от качества самих запросов, довольно сложно оценивать работу. Пока ограничим временем парсинга - три дня, 50 потоков на клиента, пауза 1 секунда. Пример:

То есть, оплата будет как за 1М, даже если за три дня выпарсилось меньше. Пока все работает в тестовом варианте, возможны некоторые недочеты.

[sergeospb]

Да, забыл сказать, вот запросы со скрина:

"/wp-content/"
"/wp-content/uploads/"
"/wp-content/plugins/"
"/wp-content/index.php" filetypehp
"/wp-login.php" filetypehp
"/readme.html" filetype:html "Open wp-admin/install.php in your browser"
"/wp-includes" filetype:js

[harvey birdman]

для чего такая база? для мучного?

[iloveadult]

обычно при парсинге актуальных урлов - до 10%
при чеке на актив - до 10% от вышеупомянутых 10%.
поэтому это не много, например, для того же хрумера

[Strikelol]

Типа есть парсер баблса - как заработаем 200$ еще - купим A-parser и будем парсить остальное?
п.с. я себе паршу с инурл и нормально все парсится.

[sergeospb]

Сообщение от Strikelol

Типа есть парсер баблса - как заработаем 200$ еще - купим A-parser и будем парсить остальное?
п.с. я себе паршу с инурл и нормально все парсится.

Как будто дело в парсере Нормально - понятие относительное. Ты внимательно смотрел на скрин? Соотношение времени, затраченное на парсинг к кол-ву результатов? У меня же свои ip на сервере, я знаю, что ip банится и когда его "отпускает". Так же я знаю разницу в скорости парсинга с inurl и без него. Не в пользу inurl все говорит.

[Strikelol]

Сообщение от sergeospb

Как будто дело в парсере Нормально - понятие относительное. Ты внимательно смотрел на скрин? Соотношение времени, затраченное на парсинг к кол-ву результатов? У меня же свои ip на сервере, я знаю, что ip банится и когда его "отпускает". Так же я знаю разницу в скорости парсинга с inurl и без него. Не в пользу inurl все говорит.

Хочешь - я тебе по такой цене за это время буду парсить с inurl такое же количество или больше? просто схема у тебя сыровата. А цена этой работе 1/2 цены прочеканой базы для хрумера.

[sergeospb]

Сообщение от Strikelol

Хочешь - я тебе по такой цене за это время буду парсить с inurl такое же количество или больше? просто схема у тебя сыровата. А цена этой работе 1/2 цены прочеканой базы для хрумера.

Я понял сразу, что тебе мое предложение неинтересно. Если честно, вышесказанному тобой я не особо верю и убеждать меня не надо. Если все таки хочется поговорить - велкам в личку. Твое предложение выглядит как придти в магазин, торгующим хлебом и предложить тот же хлеб по той же цене.

[Forbidden]

A-Parser указанное количество парсит за 20 минут

[sergeospb]

Сообщение от Forbidden

A-Parser указанное количество парсит за 20 минут

Ну, я не удивлен, что ты тут описался. Давайте еще соревнования устроим, кто быстрее по каким запросам напарсит. 20 минут? Окей, я беру. Только если не напаршу - неустойка будет? Топик пока выглядит как "о, новая модель тачки вышла, а нафига если есть других стопиццот". Форбидден, ты не хуже меня знаешь что такое парсинг и с чем его едят. А вот не все, кто прочитает твою реплику поймут что ты пошутил. Тоже хлеб мне предлагаешь?