Парсинг Гугла

[roddik]

Привет. Нужно примерно раз в неделю спарсить выдачу по 100к+ (а лучше 1м+) кеев в гугле. Желательно какой-то софт/сервис, который можно было бы запустить на линуксе и поставить на крон для автоматической обработки результатов. Какие сейчас актуальны варианты? Есть готовый софт?

[AloneSlamer]

Лучше
https://a-parser.com (реф) ничего нет для такой задачи.
100к запросов спарсил в 200 потоков за 3 часа на паблик проксях.
Есть и планировщик.

[anotherbird]

jarun/googler приятная штуковина, если кодишь.

[PowerVPS]

AloneSlamer
Согласен. a-parser лучший вариант, если нужно быстро без заморочек и не умеешь программировать.

[roddik]

Сообщение от anotherbird

jarun/googler приятная штуковина, если кодишь.

хз, поставил, хелло ворлд даже не дало погуглить

Сообщение от AloneSlamer

Лучше
https://a-parser.com (реф) ничего нет для такой задачи.
100к запросов спарсил в 200 потоков за 3 часа на паблик проксях.
Есть и планировщик.

спасибо

[anotherbird]

Сообщение от roddik

хз, поставил, хелло ворлд даже не дало погуглить

я недели 2 назад его нашел и без проксей распарсил 3 ведущие торговые площади с сотней стоп слов, с inurl и прочими опциями. отдаёт мне в php json через exec() молниеносно, как сам гугл.

[andyvein]

Сообщение от anotherbird

jarun/googler приятная штуковина, если кодишь.

очень полезная вещь, спасибо