Глубокий парсинг подсказок гугла.

[inkubus]

Делал для себя парсер гугло-подсказок, и что-то в итоге сделал.

Можно собрать на много больше ключей чем есть в платных базах.

Для примера напарсил подсказок по кейворду "iphone"
В базе actualkeywords (за июль вроде) получилось "Total: 113950"
В базе wordstream.com "Results for: iphone / Showing top 100 of 316,571 keywords"
Я собрал 573к Мог бы и больше собрать но для примера думаю хватит. Вот и сам пример http://www.mediafire.com/?93xov8d58wyhvb0

Плюс эти кеи можно чекнуть на траф в адвордс.

Надо будет кому-нибудь такой сервис? Если да то сколько платить готовы?


p.s. пока не проверял но судя повсему все языки могу парсить.

[spamless]

Сообщение от kalombo

Ну хз, а если так например https://www.google.com/#hl=en&sa=X&t...w=1288&bih=626 это разве не генеренные?

ты говоришь про related searches или подсказки? имхо это не одно и то же.

[harvey birdman]

Сообщение от spamless

ты говоришь про related searches или подсказки? имхо это не одно и то же.

ах да..ошибься))) в релайтед гамно одно

[Drg]

Сообщение от spamless

Все равно забанит через несколько часов с 1 ип.

Ошибаешься) я в новогодние праздники несколько миллионов кеев напарсил с одного IP по разным языкам, пару дней парсилось) Притом фарма тематику.
Многопоточность да, нельзя, а в один поток без проксей) И без каптч.

Кстати я сейчас в 10 потоков парсю гугл на разные запросы, тоже без проксей и с одного IP) правда приходиться раз в минут 10 капчту ввести) но я себе сделал окошечко) где мне каптча появляется и я спокойно отдыхаю еще 10 мин)

[spamless]

Сообщение от Drg

Кстати я сейчас в 10 потоков парсю гугл на разные запросы, тоже без проксей и с одного IP) правда приходиться раз в минут 10 капчту ввести) но я себе сделал окошечко) где мне каптча появляется и я спокойно отдыхаю еще 10 мин)

И сколько ты его так парсишь непрерывно? Банит же все равно 1 ип при большом числе запросов.

[Drg]

Сообщение от spamless

И сколько ты его так парсишь непрерывно? Банит же все равно 1 ип при большом числе запросов.

я хитрости использую, если без задержки, то банит часа через два, отпускает минут через 30, а если с задержкой в 0.2 сек, не банит совсем) парсил очень долго, бана не было.
Но должен признаться, гугл звереет, раньше я парсил без задержки.

[splogger]

AOL никто не парсит? Зря, он больше 10 подсказок даёт
Снифайте. Я максимум 15 000 выставлял. Если больше, то 500 error...

[Fisherman]

гм, у меня php скрипт, туда грузишь кеев. - у меня штук 40 на вход
set_time_limit(300);
на выходе получаю тысячу кеев примерно из 40ка.

Три раза по 40 - и не работает. какую надо задержку поставить?

[digg]

было б интересно, если сервис на сайте отдельном сделал и чтоб вошел в акк, загрузил бабла, дал пачку кеев и пошел спать, на утро полный отчет - кеи, серчи, выдача и наличие рекламы в выдаче и одних морд, макс PR в топ 10
ну, и сортировка чтоб была по каждому из критериев

зачетный был бы сервис

[inkubus]

Сообщение от digg

было б интересно, если сервис на сайте отдельном сделал и чтоб вошел в акк, загрузил бабла, дал пачку кеев и пошел спать, на утро полный отчет - кеи, серчи, выдача и наличие рекламы в выдаче и одних морд, макс PR в топ 10
ну, и сортировка чтоб была по каждому из критериев

зачетный был бы сервис

и еще кнопку "Шлюхи и Блэкджэк" добавить.

[inkubus]

Сообщение от splogger

AOL никто не парсит? Зря, он больше 10 подсказок даёт
Снифайте. Я максимум 15 000 выставлял. Если больше, то 500 error...

чото с разгону не нашел где. Покажешь хоть направление? )