Как парсить выдачу Google?

[Venya Tolinov]

Привет! Давно не заходил сюда.

Вот. Возникла задача парсить гугл. Я так понимаю он много чего хранит в куках.

Я думаю надо делать так: регнуть аккаунт, настроить его, языки и прочее, взять все куки за стартовые и вперёд. На долго ли его хватит?

А если без аккаунта то какие стартовые куки брать?

Или вообще можно без кук?

Или всё выше не надо, надо прокси!

Много вопросов, потому что тыкаться не охота, подскажите кто имел с этим дело правильный путь. Спасибо!

[sploit]

Что именно парсить?

[Venya Tolinov]

поисковую выдачу.

[Hector]

Он очень жестко банит. У меня вообще дома бан такой что ни каптчи, ничего. Притом что я обычный юзер. Иногда юзаю бинг, хули поделать)))

[spasibo]

парсю текстовку(сниппеты) без кук, на паблик проксях.
урл типа

http://www.google.com/search?complete=0&q=gfb&num=100&hl=en&start=0&gws_rd=cr,ssl

[Venya Tolinov]

Сообщение от spasibo

парсю текстовку(сниппеты) без кук, на паблик проксях.
урл типа

http://www.google.com/search?complete=0&q=gfb&num=100&hl=en&start=0&gws_rd=cr,ssl

На много хватает одного прокси?

Hector Ха, прикол!

[spasibo]

Сообщение от Venya Tolinov

На много хватает одного прокси?

У меня скрипт ищет через гугл\бинг сайты со списками проксей, чекает прокси на доступность. И перепроверяет постоянно.
А на сколько запросов хватает одной прокси у меня не считает.

[Vincenzo]

Hector, ты шо, руками текстовку собираешь под доры?)) такое обычно от софта/плагинов только бывает.

У меня в сиге прокси под гугл, юзаю их в сеодоре.

[Hector]

Vincenzo, может он подсеть провайдера банит я не знаю, устал уже от этой херни)

[eyescream]

Сообщение от Hector

Vincenzo, может он подсеть провайдера банит я не знаю, устал уже от этой херни)

может у тебя RDS бар? Меня из-за него яша недолюбливает