Форум успешных вебмастеров - GoFuckBiz.com

  Форум успешных вебмастеров - GoFuckBiz.com > Бизнес-решения > Скрипты, программы и технические решения
Дата
USD/RUB58.6680
BTC/USD0.0000
Скрипты, программы и технические решения Обсуждаем скрипты, программы и новые технологии.

Закрытая тема
Опции темы Опции просмотра
Старый 08.05.2015, 15:58   #1
Venya Tolinov
Senior Member
 
Аватар для Venya Tolinov
 
Регистрация: 24.11.2010
Сообщений: 229
Бабло: $52840
Отправить сообщение для Venya Tolinov с помощью Skype™
Question Как парсить выдачу Google?

Привет! Давно не заходил сюда.

Вот. Возникла задача парсить гугл. Я так понимаю он много чего хранит в куках.

Я думаю надо делать так: регнуть аккаунт, настроить его, языки и прочее, взять все куки за стартовые и вперёд. На долго ли его хватит?

А если без аккаунта то какие стартовые куки брать?

Или вообще можно без кук?

Или всё выше не надо, надо прокси!

Много вопросов, потому что тыкаться не охота, подскажите кто имел с этим дело правильный путь. Спасибо!
__________________
Amazon Graffiti - монетизация страниц в Facebook
Venya Tolinov вне форума  
Старый 08.05.2015, 16:47   #2
sploit
Юниор
 
Регистрация: 09.02.2015
Сообщений: 22
Бабло: $5455
По умолчанию

Что именно парсить?
sploit вне форума  
Старый 08.05.2015, 16:53   #3
Venya Tolinov
Senior Member
 
Аватар для Venya Tolinov
 
Регистрация: 24.11.2010
Сообщений: 229
Бабло: $52840
ТС -->
Отправить сообщение для Venya Tolinov с помощью Skype™
автор темы ТС По умолчанию

поисковую выдачу.
__________________
Amazon Graffiti - монетизация страниц в Facebook
Venya Tolinov вне форума  
Старый 08.05.2015, 16:55   #4
Hector
Статус кво
 
Аватар для Hector
 
Регистрация: 02.05.2008
Адрес: California
Сообщений: 11,244
Бабло: $1448050
Отправить сообщение для Hector с помощью ICQ
По умолчанию

Он очень жестко банит. У меня вообще дома бан такой что ни каптчи, ничего. Притом что я обычный юзер. Иногда юзаю бинг, хули поделать)))
__________________
----
Hector вне форума  
Старый 08.05.2015, 16:57   #5
spasibo
banned
 
Регистрация: 14.04.2013
Сообщений: 127
Бабло: $26265
По умолчанию

парсю текстовку(сниппеты) без кук, на паблик проксях.
урл типа
Код:
http://www.google.com/search?complete=0&q=gfb&num=100&hl=en&start=0&gws_rd=cr,ssl
spasibo вне форума  
Старый 08.05.2015, 17:17   #6
Venya Tolinov
Senior Member
 
Аватар для Venya Tolinov
 
Регистрация: 24.11.2010
Сообщений: 229
Бабло: $52840
ТС -->
Отправить сообщение для Venya Tolinov с помощью Skype™
автор темы ТС По умолчанию

Цитата:
Сообщение от spasibo Посмотреть сообщение
парсю текстовку(сниппеты) без кук, на паблик проксях.
урл типа
Код:
http://www.google.com/search?complete=0&q=gfb&num=100&hl=en&start=0&gws_rd=cr,ssl
На много хватает одного прокси?

Hector Ха, прикол!
__________________
Amazon Graffiti - монетизация страниц в Facebook

Последний раз редактировалось Venya Tolinov; 08.05.2015 в 17:23.
Venya Tolinov вне форума  
Старый 08.05.2015, 17:55   #7
spasibo
banned
 
Регистрация: 14.04.2013
Сообщений: 127
Бабло: $26265
По умолчанию

Цитата:
Сообщение от Venya Tolinov Посмотреть сообщение
На много хватает одного прокси?
У меня скрипт ищет через гугл\бинг сайты со списками проксей, чекает прокси на доступность. И перепроверяет постоянно.
А на сколько запросов хватает одной прокси у меня не считает.
__________________
не за что
spasibo вне форума  
Старый 08.05.2015, 18:16   #8
Vincenzo
Senior Member
 
Аватар для Vincenzo
 
Регистрация: 20.03.2014
Сообщений: 542
Бабло: $88499
Отправить сообщение для Vincenzo с помощью ICQ
По умолчанию

Hector, ты шо, руками текстовку собираешь под доры?)) такое обычно от софта/плагинов только бывает.

У меня в сиге прокси под гугл, юзаю их в сеодоре.
Vincenzo вне форума  
Старый 08.05.2015, 18:20   #9
Hector
Статус кво
 
Аватар для Hector
 
Регистрация: 02.05.2008
Адрес: California
Сообщений: 11,244
Бабло: $1448050
Отправить сообщение для Hector с помощью ICQ
По умолчанию

Vincenzo, может он подсеть провайдера банит я не знаю, устал уже от этой херни)
__________________
----
Hector вне форума  
Старый 08.05.2015, 18:26   #10
eyescream
don't hurt me, no more
 
Аватар для eyescream
 
Регистрация: 16.07.2014
Сообщений: 564
Бабло: $72130
По умолчанию

Цитата:
Сообщение от Hector Посмотреть сообщение
Vincenzo, может он подсеть провайдера банит я не знаю, устал уже от этой херни)
может у тебя RDS бар? Меня из-за него яша недолюбливает
eyescream вне форума  
Закрытая тема



Опции темы
Опции просмотра