Форум успешных вебмастеров - GoFuckBiz.com

  Форум успешных вебмастеров - GoFuckBiz.com > Бизнес-решения > Скрипты, программы и технические решения
Дата
USD/RUB58.6690
BTC/USD0.0000
Скрипты, программы и технические решения Обсуждаем скрипты, программы и новые технологии.

Закрытая тема
Опции темы Опции просмотра
Старый 02.08.2012, 03:41   #1
beerhack
Member
 
Аватар для beerhack
 
Регистрация: 04.08.2008
Сообщений: 56
Бабло: $17175
По умолчанию Скрипт парсинга количества страниц в индеске Яндекса

Решил было написать такой, думал, тривиальная задача, но не тут то было, полдня угробил, вот последние 2 часа в дебагере дипиливал, уверен был, что заебца всё будет, но увы( С капчей так и не разобрался, там туева хуча редиректов и уставновки кук.
Страница для парсинга вот http://yandex.ru/yandsearch?site=gofuckbiz.com
Может у кого есть рабочий вариант?
beerhack вне форума  
Старый 02.08.2012, 08:14   #2
sergeospb
коплю на феррари
 
Регистрация: 03.07.2008
Сообщений: 1,260
Бабло: $148195
По умолчанию

Цитата:
Сообщение от beerhack Посмотреть сообщение
Решил было написать такой, думал, тривиальная задача, но не тут то было, полдня угробил, вот последние 2 часа в дебагере дипиливал, уверен был, что заебца всё будет, но увы( С капчей так и не разобрался, там туева хуча редиректов и уставновки кук.
Страница для парсинга вот http://yandex.ru/yandsearch?site=gofuckbiz.com
Может у кого есть рабочий вариант?
Два раза перечитал, нифига не понял. Что не так? Что значит с каптчей не разобрался? Обойти каптчу не смог или засабмитить ocr каптчи?
sergeospb вне форума  
Старый 02.08.2012, 11:20   #3
Ower
ё
 
Аватар для Ower
 
Регистрация: 26.10.2011
Сообщений: 1,490
Бабло: $300250
По умолчанию

oso кодил мне такую штуку, говорит ёбли много и с куками какая то запара + банит быстро прокси.
Ower вне форума  
Старый 02.08.2012, 11:23   #4
KYO
blackseo
 
Аватар для KYO
 
Регистрация: 04.04.2007
Адрес: StandAlone
Сообщений: 1,060
Бабло: $196065
Отправить сообщение для KYO с помощью ICQ
По умолчанию

как часто надо парсить? та же САПа выдергивает ведь кол-во паг в индексе как-то.
__________________
Возьми домой раненую осу и ты узнаешь, чем платит доброта
KYO вне форума  
Старый 02.08.2012, 11:38   #5
oso
кодер
 
Аватар для oso
 
Регистрация: 21.01.2008
Сообщений: 316
Бабло: $69585
По умолчанию

Цитата:
Сообщение от Ower Посмотреть сообщение
oso кодил мне такую штуку, говорит ёбли много и с куками какая то запара + банит быстро прокси.
В итоге я сделал без кук, ибо с ними также банил. (хотя может, я не все куки смог поставить. там хитро как то было вроде)

5-10 запросов и прокси в бане
__________________
php скрипты от $25 Отзывы: 2013-2011, 2010, 2009. acя: 384 846 ноль два шесть
oso вне форума