гугл парсить не реал? - Форум успешных вебмастеров - GoFuckBiz.com
 
 
Форум успешных вебмастеров - GoFuckBiz.com

  Форум успешных вебмастеров - GoFuckBiz.com > Бизнес-решения > Поисковые системы
Дата
USD/RUB93.4409
BTC/USD66641.1434
Поисковые системы Поисковая оптимизация под Google, Yahoo, Bing и т.д.

Закрытая тема
Опции темы Опции просмотра
Старый 14.01.2009, 02:07   #1
imgreen
Senior Member
 
Аватар для imgreen
 
Регистрация: 15.11.2008
Сообщений: 13,230
Бабло: $247845871
По умолчанию гугл парсить не реал?

Запросы вида : site: ... inurl: ... блокирует на 3-м запросе.
imgreen вне форума  
Старый 14.01.2009, 02:12   #2
Dacia
Member
 
Аватар для Dacia
 
Регистрация: 12.01.2009
Сообщений: 39
Бабло: $2080
По умолчанию

Юзай прокси... а тебя блокирует на 3-м запросе потому, что до этого не блокировало и ты этим пользовался =) Не парси сутки и потом на 3-м запросе блокировать уже не будет... временно
Dacia вне форума  
Старый 14.01.2009, 02:36   #3
imgreen
Senior Member
 
Аватар для imgreen
 
Регистрация: 15.11.2008
Сообщений: 13,230
Бабло: $247845871
ТС -->
автор темы ТС По умолчанию

Будет блокировать на 10-м запросе ))
Пользовался я не долго этим.
Вообще я пробовал паблик прокси, там такие запросы тоже блокирует
Обычные запросы без операторов нормально идут.
imgreen вне форума  
Старый 14.01.2009, 02:47   #4
Crazy Joker
Ебланнед
 
Регистрация: 21.09.2007
Адрес: бан по просьбе владельца
Сообщений: 1,051
Бабло: $10
По умолчанию

Гугл не дает выпарсить больше 10 страниц с запросами title inurl юзай разновидности типа inurl:.us etc
__________________
бан по просьбе владельца аккаунта
Crazy Joker вне форума  
Старый 14.01.2009, 08:41   #5
Botmaster
Senior Member
 
Аватар для Botmaster
 
Регистрация: 01.07.2007
Сообщений: 1,005
Бабло: $142100
По умолчанию

Hrefer выпарсивает всё без проблем, какие бы запросы ни были
Botmaster вне форума  
Старый 14.01.2009, 10:42   #6
Metal
Senior Member
 
Аватар для Metal
 
Регистрация: 05.10.2007
Сообщений: 310
Бабло: $1235
Отправить сообщение для Metal с помощью ICQ
По умолчанию

Цитата:
Сообщение от Botmaster Посмотреть сообщение
Hrefer выпарсивает всё без проблем, какие бы запросы ни были
дак да, базы в 3 ляма как раз плюнуть.
правда, ещё жду софта от Манго, не думаю что парсер будет по хуже...
__________________
coming soon
Metal вне форума  
Старый 14.01.2009, 11:05   #7
Dem0kratizat0r
Senior Member
 
Аватар для Dem0kratizat0r
 
Регистрация: 27.04.2007
Сообщений: 1,681
Бабло: $163746
По умолчанию

У меня просто паузы стоят между запросами в 20 секунд и парсер работает постоянно неделями. Без проксей, конечно. Пока убивается одна база - уже готова новая.
__________________
Mini Bluetooth Speaker
Dem0kratizat0r вне форума  
Старый 14.01.2009, 13:13   #8
aekros
Senior Member
 
Регистрация: 31.01.2008
Сообщений: 223
Бабло: $1810
По умолчанию

и хрефер и алсаб парсят без проблем =)
aekros вне форума  
Старый 14.01.2009, 14:49   #10
imgreen
Senior Member
 
Аватар для imgreen
 
Регистрация: 15.11.2008
Сообщений: 13,230
Бабло: $247845871
ТС -->
автор темы ТС По умолчанию

Цитата:
Сообщение от Botmaster Посмотреть сообщение
Hrefer выпарсивает всё без проблем, какие бы запросы ни были
Дык на хрум копить еще надо. Или отдельно можешь продать?
imgreen вне форума