Форум успешных вебмастеров - GoFuckBiz.com

  Форум успешных вебмастеров - GoFuckBiz.com > Бизнес-решения > Поисковые системы
Дата
USD/RUB58.7900
BTC/USD0.0000
Поисковые системы Поисковая оптимизация под Google, Yahoo, Bing и т.д.

Закрытая тема
Опции темы Опции просмотра
Старый 14.01.2009, 02:07   #1
imgreen
Lion King
 
Аватар для imgreen
 
Регистрация: 15.11.2008
Сообщений: 12,074
Бабло: $247698106
По умолчанию гугл парсить не реал?

Запросы вида : site: ... inurl: ... блокирует на 3-м запросе.
imgreen вне форума  
Старый 14.01.2009, 02:12   #2
Dacia
Member
 
Аватар для Dacia
 
Регистрация: 12.01.2009
Сообщений: 39
Бабло: $2080
По умолчанию

Юзай прокси... а тебя блокирует на 3-м запросе потому, что до этого не блокировало и ты этим пользовался =) Не парси сутки и потом на 3-м запросе блокировать уже не будет... временно
Dacia вне форума  
Старый 14.01.2009, 02:36   #3
imgreen
Lion King
 
Аватар для imgreen
 
Регистрация: 15.11.2008
Сообщений: 12,074
Бабло: $247698106
ТС -->
автор темы ТС По умолчанию

Будет блокировать на 10-м запросе ))
Пользовался я не долго этим.
Вообще я пробовал паблик прокси, там такие запросы тоже блокирует
Обычные запросы без операторов нормально идут.
imgreen вне форума  
Старый 14.01.2009, 02:47   #4
Crazy Joker
Ебланнед
 
Регистрация: 21.09.2007
Адрес: бан по просьбе владельца
Сообщений: 1,054
Бабло: $10
По умолчанию

Гугл не дает выпарсить больше 10 страниц с запросами title inurl юзай разновидности типа inurl:.us etc
__________________
бан по просьбе владельца аккаунта
Crazy Joker вне форума  
Старый 14.01.2009, 08:41   #5
Botmaster
Senior Member
 
Аватар для Botmaster
 
Регистрация: 01.07.2007
Сообщений: 704
Бабло: $103605
По умолчанию

Hrefer выпарсивает всё без проблем, какие бы запросы ни были
Botmaster вне форума  
Старый 14.01.2009, 10:42   #6
Metal
rock'n'metal
 
Аватар для Metal
 
Регистрация: 05.10.2007
Сообщений: 309
Бабло: $620
Отправить сообщение для Metal с помощью ICQ
По умолчанию

Цитата:
Сообщение от Botmaster Посмотреть сообщение
Hrefer выпарсивает всё без проблем, какие бы запросы ни были
дак да, базы в 3 ляма как раз плюнуть.
правда, ещё жду софта от Манго, не думаю что парсер будет по хуже...
__________________
coming soon
Metal вне форума  
Старый 14.01.2009, 11:05   #7
Dem0kratizat0r
Senior Member
 
Аватар для Dem0kratizat0r
 
Регистрация: 27.04.2007
Сообщений: 1,685
Бабло: $163746
По умолчанию

У меня просто паузы стоят между запросами в 20 секунд и парсер работает постоянно неделями. Без проксей, конечно. Пока убивается одна база - уже готова новая.
__________________
Mini Bluetooth Speaker
Dem0kratizat0r вне форума  
Старый 14.01.2009, 13:13   #8
aekros
Senior Member
 
Регистрация: 31.01.2008
Сообщений: 223
Бабло: $1810
По умолчанию

и хрефер и алсаб парсят без проблем =)
aekros вне форума  
Старый 14.01.2009, 14:49   #10
imgreen
Lion King
 
Аватар для imgreen
 
Регистрация: 15.11.2008
Сообщений: 12,074
Бабло: $247698106
ТС -->
автор темы ТС По умолчанию

Цитата:
Сообщение от Botmaster Посмотреть сообщение
Hrefer выпарсивает всё без проблем, какие бы запросы ни были
Дык на хрум копить еще надо. Или отдельно можешь продать?
imgreen вне форума  
Закрытая тема



Опции темы
Опции просмотра