Парсинг гугла

[samprof]

Доброго!
вопросик такой... какая должна быть задержка при парсинге гугла (даже с запасом), чтобы гугл не почитал меня ботом?
Спасибо!

[Net_Prosto]

некоторые запросы всегда в бане. например с оператором inurl, start=500&num=100

[ziavra]

+1 за случайные задержки, если софт свой. С фиксированным таймаутом забанит рано или поздно, или будет такое значение, что смысл парсинга вообще теряется.

[mudoeb]

или будет такое значение, что смысл парсинга вообще теряется

а кто мешает использовать крон ? и несколько разных серверов ?

[ziavra]

Сообщение от mudoeb

а кто мешает использовать крон ? и несколько разных серверов ?

А кто мешает использовать прокси в таком случае?

на счёт коркоративной сетки с одним айпихом - имхо слабо веритсо в такое ) но если так - то мешай с обычными запросами те что тебе надо )