Парсинг Хрефом

[RS500]

Как заставить Хреф парсить гугл много и долго? Обычные прокси не помогают, парсит минут 10 потом тишина.

[RS500]

На анонимность вообще при парсинге надо чекать или это лишнее?

[1een]

Конечно, не надо. Это лишнее

[dim7]

Сообщение от RS500

Как заставить Хреф парсить гугл много и долго? Обычные прокси не помогают, парсит минут 10 потом тишина.

а какая у тебя версия хрума? может че там гугле поменялось а у тебя нет.
ты парсешь с подстановками? операторы юзаешь?

добавь подстановок, убери операторы, подпишись на прокси
и будет тебе счастье.

[kip]

Что есть подстановка, простите?

[RS500]

Сообщение от dim7

а какая у тебя версия хрума? может че там гугле поменялось а у тебя нет.
ты парсешь с подстановками? операторы юзаешь?

добавь подстановок, убери операторы, подпишись на прокси
и будет тебе счастье.

версия хорошая. операторы юзаю.
что такое подстановки?
где подписаться на прокси?

[dim7]

Сообщение от RS500

версия хорошая. операторы юзаю.
что такое подстановки?
где подписаться на прокси?

операторы лучше не юзать, а к основным признакам для парсинга нужно добавить 1000 популярных слов.

где подписываться , тут лучше тебе самому решить, взяв на тесты в разных местах. можешь стукнуть в пм, дам потестить из паблика.

[Troy]

Сообщение от RS500

где их взять?

_ttp://awmproxy.com/socks_proxy.php - с ними нормально парсит.

А вообще слушай, что говорит Botmaster. Ищи и будет счастье.

[RS500]

Кто объяснит, что такое Sieve-filter? И надо ли оно?

[Botmaster]

Сообщение от RS500

Кто объяснит, что такое Sieve-filter? И надо ли оно?

В справке написано.

Это для фильтрации того, что уже спарсили. Чтоб отсеивать мусор и неподходящую шелупонь. Если через чисто через inurl:"..." парсится, без подстановок, то не надо. Каждый сам для себя решает.

Вообще на тех.поддержке всё есть, странно что здесь такие вопросы задаются