Посоветуйте парсеры Гугла

[Excellent]

всем привет
кто-нибудь еще парсит щас выдачу гугли?
подскажите софт годный под линух если есть таковой, кроме апарсера

[antonanet]

А где взять такого хостера чтоб за 150р ему было пох на абузы?)

[imgreen]

Сообщение от antonanet

А где взять такого хостера чтоб за 150р ему было пох на абузы?)

Какие абузы могут быть за парсинг?

[antonanet]

Сообщение от imgreen

Какие абузы могут быть за парсинг?

Могут быть абузы и за чек паблик проксей.
И за парсинг тоже, тем более за парсинг не просто морды, а за перебор путей (поиск админки/плагинов и т.п.)

[moneyleads]

Сообщение от antonanet

Могут быть абузы и за чек паблик проксей.
И за парсинг тоже, тем более за парсинг не просто морды, а за перебор путей (поиск админки/плагинов и т.п.)

Могут. Мне за парсинг вордпрессов на xml rpc уже присылали. Просто за парсинг на коды ответов, без всякого перебора паролей. По сути поисковые боты примерно так-же заходят на страницы.

[imgreen]

Сообщение от moneyleads

Могут. Мне за парсинг вордпрессов на xml rpc уже присылали. Просто за парсинг на коды ответов, без всякого перебора паролей. По сути поисковые боты примерно так-же заходят на страницы.

Потому что это не парсинг страниц, а похоже на сканирование на уязвимости.

[ssoleg]

Сообщение от imgreen

Какие абузы могут быть за парсинг?

это да, просто на морду, это немцы очень любят, зайдешь в течении дня на несколько доменов что одному челу принадлежат, сразу шлют, еще и попадались такие, что логи подделывали, типа на wp-admin, login и тд и прочее заходы были, хотя это просто невозможно было по условиям парсера, да и часто забывали размер ответа подделать

[imgreen]

Сообщение от ssoleg

это да, просто на морду, это немцы очень любят, зайдешь в течении дня на несколько доменов что одному челу принадлежат, сразу шлют, еще и попадались такие, что логи подделывали, типа на wp-admin, login и тд и прочее заходы были, хотя это просто невозможно было по условиям парсера, да и часто забывали размер ответа подделать

Норм хостер таких проигнорит и все

[moneyleads]

Сообщение от imgreen

Норм хостер таких проигнорит и все

Народ перегретый просто с этими парсингами и взломами, вордпрессы ленивый только не ломает.
Мне тогда кучу логов прислали - заходы на /xmlrpc.php - типа это попытка взлома, типа это ddos.
И все заходы по протоколу GET. Ну отписал хостеру со ссылкой на описание xml rpc, где черным по белому написано, что
удаленный вызов процедур с помощью XML-RPC возможен только по POST запросам и что абузеры пусть идут учить мат. часть.
Или в логи пусть посмотрят, там видно, что бот Гугла чаще эти файлы посещает, чем мой парсер несчастный. И GET запросы
этот скрипт ну никак вообще не обрабатывает, о чем собственно в нем и написано, если в браузере открыть.
Вот с таким скрином во весь экран: http://screenshot.ru/e19c080b7e721a5e48826bd5840aa3df На этом абуз и закрылся.