Можно ли парсить выдачу Google без прокси? - Форум успешных вебмастеров - GoFuckBiz.com
 
 
Форум успешных вебмастеров - GoFuckBiz.com

  Форум успешных вебмастеров - GoFuckBiz.com > Бизнес-решения > Скрипты, программы и технические решения
Дата
USD/RUB75.6826
BTC/USD63308.5167
Скрипты, программы и технические решения Обсуждаем скрипты, программы и новые технологии.

Закрытая тема
Опции темы Опции просмотра
Старый 05.09.2017, 13:57   #1
weout
Member
 
Регистрация: 10.04.2014
Сообщений: 58
Бабло: $40620
Question Можно ли парсить выдачу Google без прокси?

Вопрос следующий. Можно ли спарсить выдачу гугл без проксей с частотой запросов раз в секунду, не получив капчу?
А второй вопрос. Кто-нибудь обходил ддос защиту сайта типа cloufare при парсинге curlем?
weout вне форума  
Старый 05.09.2017, 16:30   #2
ozzyosborne
Юниор
 
Регистрация: 12.06.2014
Сообщений: 12
Бабло: $2645
По умолчанию

Цитата:
Сообщение от weout Посмотреть сообщение
Вопрос следующий. Можно ли спарсить выдачу гугл без проксей с частотой запросов раз в секунду, не получив капчу?
А второй вопрос. Кто-нибудь обходил ддос защиту сайта типа cloufare при парсинге curlем?
Пробовал в 1000 потоков используя старый софт который уже не поддерживаеться, а сейчас A parser использую с их же проксями. Без проксей 1н раз секунду не получиться на долго ip не хватит сначата полезет recapcha, а потом и вовсе запросы делать не сможешь.
ozzyosborne вне форума  
Старый 05.09.2017, 19:16   #3
weout
Member
 
Регистрация: 10.04.2014
Сообщений: 58
Бабло: $40620
ТС -->
автор темы ТС По умолчанию

Цитата:
Сообщение от ozzyosborne Посмотреть сообщение
Цитата:
Сообщение от weout Посмотреть сообщение
Вопрос следующий. Можно ли спарсить выдачу гугл без проксей с частотой запросов раз в секунду, не получив капчу?
А второй вопрос. Кто-нибудь обходил ддос защиту сайта типа cloufare при парсинге curlем?
Пробовал в 1000 потоков используя старый софт который уже не поддерживаеться, а сейчас A parser использую с их же проксями. Без проксей 1н раз секунду не получиться на долго ip не хватит сначата полезет recapcha, а потом и вовсе запросы делать не сможешь.
А линукс Апарчер поставить можно, с запрсами на php?
weout вне форума  
Старый 05.09.2017, 22:16   #4
sim0n
zenno.pro
 
Аватар для sim0n
 
Регистрация: 29.05.2014
Сообщений: 956
Бабло: $138003
По умолчанию

Цитата:
Сообщение от weout Посмотреть сообщение
Цитата:
Сообщение от ozzyosborne Посмотреть сообщение
Цитата:
Сообщение от weout Посмотреть сообщение
Вопрос следующий. Можно ли спарсить выдачу гугл без проксей с частотой запросов раз в секунду, не получив капчу?
А второй вопрос. Кто-нибудь обходил ддос защиту сайта типа cloufare при парсинге curlем?
Пробовал в 1000 потоков используя старый софт который уже не поддерживаеться, а сейчас A parser использую с их же проксями. Без проксей 1н раз секунду не получиться на долго ip не хватит сначата полезет recapcha, а потом и вовсе запросы делать не сможешь.
А линукс Апарчер поставить можно, с запрсами на php?
можно на линукс поставить
sim0n вне форума  
Старый 06.09.2017, 11:05   #5
slurp
Senior Member
 
Регистрация: 29.11.2016
Сообщений: 117
Бабло: $25175
По умолчанию

Цитата:
Сообщение от weout Посмотреть сообщение
Цитата:
Сообщение от ozzyosborne Посмотреть сообщение
Цитата:
Сообщение от weout Посмотреть сообщение
Вопрос следующий. Можно ли спарсить выдачу гугл без проксей с частотой запросов раз в секунду, не получив капчу?
А второй вопрос. Кто-нибудь обходил ддос защиту сайта типа cloufare при парсинге curlем?
Пробовал в 1000 потоков используя старый софт который уже не поддерживаеться, а сейчас A parser использую с их же проксями. Без проксей 1н раз секунду не получиться на долго ip не хватит сначата полезет recapcha, а потом и вовсе запросы делать не сможешь.
А линукс Апарчер поставить можно, с запрсами на php?
можно, на линуксе быстро и стабильно работает
slurp вне форума  
Старый 18.09.2017, 20:17   #6
ozzyosborne
Юниор
 
Регистрация: 12.06.2014
Сообщений: 12
Бабло: $2645
По умолчанию

Цитата:
Сообщение от weout Посмотреть сообщение
Цитата:
Сообщение от ozzyosborne Посмотреть сообщение
Цитата:
Сообщение от weout Посмотреть сообщение
Вопрос следующий. Можно ли спарсить выдачу гугл без проксей с частотой запросов раз в секунду, не получив капчу?
А второй вопрос. Кто-нибудь обходил ддос защиту сайта типа cloufare при парсинге curlем?
Пробовал в 1000 потоков используя старый софт который уже не поддерживаеться, а сейчас A parser использую с их же проксями. Без проксей 1н раз секунду не получиться на долго ip не хватит сначата полезет recapcha, а потом и вовсе запросы делать не сможешь.
А линукс Апарчер поставить можно, с запрсами на php?

можно насколько знаю но сам не ставил
ozzyosborne вне форума