Спарсить много хуизов - Форум успешных вебмастеров - GoFuckBiz.com - Страница 2
 
 
Форум успешных вебмастеров - GoFuckBiz.com

  Форум успешных вебмастеров - GoFuckBiz.com > Бизнес-решения > Скрипты, программы и технические решения
Дата
USD/RUB90.1887
BTC/USD67783.1316
Скрипты, программы и технические решения Обсуждаем скрипты, программы и новые технологии.

Закрытая тема
Опции темы Опции просмотра
Старый 24.01.2013, 14:27
Start Post: Спарсить много хуизов 
  #11
Drunk Monk
Je suis moine ivre
 
Аватар для Drunk Monk
 
Регистрация: 03.03.2009
Сообщений: 15,268
Бабло: $797172957
По умолчанию

Есть несколько тыщ доменов (до 20к), где можно с минимальными трудностями попарсить хуизов?
Drunk Monk вне форума  
Старый 24.01.2013, 17:15   #12
Subudayj
Member
 
Регистрация: 25.05.2011
Сообщений: 58
Бабло: $10870
По умолчанию

Зоны какие?
Subudayj вне форума  
Старый 24.01.2013, 17:26   #13
Drunk Monk
Je suis moine ivre
 
Аватар для Drunk Monk
 
Регистрация: 03.03.2009
Сообщений: 15,268
Бабло: $797172957
ТС -->
автор темы ТС По умолчанию

com, net, org, info, ru, com.ua - что угодно
Drunk Monk вне форума  
Старый 24.01.2013, 17:31   #14
mlu
Senior Member
 
Аватар для mlu
 
Регистрация: 17.02.2011
Сообщений: 153
Бабло: $26940
Отправить сообщение для mlu с помощью ICQ
По умолчанию

Цитата:
Сообщение от Drunk Monk Посмотреть сообщение
com, net, org, info, ru, com.ua - что угодно
Там в каждой зоне разный формат, в т.ч. и разный формат в рамках одной зоны, нужно спарсить просто сами по себе хуизы или еще и данные внутри хуиза распарсить?
mlu вне форума  
Старый 24.01.2013, 17:57   #15
Drunk Monk
Je suis moine ivre
 
Аватар для Drunk Monk
 
Регистрация: 03.03.2009
Сообщений: 15,268
Бабло: $797172957
ТС -->
автор темы ТС По умолчанию

Это не является проблемой. Проблема - где без гемора забирать полный текст хуйза в больших объемах.
Drunk Monk вне форума  
Старый 24.01.2013, 17:58   #16
Subudayj
Member
 
Регистрация: 25.05.2011
Сообщений: 58
Бабло: $10870
По умолчанию

Прокси + хуиз-сервера официальные не подходят?
С экзотическими зонами могут быть проблемы, так как будет банальный ддос хуиз-сервера, с крупными проблем вроде нет никаких, с .орг я собирал данные по всем доменам за несколько дней.
Subudayj вне форума