Форум успешных вебмастеров - GoFuckBiz.com

  Форум успешных вебмастеров - GoFuckBiz.com > Бизнес-решения > Скрипты, программы и технические решения
Дата
USD/RUB58.9640
BTC/USD0.0000
Скрипты, программы и технические решения Обсуждаем скрипты, программы и новые технологии.

Закрытая тема
Опции темы Опции просмотра
Старый 26.02.2013, 13:50   #1
Oleksiy
Member
 
Регистрация: 05.05.2010
Сообщений: 55
Бабло: $16485
По умолчанию Спарсить тайтлы

Только сила гоуфака в помощь.

Есть список страниц в txt файле очень много (несколько лямов)

как или чем спарсить тайтлы всех страниц и сложить также в txt файл?

выскажите плиз ваше мнение кто что думает
__________________
Куча работы - куча бабла
Oleksiy вне форума  
Старый 26.02.2013, 14:02   #2
wiam
Member
 
Аватар для wiam
 
Регистрация: 10.06.2008
Сообщений: 78
Бабло: $21194
По умолчанию

content downloader
wiam вне форума  
Старый 26.02.2013, 14:35   #3
Strikelol
Senior Member
 
Регистрация: 31.03.2011
Сообщений: 3,056
Бабло: $632595
По умолчанию

Цитата:
Сообщение от wiam Посмотреть сообщение
content downloader
да ну, только при добавлении в список ссылок наверняка сдохнет. Лучше простой скрипт многопоточный на курле написать и все. Разбить список на части, а дальше поочередно собирать данные.
Strikelol вне форума  
Старый 26.02.2013, 14:54   #4
7make
Senior Member
 
Аватар для 7make
 
Регистрация: 02.07.2011
Сообщений: 737
Бабло: $195160
По умолчанию

сервак с а-парсером ща свободен...могу дернуть тайтлы.
icq 6655566
__________________
PharmCash - Лучшие условия и профит в фарме. Hold-0, Refunds-0, Commission–50%, CPU+500. Google нас любит! | Обучаю Монстр2 нужным вам каптчам
7make вне форума  
Старый 26.02.2013, 15:01   #5
inkubus
Senior Member
 
Аватар для inkubus
 
Регистрация: 11.02.2010
Сообщений: 935
Бабло: $176795
По умолчанию

checkparams. хоть сто лямов
inkubus вне форума  
Старый 26.02.2013, 18:32   #6
Oleksiy
Member
 
Регистрация: 05.05.2010
Сообщений: 55
Бабло: $16485
ТС -->
автор темы ТС По умолчанию

Цитата:
Сообщение от inkubus
checkparams. хоть сто лямов
без всяких дополнительных скриптов или еще что-то нужно?
__________________
Куча работы - куча бабла
Oleksiy вне форума  
Старый 26.02.2013, 19:29   #7
inkubus
Senior Member
 
Аватар для inkubus
 
Регистрация: 11.02.2010
Сообщений: 935
Бабло: $176795
По умолчанию

Цитата:
Сообщение от Oleksiy Посмотреть сообщение
без всяких дополнительных скриптов или еще что-то нужно?
https://forum.checkparams.com:9999/v....php?f=15&t=35 автор довольно оперативно отвечает на форуме p.s. а хотя этот модуль есть в стандартном конфиге.
inkubus вне форума  
Старый 26.02.2013, 19:42   #8
Oleksiy
Member
 
Регистрация: 05.05.2010
Сообщений: 55
Бабло: $16485
ТС -->
автор темы ТС По умолчанию

весьма благодарен
__________________
Куча работы - куча бабла
Oleksiy вне форума  
Старый 26.02.2013, 19:51   #9
mlu
Senior Member
 
Аватар для mlu
 
Регистрация: 17.02.2011
Сообщений: 153
Бабло: $26940
Отправить сообщение для mlu с помощью ICQ
По умолчанию

Попробуйте чекпарамс, в комлекте будет и работа с прокси и автоматическая перекодировка в утф-8 и повторы и некоторые другие фичи, всё бесплатно.

Объём файла со ссылками значения не имеет, программа умеет загружать их по мере необходимости.

Модуль есть в дистрибутиве, но не добавлен в основной конфиг, просто скопируйте его туда рядом с остальными модулями внутри тега params.
mlu вне форума