Спарсить тайтлы - Форум успешных вебмастеров - GoFuckBiz.com
 
 
Форум успешных вебмастеров - GoFuckBiz.com

  Форум успешных вебмастеров - GoFuckBiz.com > Бизнес-решения > Скрипты, программы и технические решения
Дата
USD/RUB90.7493
BTC/USD70282.1132
Скрипты, программы и технические решения Обсуждаем скрипты, программы и новые технологии.

Закрытая тема
Опции темы Опции просмотра
Старый 26.02.2013, 13:50   #1
Oleksiy
Member
 
Регистрация: 05.05.2010
Сообщений: 55
Бабло: $16485
По умолчанию Спарсить тайтлы

Только сила гоуфака в помощь.

Есть список страниц в txt файле очень много (несколько лямов)

как или чем спарсить тайтлы всех страниц и сложить также в txt файл?

выскажите плиз ваше мнение кто что думает
__________________
Куча работы - куча бабла
Oleksiy вне форума  
Старый 26.02.2013, 14:02   #2
wiam
Member
 
Аватар для wiam
 
Регистрация: 10.06.2008
Сообщений: 77
Бабло: $21324
По умолчанию

content downloader
wiam вне форума  
Старый 26.02.2013, 14:35   #3
Strikelol
Senior Member
 
Регистрация: 31.03.2011
Сообщений: 3,360
Бабло: $669045
По умолчанию

Цитата:
Сообщение от wiam Посмотреть сообщение
content downloader
да ну, только при добавлении в список ссылок наверняка сдохнет. Лучше простой скрипт многопоточный на курле написать и все. Разбить список на части, а дальше поочередно собирать данные.
Strikelol вне форума  
Старый 26.02.2013, 14:54   #4
7make
Senior Member
 
Аватар для 7make
 
Регистрация: 02.07.2011
Сообщений: 746
Бабло: $196220
По умолчанию

сервак с а-парсером ща свободен...могу дернуть тайтлы.
icq 6655566
__________________
PharmCash - Лучшие условия и профит в фарме. Hold-0, Refunds-0, Commission–50%, CPU+500. Google нас любит! | Обучаю Монстр2 нужным вам каптчам
7make вне форума  
Старый 26.02.2013, 15:01   #5
inkubus
Senior Member
 
Аватар для inkubus
 
Регистрация: 11.02.2010
Сообщений: 928
Бабло: $176835
По умолчанию

checkparams. хоть сто лямов
inkubus вне форума  
Старый 26.02.2013, 18:32   #6
Oleksiy
Member
 
Регистрация: 05.05.2010
Сообщений: 55
Бабло: $16485
ТС -->
автор темы ТС По умолчанию

Цитата:
Сообщение от inkubus
checkparams. хоть сто лямов
без всяких дополнительных скриптов или еще что-то нужно?
__________________
Куча работы - куча бабла
Oleksiy вне форума  
Старый 26.02.2013, 19:29   #7
inkubus
Senior Member
 
Аватар для inkubus
 
Регистрация: 11.02.2010
Сообщений: 928
Бабло: $176835
По умолчанию

Цитата:
Сообщение от Oleksiy Посмотреть сообщение
без всяких дополнительных скриптов или еще что-то нужно?
https://forum.checkparams.com:9999/v....php?f=15&t=35 автор довольно оперативно отвечает на форуме p.s. а хотя этот модуль есть в стандартном конфиге.
inkubus вне форума  
Старый 26.02.2013, 19:42   #8
Oleksiy
Member
 
Регистрация: 05.05.2010
Сообщений: 55
Бабло: $16485
ТС -->
автор темы ТС По умолчанию

весьма благодарен
__________________
Куча работы - куча бабла
Oleksiy вне форума  
Старый 26.02.2013, 19:51   #9
mlu
Senior Member
 
Аватар для mlu
 
Регистрация: 17.02.2011
Сообщений: 153
Бабло: $26940
Отправить сообщение для mlu с помощью ICQ
По умолчанию

Попробуйте чекпарамс, в комлекте будет и работа с прокси и автоматическая перекодировка в утф-8 и повторы и некоторые другие фичи, всё бесплатно.

Объём файла со ссылками значения не имеет, программа умеет загружать их по мере необходимости.

Модуль есть в дистрибутиве, но не добавлен в основной конфиг, просто скопируйте его туда рядом с остальными модулями внутри тега params.
mlu вне форума