Места парсинга текста. - Форум успешных вебмастеров - GoFuckBiz.com
 
 
Форум успешных вебмастеров - GoFuckBiz.com

  Форум успешных вебмастеров - GoFuckBiz.com > Общий раздел > Мысли, идеи и полезные статьи
Дата
USD/RUB90.7493
BTC/USD69769.1299
Мысли, идеи и полезные статьи Интересные статьи, а также креативные идеи в сфере онлайн бизнеса.

Закрытая тема
Опции темы Опции просмотра
Старый 17.04.2011, 18:04   #1
0xJah
Курю прах Ленина...
 
Аватар для 0xJah
 
Регистрация: 10.04.2011
Сообщений: 45
Бабло: $9500
По умолчанию Места парсинга текста.

Нужно напарсить много текста, парситься будет каждый день, на уникальность пофиг.

Думал качать много pdf книг и выдергивать от туда текст, но столкнулся с проблемой и откинул эту идею.

Вообщем хотелось бы услышать идеи откуда можно парсить много текста....

Вариант пасинга RSS лент не подходит, т.к. почти на всех лентах только анонсы, а искать ленты в которых полные статьи нет времени, т.к. текстов нужно много и 5-15 лент не хватит. Ну и писать парсеры под сотню сайтов тоже не вариант
0xJah вне форума  
Старый 17.04.2011, 18:06   #2
bess
Раб системы
 
Регистрация: 07.02.2010
Сообщений: 6,163
Бабло: $1153600
По умолчанию

парсить можно из интернета.
__________________
За трафом - в Bizzclick !
Огненное решение для конвертации бурж давнлоад трафика. Работаем с 2015 года. В ПМ.
bess вне форума  
Старый 17.04.2011, 18:08   #3
Drunk Monk
Je suis moine ivre
 
Аватар для Drunk Monk
 
Регистрация: 03.03.2009
Сообщений: 15,268
Бабло: $797172957
По умолчанию

интернет-веб-сайт wikipedia.org, слышал там многобукаф
Drunk Monk вне форума  
Старый 17.04.2011, 18:11   #4
buratin0
Mr. Lucky Guy
 
Аватар для buratin0
 
Регистрация: 27.07.2010
Адрес: RU -> DE -> Asia
Сообщений: 703
Бабло: $174595
Отправить сообщение для buratin0 с помощью ICQ
По умолчанию

что-нибудь типа ezinearticles.com не катит?
Тематики любые, текстов море, по любым кеям. Зарядил того же Зенно на парсинг, им же отрерайтил тексты, воткнул ссылки. Однопоточный Зенно справляется с 1к текстов часа за 4-5
buratin0 вне форума  
Старый 17.04.2011, 18:11   #5
0xJah
Курю прах Ленина...
 
Аватар для 0xJah
 
Регистрация: 10.04.2011
Сообщений: 45
Бабло: $9500
ТС -->
автор темы ТС По умолчанию

Цитата:
Сообщение от bess
парсить можно из интернета.
Говяная шутка
Цитата:
Сообщение от Drunk Monk
wikipedia.org
норм вариант
0xJah вне форума  
Старый 17.04.2011, 18:15   #6
bess
Раб системы
 
Регистрация: 07.02.2010
Сообщений: 6,163
Бабло: $1153600
По умолчанию

Это не шутка.
Парси буржуйские библиотеки онлайн. На торрентах гигабайтными архивами книги выкладывают.
__________________
За трафом - в Bizzclick !
Огненное решение для конвертации бурж давнлоад трафика. Работаем с 2015 года. В ПМ.
bess вне форума  
Старый 17.04.2011, 18:17   #7
0xJah
Курю прах Ленина...
 
Аватар для 0xJah
 
Регистрация: 10.04.2011
Сообщений: 45
Бабло: $9500
ТС -->
автор темы ТС По умолчанию

Да кст, интересует только ру.
0xJah вне форума  
Старый 17.04.2011, 20:58   #8
1een
Senior Member
 
Аватар для 1een
 
Регистрация: 28.05.2009
Сообщений: 1,321
Бабло: $164090
По умолчанию

сниппеты не подойдут?
1een вне форума  
Старый 17.04.2011, 21:24   #9
0xJah
Курю прах Ленина...
 
Аватар для 0xJah
 
Регистрация: 10.04.2011
Сообщений: 45
Бабло: $9500
ТС -->
автор темы ТС По умолчанию

Цитата:
что-нибудь типа ezinearticles.com не катит?
Катит, думаю на этом и заострю внимание. Соберу список каталогов статей и напарсю тексты.
Цитата:
Это не шутка.
Парси буржуйские библиотеки онлайн. На торрентах гигабайтными архивами книги выкладывают.
Подумываю о том, чтобы написать парсер какого нибудь торрент трекера, который напарсит книги в doc формате, скачает и уже от туда выдернет текст.
Цитата:
сниппеты не подойдут?
Нет
0xJah вне форума  
Старый 17.04.2011, 21:27   #10
bess
Раб системы
 
Регистрация: 07.02.2010
Сообщений: 6,163
Бабло: $1153600
По умолчанию

lib.ru как вариант.
__________________
За трафом - в Bizzclick !
Огненное решение для конвертации бурж давнлоад трафика. Работаем с 2015 года. В ПМ.
bess вне форума