Парсинг ссылок в подписи - Форум успешных вебмастеров - GoFuckBiz.com
 
 
Форум успешных вебмастеров - GoFuckBiz.com

  Форум успешных вебмастеров - GoFuckBiz.com > Бизнес-решения > Скрипты, программы и технические решения
Дата
USD/RUB93.4409
BTC/USD64732.6476
Скрипты, программы и технические решения Обсуждаем скрипты, программы и новые технологии.

Закрытая тема
Опции темы Опции просмотра
Старый 15.10.2014, 13:37   #1
ErmolovT
Senior Member
 
Регистрация: 06.04.2012
Сообщений: 485
Бабло: $126470
По умолчанию Парсинг ссылок в подписи

Есть форум, довольно крупный. Надо пропарсить его страницы и собрать базу ссылок которые у пользователей в подписи, желательно с анкорами.

Как это можно сделать? Есть сервисы или программы под это?
ErmolovT вне форума  
Старый 15.10.2014, 14:04   #2
Popobawa
Senior Member
 
Аватар для Popobawa
 
Регистрация: 19.10.2012
Адрес: Gofuck People's Republic
Сообщений: 1,457
Бабло: $280100
По умолчанию

Цитата:
Как это можно сделать?
Ну если булка как здесь, то по идее можно перейти в "Пользователи", спарсить ссылки на них, потом при переходи на каждого переходить в определённую вкладку, хотя здесь не надо, сразу на странице юзера парсить текст между <dd id="signature"> ... </dd>, ну примерно так.
Popobawa вне форума  
Старый 15.10.2014, 14:17   #3
ErmolovT
Senior Member
 
Регистрация: 06.04.2012
Сообщений: 485
Бабло: $126470
ТС -->
автор темы ТС По умолчанию

Да, сайт на vbulletin, там вроде еще проще можно, есть страница пользователя /member/name и на ней список сайтов которые юзеру принадлежат. Вот он мне и нужен.

Если кто может помочь готов материально отблагодарить.
ErmolovT вне форума  
Старый 15.10.2014, 14:35   #4
smsupport
Senior Member
 
Аватар для smsupport
 
Регистрация: 12.07.2009
Сообщений: 1,581
Бабло: $361065
По умолчанию

Открыть сайтмап, спарсить все паги. Затем проходим ботом и собираем линки, удаляем дубликаты. Это может сделать зеннопостер. Ток попыхтеть нужно будет.
__________________
Swissdoc heavy spec
smsupport вне форума  
Старый 15.10.2014, 14:52   #5
Matt Cutts
Senior Member
 
Регистрация: 24.09.2009
Сообщений: 821
Бабло: $106455
По умолчанию

Цитата:
Сообщение от ErmolovT Посмотреть сообщение
Да, сайт на vbulletin, там вроде еще проще можно, есть страница пользователя /member/name и на ней список сайтов которые юзеру принадлежат. Вот он мне и нужен.

Если кто может помочь готов материально отблагодарить.
Привет. Стукни мне icq 566864733. Если форум не будет бузить - благодарности не потребую)
Matt Cutts вне форума