Форум успешных вебмастеров - GoFuckBiz.com

  Форум успешных вебмастеров - GoFuckBiz.com > Разное > Объявления о покупке/продаже товаров и услуг
Дата
USD/RUB58.8610
BTC/USD0.0000
Объявления о покупке/продаже товаров и услуг Также в этом разделе следует размещать и предложения о сотрудничестве.

Закрытая тема
Опции темы Опции просмотра
Старый 01.08.2014, 15:00   #1
digg
$400
 
Аватар для digg
 
Регистрация: 17.05.2009
Сообщений: 7,995
Бабло: $1214850
Отправить сообщение для digg с помощью ICQ
Thumbs up Парсер сниппетов

1. Даешь пачку кеев, пачку проксей;
2. По кеям парсит сниппеты;
3. Чистит от мусора;

Получаем такой текст

More

уникальность примерно 80%
проверял тут http://www.content-watch.ru/text/

скрипт на php
базы в текстовых файлах

20 WMZ
3355два9743
digg на форуме  
Старый 01.08.2014, 16:59   #2
Дима Кайфулин
Ебланнед
 
Регистрация: 30.06.2014
Сообщений: 85
Бабло: $11890
По умолчанию

Offtopic
__________________
- Запрещено иметь несколько аккаунтов одному человеку. В случае обнаружения будут забанены как основной аккаунт, так и его клоны.
Дима Кайфулин вне форума  
Старый 01.08.2014, 18:36   #3
digg
$400
 
Аватар для digg
 
Регистрация: 17.05.2009
Сообщений: 7,995
Бабло: $1214850
ТС -->
Отправить сообщение для digg с помощью ICQ
автор темы ТС По умолчанию

Цитата:
Сообщение от Дима Кайфулин Посмотреть сообщение
Offtopic
20 вмз, а копий хватит на всех ))
digg на форуме  
Старый 08.08.2014, 23:44   #4
digg
$400
 
Аватар для digg
 
Регистрация: 17.05.2009
Сообщений: 7,995
Бабло: $1214850
ТС -->
Отправить сообщение для digg с помощью ICQ
автор темы ТС По умолчанию

парень спрашивал в аське парсит ли на русском языке
сказал ему, что смогу потестить вечером
а я его не сохранил в списке аськи и не могу теперь найти

короче потестил, пашет
чутарик доработал там iconv("windows-1251","UTF-8", в парочке мест - все ок
digg на форуме  
Старый 09.08.2014, 00:41   #5
Sultan
на позитиве!
 
Аватар для Sultan
 
Регистрация: 23.01.2011
Сообщений: 1,704
Бабло: $301815
По умолчанию

чот мало текста утром дичи заклююют
Sultan на форуме  
Старый 27.04.2015, 00:35   #6
digg
$400
 
Аватар для digg
 
Регистрация: 17.05.2009
Сообщений: 7,995
Бабло: $1214850
ТС -->
Отправить сообщение для digg с помощью ICQ
автор темы ТС По умолчанию

Ап софта:

Появилась возможность парсить, задав урл поисковика с доменной зоной, например:

google.ca
google.com
google.ru
google.com.ua
aol.de
aol.com
aol.co.uk

и язык парсинга, например:

en
ru
de
fr
es
и тд

А также автоматом отрезать собранный текст по максимальной длинне, например не более 3000 символов.
текст чистится от мусора внутри автоматом.

пока что гугл хавает сниппеты хорошо и соотносит паги с ними точно релевантно по кеям

по эксплуатации: работает на паблик проксях многопоточно. лучшие результаты с потоками 300+ по списку паблик проксей 50к+
digg на форуме  
Старый 27.04.2015, 15:05   #7
websheff
Юниор
 
Регистрация: 07.02.2013
Сообщений: 9
Бабло: $2360
По умолчанию

Нужный парсер. Шуршит аж гай шумит!
Спасибо ТС-у, быстро внес доработки.
websheff вне форума