X-Parser – парсер статей по ключевым словам на любых языках с уникализацией

[X-Software]

X-Parser – это автоматический парсер статей по ключевым словам или прямым ссылкам. С его помощью Вы сможете парсить статьи с картинками и видео на любых языках через выдачу Яндекса, Гугла или любой другой поисковой системы. X-Parser имеет уникальный алгоритм определения тела статьи на любом сайте, поэтому он очень прост в настройке. Для уникализации контента X-Parser предоставляет Вам возможность смешивать несколько целых статей или частей статей в одну, что дает на выходе объемный читаемый текст, который имеет отличные поведенческие факторы и который очень хорошо воспринимают поисковики.



Возможности X-Parser:

• Автоматический парсинг статей по списку ключевых слов
• Автоматический парсинг статей по списку ссылок
• Парсинг контента баз разметки
• Парсинг метатегов стариниц из топов
• Парсинг контента с разметкой, а так же с изображениями и видео
• Мешап одной статьи из нескольких статей доноров
• Мешап одной статьи из фрагментов нескольких стаей доноров от заголовка до заголовка
• Мешап из абзацев с добавлением заголовков, изображений и видео
• Мешап из предложений с добавлением заголовков, изображений и видео
• Произвольное формирование контента из макросов
• Произольное добавление поисковых систем
• Парсинг контента на любых языках
• Простота освоения и использования
• Парсинг выдачи поисковиков через XML-сервисы

Если Вы знаете, как использовать копипаст при наполнении сайтов, то X-Parser станет для Вас наилучшим инструментом. Для подробного ознакомления с функционалом программы Вы можете скачать демоверсию по ссылке ниже. Если же Вы не еще не знакомы с парсингом контента, и хотели бы разобраться в этом, то так же скачав демоверсию, без труда сможете разобраться в этом вопросе. Даже если Вы не имеете никакого опыта работы с парсерами, Вы без труда сможете с ним разобраться, так как главное преимущество X-Parser перед любыми конкурентами – это простота использования и полная автоматизация наполнения сайта контентом, особенно если это сайт на Wordpress или же Ваш сайт имеет плагин для импорта контента.

Подробнее с функционалом X-Parser, а так же скачать демоверсию или купить его вы сможете на официальном сайте программы.

[Zork]

Лет 8 назад приобрел, ахуевше парсит контент. Респектую за поддержку софта

[Wonder]

Плюсую, хороший парсер. Юзал ломаный в бородатом году, потом лицуху купил, еще а-парсера не было вроде. Поддержка тоже запомнилась только с положительной стороны.

[Capone]

под винду?

а под мак или серверного варианта нету?

[X-Software]

Сообщение от Capone

под винду?

а под мак или серверного варианта нету?

Да он виндовый, клиенты юзают либо через виртуалку, либо на виндовых VPS. Серверный вариант, если сделать под линуксовый сервак на PHP или том же питоне, при установке на сервер потребует настройки сервака, что вызывает проблемы у огромного числа пользователей, поэтому проще работать с виндовым софтом и виндовыми серваками. Берется любой VPS виндовый или виртуалка на Маке, ставится .NET 4.5 и софт в 99% случаев запускается и работает у всех без проблем. Ну в 1% случаев что-то еще доустановить нужно, но это просто решается.

[Zork]

Сообщение от Wonder

Плюсую, хороший парсер. Юзал ломаный в бородатом году, потом лицуху купил, еще а-парсера не было вроде. Поддержка тоже запомнилась только с положительной стороны.

Разраб на первых версиях со мной в аське пол дня сидел искал причину утечки памяти и кидал билды потестить. Я такого не встречал.

ps я смело и рисково добавлю, это софт уровня пандоры по заявленым характеристикам и стабильности работы. маркетинг гавно, только поэтому цена такая низкая. я не ангажирован, есть интерес, чтобы софт жил

[NoR]

+1, годнота.

Раз уж топик появился, хотел бы уточнить несколько вопросов.

1. Количество потоков.

Этот параметр на практике ни на что не влияет. По крайней мере в текущей версии парсера.

Сервак 128 гб, канал 1гб/с, закинул в настройки 300 хороших проксей, выставил все чекбоксы, поставил 200 потоков - парсит с такой же скоростью, как и в один поток без проксей.


2. Дубли статей.

Было бы круто сделать проверку в режиме онлайн - на дубль контента. Не только по урлу, но и полному совпадению символов или хэшу.

Спарсил 10к статей при включенном режиме логирования дублей, закинул эту пачку в Зебру - Удалить полные дубли- на выходе имеем 4700 статей =(

3. Было бы круто добавить режим сохранения поискового сниппета, помимо того, что сейчас можно парсить выдачу ссылок по кею.


Соф очень годный, всем брать =)

[X-Software]

Сообщение от NoR

1. Количество потоков.

С потоками получается такая картина, текущая версия работает по схеме: зашел на ПС в одном потоке, получил ссылки, получил контент, проверил достаточно ли он получил статей, если нет - идет дальше. Таким образом, чтобы загрузить ПК, нужно открыть несколько копий, что все и делают. А количество потоков - это сколько потоков использовать при парсинге контента, по факту больше 10 нет смысла использовать, если в выдаче 10 ссылок. Раньше все поисковики давали возможность выбирать до 100 ссылок в выдаче и можно было и 100 потоков использовать легко, но сейчас для наилучшего КПД просто в несколько копий парсить имеет смысл. С качественным многопотоком в C# есть проблема, как показала практика, КПД нескольких запущенных копий всегда выше кратно количеству ядер, поэтому несколько копий текущей версии парсера будут давать всегда наивысшее КПД, что бы мы не делали с потоками внутри одного процесса.

Сообщение от NoR

2. Дубли статей.

Тут вопрос: там пролазят прям дубли полные символ в символ или же нужно шинглами проверять? Если дубли прям полные, то это можно сделать, а если по шинглам, то мы рискуем замедлить парсинг сильно, лучше в данном случае как раз зеброй удалять после парсинга. Уточните этот момент, собственно проверку на полные дубли сделать не проблема.

Сообщение от NoR

3. Было бы круто добавить режим сохранения поискового сниппета, помимо того, что сейчас можно парсить выдачу ссылок по кею.

Сниппеты добавлю, как немного подтяну маркетинг, а то как выше подметил Zork - маркетинг у меня гамно. Если, кстати, кто-то чем-то может помочь в плане маркетинга или проконсультировать - пишите в телегу XSoftwareSupport, есть возможность предоставить комиссию.

[ASnton76]

также есть данный софт, покупкой очень доволен. парсит все. Что очень приятно радует, так то что разраб постоянно помогает в настройке или проблемах при парсинге. По любым вопросам всегда получал ответы. Также очень помогает программа ПИнгвин, помогает в работе с большими файлами, когда другие проги не справляются. Ни разу не пожалел о покупке.

[Dor]

работа через прокси доступна?
можно задать кукисы руками?
самому поисковик добавить можно ?