A-Parser - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois, etc

[Forbidden]

Что такое A-Parser?

Это быстрый парсер с уклоном на универсальность, удобность и прозводительность.
На данный момент умеет парсить:

Поисковые системы

• Google
• Bing
• Yahoo
• Yandex
• QIP - парсинг яндекса через search.qip.ru с выдачей до 5000 результатов с одного запроса
• Парсер AOL, реализованный через парсер Net::HTTP с опциями Parse custom result, Use pages и др.

Каждый парсер может парсить ссылки, анкоры, сниппеты, количество страниц

Для гугла умеет обходить ограничение в 1000 результатов(скоро и для всех остальных парсеров так же будет), т.е. по одному запросу собирает всю выдачу

Парсеры кейвордов

Сервисы поиска ключевых слов

• Yandex WordStat - собирает все кейворды и количество показов до указанной страницы. Так же собирает дополнительные кейворды, показы по главному кейворду и дату обновления статистики. Может сам подставляет найденные ключевые слова в запросы до указанного уровня.

Подсказки поисковых систем

• Подсказки и релейтед кеи Google
• Подсказки и релейтед Bing
• Подсказки, релейтед и трендовые кеи Yahoo
• Подсказки и релейтед Yandex

Для подсказок гугла умеет автоматически собирать все кеи(подстановки до указанного уровня), для всех остальных парсеров такая возможность скоро так же появится

Параметры сайтов и доменов

• Rank::Ahrefs - парсер количества беклинков с сервиса ahrefs.com, парсит общее число беклинков, количество ссылающихся страниц, количество уникальных IP-адресов, подсетей класса C и количество уникальных доменов
• SE::Google::Position - проверка позиции домена по ключевому слову в гугле
• Google PageRank - PR страниц и доменов
• SE::Google::SafeBrowsing - проверка домена в блеклисте гугла(подпись harm в выдачи)
• SE::Yandex::TIC - проверка тематического индекса цитирования домена в Яндексе(тИЦ)
• DMOZ - наличие сайта в каталоге DMOZ
• Google TrustRank - проверка сайта на траст гугла(дополнительный блок ссылок в выдаче и т.п.)
• Whois - дата экспайра домена
• Bing LangDetect - проверка языка домена\ссылки
• Net::DNS - парсер резолвит домены в IP адреса
• Rank::Category - автоматически определяет категорию сайта на английском языке, категории такие же как в dmoz.org, например google.com - Computers/Internet/Searching
• Rank::CMS - определение более 200 видов CMS на основе признаков. Определяет все популярные форумы, блоги, CMS, гестбуки, вики и множество других типов движков

Парсеры различных сервисов

• SE::Yandex::Direct - парсер direct.yandex.ru, парсит список всех объявлений(титл, текст, домен) и кол-во объявлений по определенному запросу
  SE::Google::Images - парсер Google Images, парсит прямые ссылки на картинки, сниппеты, разрешение и размер
  SE::Bing::Translator - переводчик через сервис www.bing.com/translator/, поддерживает все языки сервиса, включая автоопределение языка оригинала текста

Парсинг контента

• HTML::LinkExtractor - парсит внешние и внутренние ссылки с указанного сайта, может ходить по внутренним ссылкам до выбранного уровня.
• Net::HTTP - скачивает указанную страницу, поддерживает многостраничный парсинг.

Планируется еще много парсеров в ближайшем будущем, все созданно для того чтобы быстро добавлять новые парсеры.

Обработка и фильтрация результатов

• Фильтрация любого результата по вхождению строки, эквивалентности строк, регулярному выражению, больше, меньше, равно и т.п.
• Уникализация любого результата по строке, домену, главному домену, папке, строке без учета параметров.
• Парсинг любого результата с использованием регулярных выражений.

Не было бы никакого A-Parser'а если бы не он не имел все нижеперечисленные преимущества, оставляя остальные парсеры далеко в стороне:

• Полностью интерактивный мега-юзабильный веб интерфейс
  • Быстрое добавление заданий - Quick Task, когда не нужны никакие настройки, а хочется только побыстрому спарсить результаты
  • Расширенный редактор заданий, позволяет комбинировать несколько парсеров в одном задании, к примеру можно одновременно парсить ссылки со всех парсеров поисковых систем, делать уник по всем результатам прямо в процессе работы и т.д.
  • Очередь заданий - статистика в реальном времени, выполнение одновременно нескольких заданий и т.д.
  • Встроенные подсказки для элементов управления позволяют просматривать хелп непосредственно в интерфейсе
  • Поддержка русского и английского языка
• Огромная скорость работы, подробнее тут: Производительность
• Поддержка двух самых популярных платформ - Linux и Windows, производительность под Windows фактически не отличается от Linux версии
• User API - интеграция возможностей парсера в свои скрипты, подробнее тут: User API, взаимодействие с другими программами и скриптами
• Открытая разработка, багтрекер, выслушивание всех мнений и их реализация
• Первоклассная тех поддержка, знакомая многим по моему старому проекту - A-Poster'у
• Данный список можно еще долго продолжать, в ближайшее время все уникальные возможности и подробное их описание появится в Wiki

Более подробное описание и скриншоты

Wiki - дополнительная информация, инструкции и т.д.

Скриншот интерфейса:


На данном скриншоте показан пример добавления задания на парсинг одновременно трёх поисковых систем - Google, Bing и Yahoo, одновременный уник по домену всех результатов

Ценовая политика

На данный момент продается версия Pro(все парсеры) и Enterprise(все парсеры + API)

• Цена лицензии - 200$
  
• Первый год обновления бесплатны, после первого года использования абонентская плата за обновления - 15$ за каждые 3 месяца(возможность работы без обновлений сохраняется)
  
• Цена лицензии с API: +50$ к стоимости основной лицензии
  
• Всем клиентам кто имеет лицензию на A-Poster - цена всего 150$
  
• Комплект A-Parser + A-Poster всего за 300$!
  
• Специальное предложение - всем покупателям A-Parser'а предоставляются приватные прокси на 20 потоков на 2 недели!

Лицензия позволяет запускать A-Parser на одном сервере\компьютере(напоминаю поддерживается работа на всех версиях Windows и Linux). Переносить можно бесплатно, нельзя запускать на нескольких компьютерах одновременно.

Для покупки парсера зарегистрируйтесь на сайте http://a-parser.com и свяжитесь со мной по любому из следующих контактов:

• ICQ 777889
  
• Jabber/GoogleTalk [email protected]
  
• Skype frb403

Предварительно перед покупкой с удовольствием отвечу на любые ваши вопросы, а также возможно обсуждение реализации недостающего вам функционала.

[rushter]

Интерфейс крутой, опять perl ?

[Forbidden]

Сообщение от rushter

Интерфейс крутой, опять perl ?

опять перл)
но этого не видно теперь вообще, и на винде и на линуксе установка производится без моего участия, без установки перла, апача и т.п.
распаковал и запустил
Вот из вики:
Установка на Windows
Установка на Linux

[Strannic]

ценовая политика да еще и с абонентской платой также оставляет всех конкурентов позади . . .

[Forbidden]

Сообщение от Strannic

ценовая политика да еще и с абонентской платой также оставляет всех конкурентов позади . . .

Подробнее? Ближайший конкурент с куда меньшим числом возможностей и скоростью имеет такую же цену

Поверь, тут есть за что платить, цена не высосана из пальца

По поводу абонентской платы - это нормальная практика, у многих продуктов с постоянными обновлениями она есть. Тем более для такого продукта как парсер - постоянные изменения выдачи ПС и других сервисов с которых он собирает информацию. Если взять конкретно A-Parser то на подходе еще огромное число фич, за которые не будет браться дополнительная плата. Если учесть что стоимость абонентки сравнительно мала - я не вижу здесь каких либо проблем. Более того планируются бонусы и акции по которым можно будет получать абонентку бесплатно на определенный период времени.

[Хуян Машонкин]

Парсер Форбидена приобрел, когда он был в приватном бетатестировании , пару месяцев назад.
За эти пару месяцев было сделано просто очень много , прикручены фичи которые необходимы каждому вебмастеру , все это наглядно видно из скринов.

Основные положительные моменты на мой взгляд.

1.Очень простой способ установки на машину ,не маловажная деталь.

2.Режим простого прасинга аля парсер баблса ,вбил признак ,отметил несколько чекбоксов и вперед. Вся выдача через некоторое время у вас в текстовике.

3. Продвинутый режим.Фишки которые есть в A-parser'е нет ни в одном паблик парсере.

4. И основное приемущество это просто реально большая скорость работы.
А какой еще скорости можно было ожидать от автора А-Poster ?)))

5.Сам Форбиден почти всегда онлайн) и все новые действительно нужные просьбы по парсеру учитывает и реализовывает. Что не скажешь о других разработчиках парсеров котрые актульны на данны момент.

Вообщем, всем кому действительно необходим хороший быстрый парсер с отличной техподдержкой надо брать не раздумывая!

[1een]

Очень дорого, не изучил ты рынок. Не взлетит.

Hrefer, конечно ,не продается отдельно, но тут нагуглился другой парсер ПС по другой цене. Парсер подсказок и проверки доменов есть абсолютно for free.

"Легкая установка" - это lol . Почему бы в преимущества не записать управление мышью?

Совет: снижай цену просто до абонентки.

[mKostya]

Сообщение от 1een

Очень дорого, не изучил ты рынок. Не взлетит.

Hrefer, конечно ,не продается отдельно, но тут нагуглился другой парсер ПС по другой цене. Парсер подсказок и проверки доменов есть абсолютно for free.

"Легкая установка" - это lol . Почему бы в преимущества не записать управление мышью?

Совет: снижай цену просто до абонентки.

ага, а еще лучше доплачивай баксов 100

[1een]

А что, мне идея парсера за абонентку видится жизнеспособной. Эта ниша свободна. Сколько отпарсил - столько и заплатил

[rushter]

Цена нормальная, продаваться будет, поверьте .
Абонентка правда не к месту.