ProChecker: Массовый анализ и сбор баз! - Форум успешных вебмастеров - GoFuckBiz.com
 
 
Форум успешных вебмастеров - GoFuckBiz.com

  Форум успешных вебмастеров - GoFuckBiz.com > Разное > Объявления о покупке/продаже товаров и услуг
Дата
USD/RUB93.4409
BTC/USD62767.8849
Объявления о покупке/продаже товаров и услуг Также в этом разделе следует размещать и предложения о сотрудничестве.

Закрытая тема
Опции темы Опции просмотра
Старый 02.11.2011, 15:57   #1
getalifejerk
Ебланнед
 
Регистрация: 14.01.2011
Сообщений: 86
Бабло: $16370
Отправить сообщение для getalifejerk с помощью ICQ Отправить сообщение для getalifejerk с помощью Skype™
Thumbs up ProChecker: Массовый анализ и сбор баз!

ProChecker
Описание возможностей программы (bb-код отстой)


Немного истории

Все началось с того, что команде SEOшников потребовался инструмент для сбора больших баз для проставления ссылок. Так же важным требованием было фильтровать базы по заданным критериям. Например, мы хотели знать:
Количество исходящих ссылок в найденном URL. (Проверка на заспамленность).
PageRank, возраст домена, Alexa и другие показатели качества домена.
Работоспособен ли URL. (Проверить HTTP Status).
и многое другое.

На тот момент у нас было множество наработок, которые мы со временем объединили в одно целостное решение, назвав его ProChecker!

Логически ProChecker разделен на 3 шага:

1. Сбор и преобразование ссылок
Загрузка списка ссылок множеством способов. Возможность выпарсить ссылки из Google, а также производить различные преобразования и фильтрации списка.

2. Выбор задач для ссылок
Какую информацию мы хотим знать о ссылках, какой анализ мы хотим проделать.

3. Выполнение поставленных задач
Слежение за процессом выполнения задач в реальном времени. Представление результатов в удобном виде, фильтрация полученных данных и их последующий экспорт.

Рассмотрим каждый шаг подробнее.

1. Сбор и преобразование ссылок


Первый шаг, на нем нам доступны следующие возможности:


Open File
Открыть ссылки из файла.

Google Parser
Мощный парсер Google.

Parse Text
Выделение ссылок из смешанных данных, различные преобразования ссылок.
Также на этом шаге желательно указать базу прокси, если она ещё не указана.

Google Parser


Это инструмент для сбора ссылок из Google. Входные данные - ключевые слова, и максимальная глубина поиска.
На выходе вы получаете собранные ссылки по заданным ключевым словам.

Отличительные особенности:

1) Многопоточный
В разделе "Настройки" вы можете выбрать любое число потоков.

2) Стабильный
Автоматически пишется лог со всеми собранными
ссылками.

3) Максимальная глубина
До тысячи ссылок на один ключевик.

4) Неограниченное количество ключевых слов

5) Proxy
Сбор ссылок осуществляется через Proxy.
Для этого мы разработали специальный Proxy Manager, который прост и удобен в работе.
Для этого мы разработали специальный Proxy Manager, который прост и удобен в работе.

Proxy Manager


1) Удобство и простота
Для того, чтобы загрузить список прокси, можно просто открыть любой бесплатный сайт, занимающийся сбором свежих прокси (например: http://realbooster.com/seo-services/...oxy-list-tool/), выделить всю страницу (CTRL+A), затем в окне Proxy Manager нажать "Load New Proxy List". В открывшемся окне вставить выделенные данные, Proxy Manager сам выделит proxy из текста.

2) Умный Менеджер
Во время работы Proxy Manager сам будет вести статистику качества proxy. Медленные и некачественные proxy будут постепенно удаляться из списка.
Proxy Manager постоянно проверяет proxy в фоновом режиме, и удаляет "умершие".
Когда все proxy "умирают", Proxy Manager приостанавливает работу программы и просит ввести новый список.

Parse Text


Наверняка каждый из вас часто сталкивается с задачей когда есть большой файл в котором присутствуют ссылки и текст, а выделить нужно только ссылки или ip адресса.
Или нужно из большого списка выделить только уникальные домены, убрать повторения, перемешать случайным образом список ссылок и т.д.
Специально для всей этой рутинной работы и предназначен данный инструмент.

2. Выбор задач для ссылок


Теперь, когда у нас есть список ссылок, нам надо выбрать действия которые мы хотим проделать с этим списком.
Мы постарались подготовить для вас множество модулей, которые могут вам понадобиться на все случаи жизни. Если же вам не хватит встроенных модулей - мы предусмотрели возможность разработки собственных модулей.

Для удобства мы разделили модули на группы.

SEO модули


Это модули, которые получают различную SEO информацию о ссылке из выбранных сервисов.
Все SEO модули загружают информацию через Proxy.

Google Index - количество страниц домена в индексе гугла.

Page Rank - PageRank страницы.

Alexa - Alexa домена.

YahooDir - наличие домена в Yahoo директории.

Dmoz - наличие домена в Dmoz директории.

Yahoo Inlinks - количество ссылок на страницу из Yahoo Inlinks.

Inbound Links - количество ссылок на страницу из MajesticSeo.

Domain Age - возвращает возраст домена.

Модули, возвращающие результат на основании контента страницы


HTTP Status - возвращает Http Status страницы.
Очень удобно для проверки ссылок на работоспособность.

Outgoing Links - количество исходящих ссылок на другие домены со страницы.
Благодаря этому показателю удобно определять заспамленность страницы.

Is Form - ОЧЕНЬ ПОЛЕЗНЫЙ МОДУЛЬ!
Определяет есть ли на странице форма для постинга ссылки.
Умеет определять формы следующих движков:
CuteNews, SNews, Nucleus CMS, Geeklog, Poster, b2evolution, Media Factory, BlogCMS, Posterous, Dotclear, Habari, Movable Type Pro, WordPress, FlatPress, Joomla, Pligg, Phpdug, Scuttle, множество гостевых книг и большое количество других движков, у которых форма постинга похожа на вышеперечисленные.

Spam Filter - вспомогательный модуль для модуля Is Form.
Определяет если на странице с формой постинга уже добавленно настолько много ссылок, что появились страницы для их просмотраесть, тогда возвращает положительный результат (Т.е. страница попала в Spam Filter)

Regex Match

Проверяет на соответствие Regular Expression (Регулярного Выражения) шаблона.

Backlink Checker

Ищет исходящую ссылку на указанный ресурс. Если ссылка есть то возвращает её тип: DoFollow или NoFollow. Наприме вы заказали у когото проставление ссылок и хотите в полученном отчете проверить везде ли на вас стоят ссылки и сколько из них DoFollow.

Request - Подключение собственных модулей

Мы постарались сделать систему максимально гибкой.
И поэтому сделали модуль Request который позволяет подключать любые ваши программы/скрипты.

Принцип работы следующий, в настройках модуля вы указываете либо путь к вашей программе либо путь к вашему скрипту.
Например: "С:\myprogramm.exe" или "http://myhost/MyScript.php"

Затем во время обработки ссылок, ProChecker будет вызывать указанную вами программу/скрипт и передавать в качестве параметра Url обрабатываемой ссылки.

Затем ваша программа или скрипт производит необходимые действия (например - добавляет ссылку, выделяет контент и т.д.) и возвращает в ответ который вы можете разделить на успешный и не успешный по признаку вхождения в ответе строки.

Также модуль Request может запускать при условиях. Например вы можете задать условие чтобы ваш скрипт запускался только если PageRank страницы больше "2".

В итоге с Request вы можете реализовать очень сложные механизмы, которые будут быстро и качественно работать.

Например: У вас есть список сайтов с формой регистрации сделанных на одном движке. И у вас есть POST запрос который позволяет зарегистрировать там аккаунт. Так вот, для регистрации нам необходимо всего лишь загрузить этот список в ProChecker, выбрать в Request модуле например PHP скрипт который будет выполнять это POST запрос и запустить выполнение задачи!
Дальше ProChecker сам многопоточно запустит ваш PHP скрипт для каждой ссылки, и покажет удачно прошла регистрация или не удачно!

Также для запускаемых программ и скриптов можно устанавливать Timeout что приводит к надежной работе.

Примеры использования

Сбор баз и расставление ссылок
Одно из самых главных применений ProChecker это сбор баз для добавления ссылок. В отличии от других парсеров, ProChecker не требует никаких стожных настроек. Все просто и наглядно! Вы просто вводите список запросов для гугла и в итоге получаете готовый результат.

Поиск дропнутых доменов
Скрин 1 и Скрин 2
ProChecker удобно использовать для того чтобы найти дропнутые домены с хорошими SEO показателями. Для Найти домены можно например на сайте JustDropped.com просто введя интересующее нас ключевое слово (на картинке найден список сожержащий слово "SEO"), закинуть список в ProChecker, выбрать интересующие нас SEO показатели (в примере были выбранны YahooInlinks, PageRank, Google Index, Alexa, Http Status) и нажать Start.
В итоге потратив 2 минуту можно легко найти несколько хороших доменов!

Массовый анализ SEO показателей, Анализ конкуренции
Скрин
На картинке приведен пример 20 проанализированных страни на различные SEO показатели полученных из google по запросу "payday loans"!

Мониторинг беклинков
У каждого вебмастера есть базы откуда на его сайт проставленны ссылки.
Некоторые заказывали ссылки, некоторые хотыт проверить лог спамилки, КОНКУРЕНТОВ, трастовые...

И многое другое
Это лишь несколько простых примеров использования.
Каждый из вас легко найдет массу применений.


3. Выполнение поставленных задач


Итак когда у нас выбранны ссылки и поставленны задачи для работы с ними, мы готовы нажать на кнопку "Start".



Обращаем ваше внимание, что перед запуском стоит проверить "Настройки", такие как количество выбранных потоков и максимальный размер загружаемой страницы.

Во время работы программы в статусной стоке будет показанна техническая информация (количество ссылок, процент выполнения, количество "живых" прокси, затраченое время и прогнозируемое до завершения)

В процессе работы и после выполнения задач вы поможете применять к результатам фильтры и экспортировать полученные результаты в удобном для вас формате.

Применение фильтров

При помощи фильторв вы можете выбрать результаты с необходимыми для вас показателями.
Например вы можете выбрать только те ссылки у который PageRank от 1 до 7, возраст домена больше 3ех лет и колисечтво проиндексированных страниц в гугле больше 7 тысяч.

Экспорт результатов

Данные можно экспортировать в txt, csv и html форматы.
В html формате работает сортировка по столбцам.

Пример отчета в html формате


Как приобрести?
Цены:
1 месяц: $49
6 месяцев: $199
12 месяцев: $299

Приобрести можно по вебмани и по банковской карте (через плимус, через неделю будет активно на нашем сайте). Приобретается лицензионный ключ, который делает данную программу рабочей на тот или иной период.

Мои контакты:
Email: [email protected]
ICQ: 634873087
Skype: letmehelpplz

Дополнительная информация:
Мы можем дать программу на обзор, но за качественный отзыв, и естественно аккаунты-однодневки или те, кто в read-only сидят не получат такую возможность. Отдельно рассмотрим предложения популярных блоггеров, кто пишет на тему манимейкерства в буржунете.
Также в течение недели-полуторы будет активна партнерская программа, как для прочекера, так и для всех других наших сео сервисов. Очень живая тема для запада.

Пишите сюда все вопросы, или по аське/скайпу/мылу.
__________________
ProChecker v1 // Proxy Radar v1 // Submittr-β // Автоаппрув база // Бесплатные прокси!! // Skype: letmehelpplz // ICQ: 634873087
getalifejerk вне форума  
Старый 03.11.2011, 16:13   #2
getalifejerk
Ебланнед
 
Регистрация: 14.01.2011
Сообщений: 86
Бабло: $16370
ТС -->
Отправить сообщение для getalifejerk с помощью ICQ Отправить сообщение для getalifejerk с помощью Skype™
автор темы ТС По умолчанию

Если есть какие-то вопросы по функционалу программы, пишите здесь.
Все возможности применения и нюансы функционала чисто физически не могли бы поместиться в этот обзор.
Программа разрабатывалась очень долго, и мы все теперь сами ею пользуемся.
__________________
ProChecker v1 // Proxy Radar v1 // Submittr-β // Автоаппрув база // Бесплатные прокси!! // Skype: letmehelpplz // ICQ: 634873087
getalifejerk вне форума  
Старый 04.11.2011, 02:43   #3
sergeospb
коплю на феррари
 
Регистрация: 03.07.2008
Сообщений: 1,251
Бабло: $148195
По умолчанию

Цитата:
Сообщение от getalifejerk Посмотреть сообщение
Если есть какие-то вопросы по функционалу программы, пишите здесь.
Все возможности применения и нюансы функционала чисто физически не могли бы поместиться в этот обзор.
Программа разрабатывалась очень долго, и мы все теперь сами ею пользуемся.
да делали бы сразу 1к в год, чо мелочится
sergeospb вне форума  
Старый 04.11.2011, 02:46   #4
qvent
Сеньйор Помидор
 
Аватар для qvent
 
Регистрация: 28.08.2007
Сообщений: 2,008
Бабло: $421625
Отправить сообщение для qvent с помощью ICQ
По умолчанию

А в чем разница с чекпарамз кроме цены?
__________________
Я- МОЙВА!!!
qvent вне форума  
Старый 04.11.2011, 03:16   #5
inkubus
Senior Member
 
Аватар для inkubus
 
Регистрация: 11.02.2010
Сообщений: 928
Бабло: $176835
По умолчанию

botmaster наверно аж подавился от такой цены
inkubus вне форума  
Старый 04.11.2011, 05:08   #6
StHost
Senior Member
 
Аватар для StHost
 
Регистрация: 14.08.2008
Адрес: станица Банькок, Сиям
Сообщений: 1,780
Бабло: $200550
Отправить сообщение для StHost с помощью ICQ Отправить сообщение для StHost с помощью Skype™
По умолчанию

а скидки на обьём есть?
__________________
silence is gold. buy gold in silence. buy silent gold. enjoy golden silence. бесшумные сервера в звенящей тишине секретного датацентра SilentHost
StHost вне форума  
Старый 04.11.2011, 09:41   #7
Black West
Go Fuck West
 
Аватар для Black West
 
Регистрация: 07.05.2011
Адрес: .Net
Сообщений: 1,207
Бабло: $245620
По умолчанию

Цитата:
Сообщение от inkubus
botmaster наверно аж подавился от такой цены

На самом деле, цена нормальная... для буржуйского рынка.
И-да, ТС, в чем отличие от ЧекПарамс, кроме интерфейса?
Black West вне форума  
Старый 04.11.2011, 09:48   #8
Rombl4
Ромыч
 
Аватар для Rombl4
 
Регистрация: 16.07.2008
Сообщений: 1,296
Бабло: $154950
По умолчанию

Софт конечно удобнее и в чем-то превосходит checkparams, но не в 10 же раз, если исходить из цены.
Rombl4 вне форума  
Старый 04.11.2011, 12:08   #9
getalifejerk
Ебланнед
 
Регистрация: 14.01.2011
Сообщений: 86
Бабло: $16370
ТС -->
Отправить сообщение для getalifejerk с помощью ICQ Отправить сообщение для getalifejerk с помощью Skype™
автор темы ТС По умолчанию

Цитата:
Сообщение от qvent Посмотреть сообщение
А в чем разница с чекпарамз кроме цены?
Цитата:
Сообщение от Black West Посмотреть сообщение

На самом деле, цена нормальная... для буржуйского рынка.
И-да, ТС, в чем отличие от ЧекПарамс, кроме интерфейса?
Цитата:
Сообщение от Rombl4 Посмотреть сообщение
Софт конечно удобнее и в чем-то превосходит checkparams, но не в 10 же раз, если исходить из цены.
Насчет CheckParams, то тут я думаю, не наша программа дорогая, а чекпарамс дешевая. С другой стороны, там такой интерфейс (то, что на сайте увидел), что больше просить просто стыдно. Мы тоже могли бы выложить Прочекер бесплатно, но кто от этого выиграет? Мы не выиграем (но и не проиграем). Вы? Ну когда каждый школьник сможет парсить 7 миллионов ссылок за не напряженный день, тогда тут пойдут жалобы, что засрали тему. Вы от этого не выиграете.

И я все-таки думаю, что чекпарамс, если вдруг создатель программы решит ею заняться как основным направлением, претерпит много косметических изменений, и как минимум станет в режиме freemium за хорошую цену. Потому что кощунство продавать программу за такие деньги, когда такие функции - это мастхэв для тех людей, кто зарабатывает в тысячи раз больше цены этой программы.

В чем отличие от нее? Интерфейс это понятно. Удобнее, это невооруженным глазом видно.
Функционал? Готов поспорить, что у нас парсер гугла принципиально быстрее. Остальное по функционалу я не знаю, надо тестить. Думаю, что наша быстрее, во всяком случае на Вин7 точно.
Поправьте меня, но у нас есть очень удобное подключение кастомных модулей и передача данных в другие программы, Request Module, то бишь. Причем кастомные модули (php-скрипты, например) будут выполняться многопоточно!

Еще есть Multiply модуль, его еще не было, когда мы этот обзор сделали, не включили в него. Чуть позже выложу кратенько о нем. Суть его в том, что можно взять два измерения -- 1-ое (viagra, cialis, levitra..) и 2-ое (online, buy, cheap, generic) -- и перемножить их, получив матрицу различных кеев, ну и сразу начать парсинг по всем этим кеям. О более практичном применении сами подумайте, тут много направлений.

За качество платят больше, и не в пропорциональном значении. А эти программы, пардон, это инструменты и среда обитания вашего рабочего дня - вам решать, что вас окружать будет. Ладно, если бы у Прочекера только такой интерфейс был бы крутой, но ведь и функционал под стать.

В общем, цена такая какая есть. Если интересно откуда взята была, то во-первых, мы решили что парсер не должен стоить дешевле, а во-вторых, я просто нарисовал на бумаге красивые цены, чтобы попадали под красивые скидки. Как уже выше сказали, тут невооруженным глазом заметно, что русские не приоритетная ЦА.

Скоро будет тут анонсирована партнерская программа, куда будет включен и прочекер, думаю, тогда жалобы на цену отпадут сами собой. Потому что такой на запад и по рекомендации хорошо продается.

Цитата:
Сообщение от StHost Посмотреть сообщение
а скидки на обьём есть?
Думаю, что есть. Несколько лицензий купить хочешь? У нас оптом не покупали пока даже не задумывались еще.

Цитата:
Сообщение от sergeospb Посмотреть сообщение
да делали бы сразу 1к в год, чо мелочится
Когда еще сделаем систему для анализа кеев по типу семраша и ахрефса, тогда, возможно, сделаем. Мы кстати уже это делаем
__________________
ProChecker v1 // Proxy Radar v1 // Submittr-β // Автоаппрув база // Бесплатные прокси!! // Skype: letmehelpplz // ICQ: 634873087
getalifejerk вне форума  
Старый 04.11.2011, 13:20   #10
mlu
Senior Member
 
Аватар для mlu
 
Регистрация: 17.02.2011
Сообщений: 153
Бабло: $26940
Отправить сообщение для mlu с помощью ICQ
По умолчанию

Отличный софт, есть к чему стремиться, некоторые фичи так вообще радуют

Успехов авторам
mlu вне форума