Чего бы интересного пропарсить из 9 млн. доменов?

[lorien]

Скачал морды 9млн доменов. Подскажите, что интересного оттуда можно выпарсить? Если кому-то что-то нужно, пишите, я могу пропарсить.

[roddik]

а зачем ты их качал?

[Hector]

Хобби у него такое - парсить.

[lorien]

Сообщение от roddik

а зачем ты их качал?

Вообще я делаю сервис, типа similarweb, только попроще, но я не могу сюда ссылку кинуть, это будет рекламой тогда и меня будут ругать
На данный момент я сделал парсинг майлов, google analytics ID, adsense ID, yandex metrika ID. Можно искать все домены с оданаковыми ID. Щас делаю поиск бэклинков (но только с морды на морду). Также я трафик с симиларвеба пропарсил для всех этих 9млн доменов. И, например, можно глянуть, у каких сайтов было 0 визитов 6 месяцев назад, а щас тысячи и мильоны визивит, проанализировать эти сайты и сделать какие-нибудь выводы. Все эти данные я просто в виде баз планирую продавать, но хочется сделать также живой сервис с бесплатным/платным API. Ну как минимум я планирую сделать API для парсинга трафика симиларвеба.

Также я это всё делаю для повышения технических навыков. Например, вот я пропарсил 9млн морд и всё получилось. Теперь, например, можно попробовать пропарсить 120млн морд. Или, например, 200 млн морд.

Сообщение от Hector

Хобби у него такое - парсить.

Не только хобби, но и ремесло.

[dady]

9 млн мало же, надо все.

[lorien]

Можно и все, в принципе. Только никто не предложил, что оттуда парсить.

[1горь]

lorien,
Привет
Мы работаем над агрегатором объявлений и площадкой для анализа данных. Парсинг и bigdata наша тема
Можем поделиться опытом ты с нами - мы с тобой)) Если хо...жаба - [email protected]

[lorien]

Сообщение от 1горь

lorien,
Привет
Мы работаем над агрегатором объявлений и площадкой для анализа данных. Парсинг и bigdata наша тема
Можем поделиться опытом ты с нами - мы с тобой)) Если хо...жаба - [email protected]

Лучше в skype стучитесь (lorien.name), в жабере неудобно общаться.

[digg]

теперь все эти домены на позиции в гугле по всем кеям пропарсить и сделать семраш с ахрефсом в одном ))

[AloneSlamer]

Пропарси их на тематики.
Сделай распознавание на основе своих сайтов и базы какого нибудь каталога.