Массовый АлексаРанк чекер

[Grut]

Коллеги, разыскиваю чекер Алекса, который работает с большими базами ссылок. Через прокси либо Амазон - хоть какой-нибудь...
Поделитесь кто чем может

[Cisco]

у меня тоже банит - даже если промкжуток 1сек

[y4b53]

за сутки до 150к получалось чекнуть, потом забанил

[GoodLife]

Чекайте алексу на наличие в базе, что я выше скидывал. На остальные домены можно забить. Все равно алекса неадекватна при малом трафе.

[Grut]

Сообщение от GoodLife

Grut найди себе кодера. Этот скрипт будет стоить 5$.

Нашел у себя талантливого студента. Думаю озадачить его написанием скрипта с поддержкой прокси. Буду дико благодарен, если кто-нибудь скинет функцию (или ссылки, где можно почитать) работы скрипта с проксями. Заранее благодарен.

[flo0]

если разово нужно, напиши мне в личку, я чекну

[chesser]

Сообщение от Grut

Нашел у себя талантливого студента. Думаю озадачить его написанием скрипта с поддержкой прокси. Буду дико благодарен, если кто-нибудь скинет функцию (или ссылки, где можно почитать) работы скрипта с проксями. Заранее благодарен.

как я понял, придется чекать очень много, поэтому лучше делать этот чекер многопоточным.
Я собираю ссылки про мультипоточность в php и Curl. Там есть несколько источников прикольных с примерами и объяснениями. Если выберите курл, то там есть ссылка на класс RollingCurl - он мне понравился, позволяет обрабатывать потоки по мере их готовности, учтите что в инете много кривых классов.

ps я почему-то решил, что талантливому студенту подойдет PHP в качестве языка программирования

[Grut]

Сообщение от chesser

как я понял, придется чекать очень много, поэтому лучше делать этот чекер многопоточным.
Я собираю ссылки про мультипоточность в php и Curl. Там есть несколько источников прикольных с примерами и объяснениями. Если выберите курл, то там есть ссылка на класс RollingCurl - он мне понравился, позволяет обрабатывать потоки по мере их готовности, учтите что в инете много кривых классов.

ps я почему-то решил, что талантливому студенту подойдет PHP в качестве языка программирования

Спасибо. Студент как раз сейчас изучает содержимое твоей ссылки.

Подкиньте еще, пожалуйста, инфы на тему поддержки проксей.

[Painkiller]

Сообщение от Grut

инфы на тему поддержки проксей.

1. 2616 - http proxy
2. http://cpp.blog.ru/7213347.html (номер rfc не известен, за то есть ссылка ) - socks4 proxy
3. 1928 - socks 5 proxy


а если серьёзно то, надо бы уточнить библиотеку с которой студент работает.