посоветуйте парсер

[on Ton]

Всем доброго времени суток

Кто какой парсер гугла нынче юзает? Самописные, покупные, фришные.. Подумываю прикупить хреферер, как он? А то запросов насоставлял, а выпарсить нечем.
В общем, кому не лень писать- жду советов на тему "парсер"

[gogzik]

Тема конечно ужасно боянистая...
Но могу посоветовать XKoVaToR - зверь машина.
xkovator.com

[Maximus325]

Аура решает

[Webaz]

XKoVaToR рулит

[se_home]

Сообщение от on Ton

Подумываю прикупить хреферер, как он?

Пользуюсь Hrefer, вполне устраивает. За 4 дня собрал 300к форумов. Сам прокси тягает, в общем удобно.

[Maximus325]

Сообщение от se_home

Пользуюсь Hrefer, вполне устраивает. За 4 дня собрал 300к форумов. Сам прокси тягает, в общем удобно.

Бугога Аура собирает по ляму в день минимум))) это правда с дублями

[alex_22]

300к за 4дня можно собрать и фришным globalsquidoвским.
Все зависит от запросов для распарса.

[Dobrinia]

Парсил и Аурой и Хрефером. Сейчас остановился на последнем.
Не буду говорить, что лучше хрефер, но сейчас я пользуюсь именно им.
~8 месяцев до него юзал аруру и был доволен.
Аура под линукс, хрефер под винду.
Если у тебя уже есть сервер, то покупай под него.Аура например у меня работала успешно с випом и дми .

[Longer]

+1 за Ауру - для сервака
+1 За ексковатор для Винды!

[diver Alex]

Сообщение от Maximus325

Бугога Аура собирает по ляму в день минимум))) это правда с дублями

хрефер в 200 потоков с нормальными проксями за 3 дня собрал 1,7 ляма гостевых, дублей отфильтровал около 10 лямов... единственный недостаток - когда идет фильтрация дублей очень сильно грузить оперативку
сервак 1 гб оперативки, 5 мегабит канал, перезагружал программу всего один раз

имхо, результат довольно неплохой, аурой не пользовался но 1 лям с дублями у меня хрефером собирается(по запросам в которых много результатов, ну типа guestbook.php и таких запросов с десяток если где то) очень быстро, от 1 до 5 часов...если отключить проверку урла по фильтру то еще быстрее....но нужны хорошие прокси, паблик если брать гораздо медленнее