Форум успешных вебмастеров - GoFuckBiz.com

  Форум успешных вебмастеров - GoFuckBiz.com > Бизнес-решения > Скрипты, программы и технические решения
Дата
USD/RUB59.2470
BTC/USD0.0000
Скрипты, программы и технические решения Обсуждаем скрипты, программы и новые технологии.

Закрытая тема
Опции темы Опции просмотра
Старый 05.05.2009, 21:30   #1
Hector
Статус кво
 
Аватар для Hector
 
Регистрация: 02.05.2008
Адрес: California
Сообщений: 11,253
Бабло: $1447390
Отправить сообщение для Hector с помощью ICQ
По умолчанию MultiCurl - сука

MultiCurl - сука забивает всю память и не освобождает ее. Как решить? У меня 700 сайтов которые нужно сграбить потоками. Так вот после 40 он вешается.
__________________
----
Hector вне форума  
Старый 05.05.2009, 21:52   #2
azaza
Начальник отдела
 
Аватар для azaza
 
Регистрация: 18.04.2008
Сообщений: 2,934
Бабло: $44001
По умолчанию

во что нашел:

Цитата:
По моему опыту, у multiCURL появляются тормоза, если запрашивать одновременно более 100 урлов, но это можно учитывать и делить массив запросов на пакеты.


Но тут есть еще организационный ньюанс. При многих одновременных запросах можно дозапрашиваться до блокировки ИП.
__________________
Хостинг плюшевых медвежат
"Гуру фейк софта" Хочешь пристроить траф? Не делай этого. С килограмма mp3 уников - килограмм денег
azaza вне форума  
Старый 05.05.2009, 22:07   #3
Hector
Статус кво
 
Аватар для Hector
 
Регистрация: 02.05.2008
Адрес: California
Сообщений: 11,253
Бабло: $1447390
ТС -->
Отправить сообщение для Hector с помощью ICQ
автор темы ТС По умолчанию

я поделил, по 10 урлов ну и 10 потоков... просто что тут не тормоза а тупо СТОП, я не думаю что блокировка айпи вызовет остановку скрипта )
__________________
----
Hector вне форума