Какой язык будет лучше

[Hector]

Начал изучение PHP для создания своих скриптов для СЕО. Все вроде неплохо и устраивает. Хочу уточнить у знающих. Будет ли лучше изучить Perl или Java? И подойдет ли java для создания многопоточных авторегеров, парсеров и тп. Жду совета.

[medar]

Юзай php. Для сеошных дел лучше нет.

Мультикурл у меня сервак не грузит, в основном нагрузка идет от mysql.

[Домкрат]

Сообщение от hectorix

про мультикурл вкурсе, мне прогер мой делал скрипт с ним

сервер у тебя не сильно грузит? у меня регилка если потоков 30 одновреммено идут, забивает дуал ксенон на процентов 20%

непосредственно курл особой нагрузки не создает.

советую проверить сам скрипт, вероятно используются какие-либо аномальные регэкспы для парсинга.

ещё частая болячка - безбожные таймауты выставлены для коннекта и получения данных. в случае с чекером прокси это подбно смерти. я, к примеру, не ставлю таймауты более чем 5 секунд (редко 7-10), нахер идут такие прокси.

[Hector]

Сообщение от домкрат

непосредственно курл особой нагрузки не создает.

советую проверить сам скрипт, вероятно используются какие-либо аномальные регэкспы для парсинга.

ещё частая болячка - безбожные таймауты выставлены для коннекта и получения данных. в случае с чекером прокси это подбно смерти. я, к примеру, не ставлю таймауты более чем 5 секунд (редко 7-10), нахер идут такие прокси.

мне прогер скрипт делал там курл таймаут 30 сек. через соксы работает скрипт

короче нужно опытным путем смотреть на это всё.

[JMen]

у меня такие скрипты как правило упираются в ширину канала, а не проц... имхо это - же Get / Post, чему там проц нагружать?

[Hector]

JMen, не знаю но нагружали же. Это не смертельно так что всё ок.

[TerVer]

дополнительный сервер обойдется тебе дешеле твоего мозга.

[Hector]

Сообщение от TerVer

дополнительный сервер обойдется тебе дешеле твоего мозга.

хахах

[JMen]

тс - увеличь кол - во потоков и таймауты синхронно. следи чтобы нити были как можно более тонкими. это снимет нагрузку на сервер.

Сообщение от terver

дополнительный сервер обойдется тебе дешеле твоего мозга.

не всегда. типичная ситуация: есть задача создания Wp блогов, большая нагрузка делает не рентабельной работу, так как 10 блогов вордпресовских (mu) роняют сервак. купить 2 - 3 сервера... можно, но проект будет на грани окупаемости (сервера мощные нужны). вот тут - то и нужно включать мозг и снижать нагрузку.

з.ы.: я для себя решил задачу созданием собственной платформы создатели вордпресса (вордпресс.орг), так - же как и другие владельцы крупных сайтов пошли тем - же путём. к сожалению доточить публик решения не представляется возможным

[gcc]

http://www.facebook.com/note.php?not...547199&index=0

Since we’ve made all these changes, we have been able to scale memcached to handle 200,000 UDP requests per second with an average latency of 173 microseconds. The total throughput achieved is 300,000 UDP requests/s, but the latency at that request rate is too high to be useful in our system. This is an amazing increase from 50,000 UDP requests/s using the stock version of Linux and memcached.

не совсем про язык, но интересно

[JackSoft]

Сообщение от hectorix

ну вот к примеру задача:

сделать многопоточный парсер прокси. парсит со списка сайтов и проверяет их работоспособность. выводит в файл или массив.

это не вопрос языка, а умения программера...
можно и на перле написать тормоз..., а можно на пхп нарисовать самолет...