Падает сервер, CentOS.

[MO $$$]

Вот берет и падает. Произвольно - может раз в день, может 2 раза в день. А может и дня 3 отработать. Просто виснет и все. Перезагрузка помогает до след. раза.

dmesg и messages чисты - ничего плохого нет - а потом новая загрузка.
апач + нгинх - тоже чисты.

в тестовом режиме прогонял память, проц - все отлично. нагрузка сервера тоже при работе не сильно - la в пределах 0,3-0,6

чем проблему посоветуете выловить?

[MO $$$]

Сообщение от mirikas

я б посоветовал найти норм админа и не ебаться)(сохраняет время, нервы и деньги - проверенно)))

совет хороший, правда когда я озвучивал админам спектр задач - они предпочитали съебаться и не ебаться, либо назывались какие то суммы вроде 500 долларов за конфигурацию сервера !

С другой стороны - радио-техническое образование и опыт с компами 20 лет - как железный, так и программный (а руки еще мс-дос помнят ) = не пропьешь и ничего сложного нет. В принципе. Пересобрать ядро я не пересоберу , но вот решать свои простые задачи - почему бы и нет.

Но ты прав - можно и платить, только за хорошие знания.

Сообщение от yami

Полагаю проблема в железе. Может какой-нибудь блок питания, например. Отрубается электричество - вот и нет логов.

На сервере есть ipmi - правда у меня usb клава и оно не пашед как надо пока , но я подключался - когда сервер "висит" - ipmi работает. Значит питание есть. Хотя у меня тоже догадки такие есть.


Могу предположить, что от нагрузки зависит - когда на сервере был малый трафик - он мог и неделями крутится без зависания. Частоту CPU понижал - помогло вроде но не сильно.

[Strannic]

у меня с такими причинами пару раз в сутки сервер ложился где была размещена сотня другая сеодоров, когда прибегал гуглабот

[MO $$$]

Сообщение от Strannic

у меня с такими причинами пару раз в сутки сервер ложился где была размещена сотня другая сеодоров, когда прибегал гуглабот

что в лог писал то?

[je$eo]

Была ситуация один в один.
Хз, может у меня свой частный случай был, но озвучу, мало ли..

Вобщем была куча сайтов с исходящими запросами, тянули контент с других сайтов при каждом обращении и тоже начал падать сервак.. Сделал кеширование, проблемма исчезла.. Правда в моем случае эт не очень решение было, так как контент очень часто обновляемый.. Но эт уже другая история.. Главное падения перестали случаться

[creator123]

выскажу мнение что "сервер" этот собран на десктопном старом железе, которое виснет от каждой мухи пролетающей в "ДЦ"

[MO $$$]

Сообщение от creator123

выскажу мнение что "сервер" этот собран на десктопном старом железе, которое виснет от каждой мухи пролетающей в "ДЦ"

эээ, xeon 1650 с платой типа X9SRE-3F (имеющей встроенный модули вроде ipmi c kvm) и 64 гигами ECC памяти, с железным raid типа LSI 9271-4i - конечно не супер-пупер сервак, но "дешевым старым десктопным железом" я его не считаю

[creator123]

тогда тока консоль читать. если в консоли пусто, то железо плющит.

[Netd]

покажи вывод smartctl --all /dev/sda

[MO $$$]

Сообщение от Netd

покажи вывод smartctl --all /dev/sda

там железный raid :

Vendor: LSI
Product: MR9271-4i
Revision: 3.24
User Capacity: 1,999,844,147,200 bytes [1.99 TB]
Logical block size: 512 bytes
Logical Unit id: 0x600605b006b66060
Serial number: 004534129a21209b1
Device type: disk
Local Time is: Thu Jan 30 20:25:23 2014 CET
Device does not support SMART

Error Counter logging not supported
Device does not support Self Test logging

Пока что уменьшил процессы апача и прочие лимиты зарезал. Ну и логирование в файл atop. Пока не вешался.

Да и не нагружен он сильно.

[MO $$$]

В общем со вчерашнего дня все живет пока что. Или ситуация не повторялась, либо принятые меры по уменьшению лимитов пока приносят результат. Логирую в atop. Кстати - atop - если задал atop -w 5 3000 - он писать будет по кругу, когда 3000 записей сделает, либо остановится?

Попутно стоит KVM - там картинко такое - не столько радостное. В логах чисто:


Насколько страшно, что пришел левый udp пакет? Или забить?

И основное - unexpectedly shrunk window - это просто медленные клиенты по сайтом лазят, либо это идет тот самый "медленный ddos"?

Как бы это проанализировать и в каких логах поискать, то что выдает KVM - а то пока не нашел - в тех что смотрел - чисто?