zabbix сервер не запущен отображаемая информа&

[aydar]

Сегодня в 2:30 заббиксу стало плохо, живет на локалхосте, selinux выкл, место на диске есть, куда копать?

Connection to Zabbix server "localhost" refused. Possible reasons:
1. Incorrect server IP/DNS in the "zabbix.conf.php";
2. Security environment (for example, SELinux) is blocking the connection;
3. Zabbix server daemon not running;
4. Firewall is blocking TCP connection.
Connection refused
Zabbix poller processes more than 75% busy, загрузился на 100%

Информация от агентов идет и сервер ее уже обрабатывает, но ошибка остается

в консоли:
zabbix_server (pid 6047 6035) is running...

Очередь:
Превышено время ожидания 3 секунд при подключении к Zabbix серверу "localhost".
или
Получен пустой ответ от Zabbix сервера "localhost".

В логах сервера пока только это
rm: cannot remove `/var/lock/subsys/zabbix-server': Permission denied
touch: cannot touch `/var/lock/subsys/zabbix-server': Permission denied

22959:20150910:103008.405 [Z3001] connection to database 'zabbix' failed: [1040] Too many connections
22959:20150910:103008.405 Cannot connect to the database. Exiting...


Из наблюдений заббикс-сервер падает и поднимется сам по себе

[Zentarim]

Сегодня в 2:30 заббиксу стало плохо, живет на локалхосте, selinux выкл, место на диске есть, куда копать?

Не удалось подключиться к Zabbix серверу "localhost". Возможные причины:
1. Некорректные IP/DNS сервера в "zabbix.conf.php";
2. Некорректная настройка DNS сервера.
? ?????????? ????????

Zabbix poller processes more than 75% busy, загрузился на 100%

Информация от агентов идет и сервер ее уже обрабатывает, но ошибка остается

в консоли:
zabbix_server (pid 6047 6035) is running...

Очередь:
Превышено время ожидания 3 секунд при подключении к Zabbix серверу "localhost".
или
Получен пустой ответ от Zabbix сервера "localhost".

В логах сервера пока только это
rm: cannot remove `/var/lock/subsys/zabbix-server': Permission denied
touch: cannot touch `/var/lock/subsys/zabbix-server': Permission denied

22959:20150910:103008.405 [Z3001] connection to database 'zabbix' failed: [1040] Too many connections
22959:20150910:103008.405 Cannot connect to the database. Exiting...


Из наблюдений заббикс-сервер падает и поднимется сам по себе

Было у меня похожее. Если я правильно понимаю, у вас housekeeper работает несколько часов при 100% нагрузке?

Если да, то у вас скорее всего уже слишком большая база и удаление старых данных влечет за собой "клин" MYSQL сервера.
Проверить, что это именно проблемы с удалением старых данных очень легко. Установите mytop и во время проблемы посмотрите, что за запросы выполняются на сервере. Если это запросы типа DELETE FROM historyчего-то-там, которые висят по нескольку минут - тогда вам лучше перейти на секционирование БД.

С другой стороны "[1040] Too many connections" это несколько другого рода ошибка, связанная с превышением максимально разрешенного числа одновременных подключений:

http://www.mysql.ru/docs/man/Too_many_connections.html

[aydar]

подключения к бд я повысил до 500

проблема сохраняется

[Zentarim]

подключения к бд я повысил до 500

проблема сохраняется

Первый совет насчет мониторинга при помощи mytop пробовали?

[aydar]

щас буду пробывать, из лога пока видны следуещие ошибки:

30381:20150910:142852.393 [Z3001] connection to database 'zabbix' failed: [1040] Too many connections
30381:20150910:142852.393 Cannot connect to the database. Exiting...
rm: cannot remove `/var/lock/subsys/zabbix-server': Permission denied
touch: cannot touch `/var/lock/subsys/zabbix-server': Permission denied
zabbix_server [30578]: Is this process already running? Could not lock PID file [/var/run/zabbix/zabbix_server.pid]: [11] Resource temporarily unavailable

и вот такие строчки, не знаю что это

31115:20150910:142911.500 One child process died (PID:31183,exitcode/signal:255). Exiting ...
31182:20150910:142911.500 Got signal [signal:15(SIGTERM),sender_pid:31221,sender_uid:498 ,reason:0]. Exiting ...


housekeeper processes прыгает от 0-100%

[aydar]

mytop показывает, что постоянно висит запрос

Query show full processlisе

остальные запросы нормально завершаются, что еще можно посмотреть?


Может вариант, сделать бекап бд, шаблонов и обновить заббикс до 2.4 и потюнить бд?

или удалить данные из бд в ручную

почти 9 ч бьюсь уже с этой проблемой(

уменьшил интревал для хаускипера, но проблема в том что сам заббикс очень часто перегружается, не могу понять почему


по поводу 6985:20150910:172959.931 [Z3001] connection to database 'zabbix' failed: [1040] Too many connections
увеличил до 500 думаю хватит, а тут проверил сколько потоков, а их аж 485 было, откуда столько то? после перезагрузки пока держится в пределах 100, но плавно увеличивается

[aydar]

Друзья, я победил.
почистил жирные таблицы в бд и все пошло нормально и сервер не перегружается и данные идут.
БД было всего лишь 900мб

щас стабильность проверю и буду искать причину, оптимизировать БД