Добрый день!
Столкнулся с одной проблемой, которую не могу решить уже месяц.
Как я написал в заголовке, проблема такая:
"Zabbix proxy(active) уходит в тайм-аут на 600 секунд пытаясь отправить данные на zabbix server.
После того, как 10 минут проходит, прокси сервер снова работает нормально как ни в чем не бывало.
Причем может так получится , что одновременно две прокси уходят в тайм-аут на 600 секунд.
Проблема возникает 1-2 раза в сутки в рандомное время. Бывает, что даже и через день проблема появляется. В общем тут нет какой-то закономерности.
Что имеем:
Zabbix server и zabbix proxy у меня версией 7.0.30.
Операционная система на сервере и прокси серверах Oracle Linux 8 (full upgrade).
У меня 22 активные zabbix прокси на текущий момент.
Когда возникла проблема:
Проблема появилась после добавления дополнительных 5 прокси серверов. Т.е было 17, а после добавления стало 22. Причем данные прокси малонагруженны. Менее 100 nvps.
Наблюдения:
1) tcpdump на стороне прокси и сервера показывает наличие ретрансмитов.
2) На zabbix сервере наблюдается увеличение счетчика ListenDrops в момент возникновения проблемы.
3) Тюнинг сетевого стека ОС и попытка даже очень сильно увеличить некоторые параметры не дают никакого результата.
4) Полное обновление ОС вместе с ядром на всех прокси серверах и самого сервера не дали никакого результата.
5) В конфиге zabbix server увеличение параметра ListenBacklog не дает результата.
6) В логах zabbix server не видно каких либо проблем
7) В логах прокси сервера видно, что прокси установил соединение и пытается отправить данные . И на этом месте прокси уходит в ожидание на 600 секунд.
8) Процессы на стороне zabbix сервера не утилизируются.
9) На стороне zabbix proxy утилизируется процесс data sender.
Скорей всего проблема даже не на стороне zabbix.Но проблема как то связана с увеличением количества прокси серверов. Прошу помочь, подсказать куда можно еще капнуть и что посмотреть.
Столкнулся с одной проблемой, которую не могу решить уже месяц.
Как я написал в заголовке, проблема такая:
"Zabbix proxy(active) уходит в тайм-аут на 600 секунд пытаясь отправить данные на zabbix server.
После того, как 10 минут проходит, прокси сервер снова работает нормально как ни в чем не бывало.
Причем может так получится , что одновременно две прокси уходят в тайм-аут на 600 секунд.
Проблема возникает 1-2 раза в сутки в рандомное время. Бывает, что даже и через день проблема появляется. В общем тут нет какой-то закономерности.
Что имеем:
Zabbix server и zabbix proxy у меня версией 7.0.30.
Операционная система на сервере и прокси серверах Oracle Linux 8 (full upgrade).
У меня 22 активные zabbix прокси на текущий момент.
Когда возникла проблема:
Проблема появилась после добавления дополнительных 5 прокси серверов. Т.е было 17, а после добавления стало 22. Причем данные прокси малонагруженны. Менее 100 nvps.
Наблюдения:
1) tcpdump на стороне прокси и сервера показывает наличие ретрансмитов.
2) На zabbix сервере наблюдается увеличение счетчика ListenDrops в момент возникновения проблемы.
3) Тюнинг сетевого стека ОС и попытка даже очень сильно увеличить некоторые параметры не дают никакого результата.
4) Полное обновление ОС вместе с ядром на всех прокси серверах и самого сервера не дали никакого результата.
5) В конфиге zabbix server увеличение параметра ListenBacklog не дает результата.
6) В логах zabbix server не видно каких либо проблем
7) В логах прокси сервера видно, что прокси установил соединение и пытается отправить данные . И на этом месте прокси уходит в ожидание на 600 секунд.
8) Процессы на стороне zabbix сервера не утилизируются.
9) На стороне zabbix proxy утилизируется процесс data sender.
Скорей всего проблема даже не на стороне zabbix.Но проблема как то связана с увеличением количества прокси серверов. Прошу помочь, подсказать куда можно еще капнуть и что посмотреть.