Приветствую всех, столкнулся с проблемой постоянного роста Zabbix busy escalator , после рестарта сервера проходит почти день, Zabbix busy escalator постепенно увеличивается, и когда значение выходит более 10% начинаются большие задержки на обработку Действий прикрепленных к триггерам (уведомления), первым делом проверил скрипты Действий, не нашел не каких долго отрабатывающих вариантов, там в основном bash скрипты которые дергают Curl'ом различные API , уведомления в телеграмм. Вторым делом уже пробовал играть с параметрами в конфиге сервера StartEscalators и StartAlerters пробовал от минимальных до максимальных значений , но особо это эффекта не давало, через примерно сутки эта очередь Zabbix busy escalator снова увеличивается на 10%+ и уведомления перестают отрабатывать. Я прикреплю конфиги , подскажите пожалуйста в какую сторону идти и что еще можно проверить.
Zabbix 5.0.9. © 2001–2021
Intel(R) Xeon(R) Gold 6154 CPU @ 3.00GHz - 6
ram - 24gb
Zabbix сервер запущен Да localhost:10051
Количество узлов сети (активировано/деактивировано) 2169 1175 / 994
Количество шаблонов 170
Количество элементов данных (активированных/деактивированных/неподдерживаемых) 411700 156356 / 232698 / 22646
Количество триггеров (активированных/деактивированных [проблема/ок]) 277185 107867 / 169318 [5104 / 102763]
Количество пользователей (в сети) 74 7
Требуемое быстродействие сервера, новые значения в секунду 186.69
ListenPort=10051
LogFile=/var/log/zabbix/zabbix_server.log
LogFileSize=1
PidFile=/var/run/zabbix/zabbix_server.pid
SocketDir=/var/run/zabbix
StartPollers=70
StartIPMIPollers=0
StartPreprocessors=15
StartPollersUnreachable=65
StartTrappers=45
StartPingers=40
StartDiscoverers=5
StartTimers=15
StartEscalators=40
StartAlerters=25
SNMPTrapperFile=/var/log/snmptrap/snmptrap.log
HousekeepingFrequency=12
MaxHousekeeperDelete=60000
CacheSize=6024M
StartDBSyncers=4
HistoryCacheSize=1G
HistoryIndexCacheSize=1G
TrendCacheSize=1G
ValueCacheSize=3048M
Timeout=3
UnreachablePeriod=35
UnavailableDelay=90
UnreachableDelay=15
AlertScriptsPath=/usr/lib/zabbix/alertscripts
ExternalScripts=/usr/lib/zabbix/externalscripts
FpingLocation=/usr/bin/fping
Fping6Location=/usr/bin/fping6
SSHKeyLocation=/home/zabbix/.ssh
LogSlowQueries=0
используется mariadb, также скину конфиг на всякий
[server]
[mysqld]
user = mysql
pid-file = /var/run/mysqld/mysqld.pid
socket = /var/run/mysqld/mysqld.sock
port = 3306
basedir = /usr
datadir = /opt/mysql
tmpdir = /tmp
lc-messages-dir = /usr/share/mysql
skip-external-locking
join_buffer_size = 16384K
innodb_data_file_path = ibdata1:100M:autoextend
innodb_file_per_table = 1
innodb_log_file_size = 3072M
max_connections = 600
query_cache_size = 128M
query_cache_type = 0
innodb_buffer_pool_instances = 10
performance_schema = ON
bind-address = 0.0.0.0
key_buffer_size = 16M
max_allowed_packet = 32M
thread_stack = 192K
thread_cache_size = 16
myisam_recover_options = BACKUP
table_cache = 512
query_cache_limit = 4M
query_cache_size = 128M
log_error = /var/log/mysql/error.log
expire_logs_days = 10
max_binlog_size = 100M
character-set-server = utf8mb4
collation-server = utf8mb4_general_ci
[embedded]
[mariadb]
[mariadb-10.1]
Ресурсов хватает, cpu и рам свободного много
Zabbix 5.0.9. © 2001–2021
Intel(R) Xeon(R) Gold 6154 CPU @ 3.00GHz - 6
ram - 24gb
Zabbix сервер запущен Да localhost:10051
Количество узлов сети (активировано/деактивировано) 2169 1175 / 994
Количество шаблонов 170
Количество элементов данных (активированных/деактивированных/неподдерживаемых) 411700 156356 / 232698 / 22646
Количество триггеров (активированных/деактивированных [проблема/ок]) 277185 107867 / 169318 [5104 / 102763]
Количество пользователей (в сети) 74 7
Требуемое быстродействие сервера, новые значения в секунду 186.69
ListenPort=10051
LogFile=/var/log/zabbix/zabbix_server.log
LogFileSize=1
PidFile=/var/run/zabbix/zabbix_server.pid
SocketDir=/var/run/zabbix
StartPollers=70
StartIPMIPollers=0
StartPreprocessors=15
StartPollersUnreachable=65
StartTrappers=45
StartPingers=40
StartDiscoverers=5
StartTimers=15
StartEscalators=40
StartAlerters=25
SNMPTrapperFile=/var/log/snmptrap/snmptrap.log
HousekeepingFrequency=12
MaxHousekeeperDelete=60000
CacheSize=6024M
StartDBSyncers=4
HistoryCacheSize=1G
HistoryIndexCacheSize=1G
TrendCacheSize=1G
ValueCacheSize=3048M
Timeout=3
UnreachablePeriod=35
UnavailableDelay=90
UnreachableDelay=15
AlertScriptsPath=/usr/lib/zabbix/alertscripts
ExternalScripts=/usr/lib/zabbix/externalscripts
FpingLocation=/usr/bin/fping
Fping6Location=/usr/bin/fping6
SSHKeyLocation=/home/zabbix/.ssh
LogSlowQueries=0
используется mariadb, также скину конфиг на всякий
[server]
[mysqld]
user = mysql
pid-file = /var/run/mysqld/mysqld.pid
socket = /var/run/mysqld/mysqld.sock
port = 3306
basedir = /usr
datadir = /opt/mysql
tmpdir = /tmp
lc-messages-dir = /usr/share/mysql
skip-external-locking
join_buffer_size = 16384K
innodb_data_file_path = ibdata1:100M:autoextend
innodb_file_per_table = 1
innodb_log_file_size = 3072M
max_connections = 600
query_cache_size = 128M
query_cache_type = 0
innodb_buffer_pool_instances = 10
performance_schema = ON
bind-address = 0.0.0.0
key_buffer_size = 16M
max_allowed_packet = 32M
thread_stack = 192K
thread_cache_size = 16
myisam_recover_options = BACKUP
table_cache = 512
query_cache_limit = 4M
query_cache_size = 128M
log_error = /var/log/mysql/error.log
expire_logs_days = 10
max_binlog_size = 100M
character-set-server = utf8mb4
collation-server = utf8mb4_general_ci
[embedded]
[mariadb]
[mariadb-10.1]
Ресурсов хватает, cpu и рам свободного много