Could not open device at IPMITOOL Не удается настроbть IPMI

[mzfaker]

Здравствуйте!

root@zabbix:/var/log# uname -a

Linux zabbix 3.19.0-80-generic #88~14.04.1-Ubuntu SMP Fri Jan 13 14:54:07 UTC 2017 x86_64 x86_64 x86_64 GNU/Linux

1. При вводе этого

root@zabbix:/var/log# ipmitool

получаю это

Could not open device at /dev/ipmi0 or /dev/ipmi/0 or /dev/ipmidev/0: No such file or directory

А вообще проблема в том что не удается подключиться к IPMI HP DL 380 G8
ХЕЛП
Кусок дебага

47012:20170616:130840.992 In get_values()
 47012:20170616:130840.992 In DCconfig_get_poller_items() poller_type:1
 47012:20170616:130840.992 End of DCconfig_get_poller_items():1
 47012:20170616:130840.992 In substitute_key_macros() data:'baseboard_temp'
 47012:20170616:130840.993 End of substitute_key_macros():SUCCEED data:'baseboard_temp'
 47012:20170616:130840.993 In substitute_simple_macros() data:'623'
 47012:20170616:130840.993 In get_value() key:'baseboard_temp'
 47012:20170616:130840.993 In get_value_ipmi() key:'NODE001:baseboard_temp'
 47012:20170616:130840.993 In zbx_init_ipmi_host() host:'[10.200.1.65]:623'
 47012:20170616:130840.993 In zbx_get_ipmi_host() host:'[10.200.1.65]:623'
 47012:20170616:130840.993 End of zbx_get_ipmi_host():(nil)
 47012:20170616:130840.993 In zbx_allocate_ipmi_host() host:'[10.200.1.65]:623'
 47012:20170616:130840.993 End of zbx_allocate_ipmi_host():0x5569b526f640
 47012:20170616:130840.993 In zbx_perform_openipmi_ops() host:'[10.200.1.65]:623' phost:0x5569b526f640 from zbx_init_ipmi_host()
 47012:20170616:130841.038 In zbx_connection_change_cb() host:'[10.200.1.65]:623' phost:0x5569b526f640 domain:0x5569b527abd0 err:33554436 conn_num:0 port_num:0 still_connected:0 cb_data:0x5569b526f640
 47012:20170616:130841.038 zbx_connection_change_cb() fail: [33554436] Unknown error 33554436
 47012:20170616:130841.038 End of zbx_connection_change_cb():NETWORK_ERROR
 47012:20170616:130841.039 In zbx_domain_closed_cb() phost:0x5569b526f640 host:'[10.200.1.65]:623'
 47012:20170616:130841.039 End of zbx_domain_closed_cb()
 47012:20170616:130841.039 End zbx_perform_openipmi_ops() from zbx_init_ipmi_host()
 47012:20170616:130841.039 End of zbx_init_ipmi_host():0x5569b526f640 domain_nr:0
 47012:20170616:130841.039 Item [NODE001:baseboard_temp] error: cannot connect to IPMI host: [33554436] Unknown error 33554436
 47012:20170616:130841.039 End of get_value():NETWORK_ERROR
 47012:20170616:130841.039 In deactivate_host() hostid:10107 itemid:24340 type:12
 47012:20170616:130841.039 query [txnlev:1] [begin;]
 47012:20170616:130841.039 query [txnlev:1] [update hosts set ipmi_disable_until=1497618581 where hostid=10107]
 47012:20170616:130841.040 query [txnlev:1] [commit;]
 47012:20170616:130841.043 deactivate_host() errors_from:1497607074 available:2
 47012:20170616:130841.043 End of deactivate_host()
 47012:20170616:130841.043 End of get_values():1

[yukra]

Could not open device at /dev/ipmi0 or /dev/ipmi/0 or /dev/ipmidev/0: No such file or directory

modprobe ipmi_si
modprobe ipmi_devintf

Только причем тут заббикс?

47012:20170616:130840.992 In get_values()
 47012:20170616:130840.992 In DCconfig_get_poller_items() poller_type:1
 47012:20170616:130840.992 End of DCconfig_get_poller_items():1
 47012:20170616:130840.992 In substitute_key_macros() data:'baseboard_temp'
 47012:20170616:130840.993 End of substitute_key_macros():SUCCEED data:'baseboard_temp'
 47012:20170616:130840.993 In substitute_simple_macros() data:'623'
 47012:20170616:130840.993 In get_value() key:'baseboard_temp'
 47012:20170616:130840.993 In get_value_ipmi() key:'NODE001:baseboard_temp'
 47012:20170616:130840.993 In zbx_init_ipmi_host() host:'[10.200.1.65]:623'
 47012:20170616:130840.993 In zbx_get_ipmi_host() host:'[10.200.1.65]:623'
 47012:20170616:130840.993 End of zbx_get_ipmi_host():(nil)
 47012:20170616:130840.993 In zbx_allocate_ipmi_host() host:'[10.200.1.65]:623'
 47012:20170616:130840.993 End of zbx_allocate_ipmi_host():0x5569b526f640
 47012:20170616:130840.993 In zbx_perform_openipmi_ops() host:'[10.200.1.65]:623' phost:0x5569b526f640 from zbx_init_ipmi_host()
 47012:20170616:130841.038 In zbx_connection_change_cb() host:'[10.200.1.65]:623' phost:0x5569b526f640 domain:0x5569b527abd0 err:33554436 conn_num:0 port_num:0 still_connected:0 cb_data:0x5569b526f640
 47012:20170616:130841.038 zbx_connection_change_cb() fail: [33554436] Unknown error 33554436
 47012:20170616:130841.038 End of zbx_connection_change_cb():NETWORK_ERROR
 47012:20170616:130841.039 In zbx_domain_closed_cb() phost:0x5569b526f640 host:'[10.200.1.65]:623'
 47012:20170616:130841.039 End of zbx_domain_closed_cb()
 47012:20170616:130841.039 End zbx_perform_openipmi_ops() from zbx_init_ipmi_host()
 47012:20170616:130841.039 End of zbx_init_ipmi_host():0x5569b526f640 domain_nr:0
 47012:20170616:130841.039 Item [NODE001:baseboard_temp] error: cannot connect to IPMI host: [33554436] Unknown error 33554436
 47012:20170616:130841.039 End of get_value():NETWORK_ERROR
 47012:20170616:130841.039 In deactivate_host() hostid:10107 itemid:24340 type:12
 47012:20170616:130841.039 query [txnlev:1] [begin;]
 47012:20170616:130841.039 query [txnlev:1] [update hosts set ipmi_disable_until=1497618581 where hostid=10107]
 47012:20170616:130841.040 query [txnlev:1] [commit;]
 47012:20170616:130841.043 deactivate_host() errors_from:1497607074 available:2
 47012:20170616:130841.043 End of deactivate_host()
 47012:20170616:130841.043 End of get_values():1

Заббикс работает с IPMI через сеть (даже если это IPMI на самом заббикс-сервере). Соответственно тестировать нужно командой "ipmitool -U ADMIN -P PASSWORD -H IP lan print" или типа того, а локально.
Не знаю как на делах, а на супермирке есть баг - с сервера нельзя законектиться на IPMI этого сервера в случае если IPMI настроен через shared порт. То есть сетевая ОС и сетевая IPMI настроены через один физический интерфейс, подключены одним кабелем, но они друг друга не видят. Когда пакет от ОС доходит до свича, он видит что судя по мак-адресу назначения пакет нужное устройство живет за тем портом, от которого получен данный пакет, а как мы помним пакет нельзя пересылать в порт, из которого мы его получили. При этом внутри сервера нет "маленького свича на 3 порта", а если 2 логических сетевых интерфейса и 1 физический. И трафик отправленный логическим интерфейсом уходит через физический интерфейс, но не уходит во второй логический.
Решение: или выделить для IPMI dedicaled порт и соответственно на все будет нормально работать через свич, или выделить под IPMI отдельный влан настроить маршрутизацию между вланами, и тогда трафик через свич будет доходить до роутера, а потом возвращаться обратно, но уже в другом влане. Со стороны IPMI нужно сделать тегированный трафик командой "ipmitool lan set 1 vlan id X"

(если конечно изначальное предположение верно и проблема делла точно такая же как у supermicro).

[mzfaker]

[QUOTE=yukra;200623]

modprobe ipmi_si
modprobe ipmi_devintf

Это уже попробовал вот такая лажа

root@zabbix:/var/log# modprobe ipmi_si
modprobe: ERROR: could not insert 'ipmi_si': No such device

Улалось вроде запустить введя это

mknod -m 0600 /dev/ipmi0 c 254 0

Подключился все получил

ipmitool -U -I lanplus  ADMIN -P 123 -E -H 10.200.1.65 power status

как теперь это настроить в заббикс
скрин то что с галочкой так не работает, ошибки те же что и в дебаге выше

[yukra]

Это уже попробовал вот такая лажа

root@zabbix:/var/log# modprobe ipmi_si
modprobe: ERROR: could not insert 'ipmi_si': No such device

Судя по интернетам я перепутал порядок, сначала нужно грузить ipmi_devintf, а потом ipmi_si, причем некоторые рекомендуют перед ipmi_devintf еще и ipmi_msghandler загрузить вручную. Не знаю на сколько это актуально для ubuntu, а в centos7 я могу сразу ipmi_si грузить и все работает:

[root@zabbix ~]# lsmod | grep ipmi
ipmi_devintf           17572  0 
ipmi_si                53582  0 
ipmi_msghandler        46608  2 ipmi_devintf,ipmi_si
[root@zabbix ~]# rmmod ipmi_devintf ipmi_si ipmi_msghandler 
[root@zabbix ~]# lsmod | grep ipmi
[root@zabbix ~]# modprobe ipmi_si 
[root@zabbix ~]# lsmod | grep ipmi
ipmi_devintf           17572  0 
ipmi_si                53582  0 
ipmi_msghandler        46608  2 ipmi_devintf,ipmi_si
[root@zabbix ~]#

Хотя и от сервера может тоже зависить.

ipmitool -U -I lanplus  ADMIN -P 123 -E -H 10.200.1.65 power status

"-U ADMIN -I lanplus" или "-I lanplus -U ADMIN", но никак не "-U -I lanplus ADMIN", если у вас действительно заработало в таком виде, то вам просто повезло (либо бага в обработки опций ipmitool в вашей ОС, либо вы ошиблись при вставке строчки на форум, в таком варианте -U должен уйти в ipmitool без параметра, а строчка "ADMIN" восприняться как команда).

что такое "-I lanplus"

$ ipmitool -h
ipmitool version 1.8.16
usage: ipmitool [options...] <command>
...
-I intf Interface to use
...
Interfaces:
open Linux OpenIPMI Interface [default]
imb Intel IMB Interface
lan IPMI v1.5 LAN Interface
lanplus IPMI v2.0 RMCP+ LAN Interface
free FreeIPMI IPMI Interface
serial-terminal Serial Interface, Terminal Mode
serial-basic Serial Interface, Basic Mode
usb IPMI USB Interface(OEM Interface for AMI Devices)
...

как мне правильно указать шифрование в забиксе?

Либо раскурить спеку https://www.intel.com/content/dam/ww...ce-spec-v2.pdf либо перебрать все возможные варианты. В случае если ipmi v2, то вероятнее всего подойдет RMCP+

Ps не забудьте поиграть в гентушника самостоятельно собирая пакеты

[mzfaker]

Судя по интернетам я перепутал порядок, сначала нужно грузить ipmi_devintf, а потом ipmi_si, причем некоторые рекомендуют перед ipmi_devintf еще и ipmi_msghandler загрузить вручную. Не знаю на сколько это актуально для ubuntu, а в centos7 я могу сразу ipmi_si грузить и все работает:


Хотя и от сервера может тоже зависить.


"-U ADMIN -I lanplus" или "-I lanplus -U ADMIN", но никак не "-U -I lanplus ADMIN", если у вас действительно заработало в таком виде, то вам просто повезло (либо бага в обработки опций ipmitool в вашей ОС, либо вы ошиблись при вставке строчки на форум, в таком варианте -U должен уйти в ipmitool без параметра, а строчка "ADMIN" восприняться как команда).



Либо раскурить спеку https://www.intel.com/content/dam/ww...ce-spec-v2.pdf либо перебрать все возможные варианты. В случае если ipmi v2, то вероятнее всего подойдет RMCP+

Ps не забудьте поиграть в гентушника самостоятельно собирая пакеты

Странно почему не увидели мое редактированное сообщение, я там скрин показал что пробовал с авторизацией RMCP+ не получается, несколько по перепробовал фиг там.

что касается

ipmi_si

ее вообще не в каком порядке не получилось на в гугле нашел еще это

mknod -m 0600 /dev/ipmi0 c 254 0

вот после нее завелось, в результате вот.

root@zabbix:/var/log# ls -l /dev/ipmi0
crw------- 1 root root 254, 0 Jun 16 21:04 /dev/ipmi0
root@zabbix:/var/log# lsmod | grep ipmi
ipmi_devintf           20480  0
ipmi_msghandler        49152  1 ipmi_devintf

что касается

lanplus

узнал так

ipmitool -m

и после этого и выставил RMCP+ но увы, не пашет. Буду искать дальше.
вот с маном в пдф, хз боюсь не осилю сильно много описано, да и с анг плохо, как минимум с ориентироваться трудно, уже по содержанию на 10 страниц ))

root@zabbix:/var/log# rmmod ipmi_devintf ipmi_si ipmi_msghandler
rmmod: ERROR: Module ipmi_si is not currently loaded
root@zabbix:/var/log# modprobe ipmi_si
modprobe: ERROR: could not insert 'ipmi_si': No such device

[mzfaker]

root@zabbix:/var/log# ipmitool -U admin -H 10.200.1.65 -I lanplus -L user sensor
Password:
UID Light        | 0x0        | discrete   | 0x0080| na        | na        | na        | na        | na        | na
Sys. Health LED  | 0x0        | discrete   | 0x0080| na        | na        | na        | na        | na        | na
Fan 1            | na         | discrete   | na    | na        | na        | na        | na        | na        | na
Fan 2            | 36.064     | percent    | ok    | na        | na        | na        | na        | na        | na
Fan 3            | na         | discrete   | na    | na        | na        | na        | na        | na        | na
Fan 4            | 45.472     | percent    | ok    | na        | na        | na        | na        | na        | na
Fan 5            | 45.472     | percent    | ok    | na        | na        | na        | na        | na        | na
Fan 6            | 45.472     | percent    | ok    | na        | na        | na        | na        | na        | na
Power Supply 1   | 115        | Watts      | ok    | na        | na        | na        | na        | na        | na
Power Supply 2   | na         | discrete   | na    | na        | na        | na        | na        | na        | na
Power Supplies   | 0x0        | discrete   | 0x0880| na        | na        | na        | na        | na        | na
01-Front Ambient | 19.000     | degrees C  | ok    | na        | na        | na        | na        | 45.000    | 49.000
02-CPU 1         | 40.000     | degrees C  | ok    | na        | na        | na        | na        | 70.000    | 0.000
03-CPU 2         | na         |            | na    | na        | na        | na        | na        | 70.000    | 0.000
04-P1 DIMM 1-6   | 27.000     | degrees C  | ok    | na        | na        | na        | na        | 87.000    | 0.000
05-P2 DIMM 1-6   | na         |            | na    | na        | na        | na        | na        | 87.000    | 0.000
06-P1 Mem Zone   | 30.000     | degrees C  | ok    | na        | na        | na        | na        | 80.000    | 85.000
07-P1 Mem Zone   | 30.000     | degrees C  | ok    | na        | na        | na        | na        | 80.000    | 85.000
08-P1 Mem Zone   | 29.000     | degrees C  | ok    | na        | na        | na        | na        | 80.000    | 85.000
09-P2 Mem Zone   | 27.000     | degrees C  | ok    | na        | na        | na        | na        | 80.000    | 85.000
10-P2 Mem Zone   | 27.000     | degrees C  | ok    | na        | na        | na        | na        | 80.000    | 85.000
11-P2 Mem Zone   | 27.000     | degrees C  | ok    | na        | na        | na        | na        | 80.000    | 85.000
12-HD Max        | 35.000     | degrees C  | ok    | na        | na        | na        | na        | 60.000    | 0.000
13-Chipset       | 44.000     | degrees C  | ok    | na        | na        | na        | na        | 105.000   | 0.000
14-Chipset Zone  | 34.000     | degrees C  | ok    | na        | na        | na        | na        | 95.000    | 100.000
15-P/S 1         | 27.000     | degrees C  | ok    | na        | na        | na        | na        | 0.000     | 0.000
16-P/S 2         | na         |            | na    | na        | na        | na        | na        | 0.000     | 0.000
17-P/S 1 Zone    | 27.000     | degrees C  | ok    | na        | na        | na        | na        | 80.000    | 85.000
18-P/S 2 Zone    | 28.000     | degrees C  | ok    | na        | na        | na        | na        | 80.000    | 85.000
19-VR P1         | 29.000     | degrees C  | ok    | na        | na        | na        | na        | 115.000   | 120.000
20-VR P2         | 26.000     | degrees C  | ok    | na        | na        | na        | na        | 115.000   | 120.000
21-VR P1 Mem     | 30.000     | degrees C  | ok    | na        | na        | na        | na        | 115.000   | 120.000
22-VR P2 Mem     | 25.000     | degrees C  | ok    | na        | na        | na        | na        | 115.000   | 120.000
23-SuperCap Max  | 24.000     | degrees C  | ok    | na        | na        | na        | na        | 65.000    | 0.000
24-HD Controller | na         |            | na    | na        | na        | na        | na        | 100.000   | 0.000
25-HD Cntlr Zone | na         |            | na    | na        | na        | na        | na        | 0.000     | 0.000
26-iLO Zone      | 34.000     | degrees C  | ok    | na        | na        | na        | na        | 100.000   | 105.000
27-LOM           | na         |            | na    | na        | na        | na        | na        | 100.000   | 0.000
28-LOM Zone      | 31.000     | degrees C  | ok    | na        | na        | na        | na        | 90.000    | 105.000
29-PCI 1         | na         |            | na    | na        | na        | na        | na        | 100.000   | 0.000
30-PCI 2         | 85.000     | degrees C  | ok    | na        | na        | na        | na        | 100.000   | 0.000
31-PCI 3         | na         |            | na    | na        | na        | na        | na        | 100.000   | 0.000
32-PCI 4         | na         |            | na    | na        | na        | na        | na        | 100.000   | 0.000
33-PCI 5         | na         |            | na    | na        | na        | na        | na        | 100.000   | 0.000
34-PCI 6         | na         |            | na    | na        | na        | na        | na        | 100.000   | 0.000
35-PCI 1 Zone    | 32.000     | degrees C  | ok    | na        | na        | na        | na        | 67.000    | 72.000
36-PCI 2 Zone    | 33.000     | degrees C  | ok    | na        | na        | na        | na        | 67.000    | 72.000
37-PCI 3 Zone    | 32.000     | degrees C  | ok    | na        | na        | na        | na        | 67.000    | 72.000
38-PCI 4 Zone    | 27.000     | degrees C  | ok    | na        | na        | na        | na        | 67.000    | 72.000
39-PCI 5 Zone    | na         |            | na    | na        | na        | na        | na        | 67.000    | 72.000
40-PCI 6 Zone    | na         |            | na    | na        | na        | na        | na        | 67.000    | 72.000
41-System Board  | 33.000     | degrees C  | ok    | na        | na        | na        | na        | 90.000    | 95.000
42-System Board  | 31.000     | degrees C  | ok    | na        | na        | na        | na        | 90.000    | 95.000
43-System Board  | 33.000     | degrees C  | ok    | na        | na        | na        | na        | 90.000    | 95.000
44-HD Board      | na         |            | na    | na        | na        | na        | na        | 65.000    | 70.000
45-HD Board      | na         |            | na    | na        | na        | na        | na        | 60.000    | 65.000
46-HD Board      | na         |            | na    | na        | na        | na        | na        | 65.000    | 70.000
47-HD Board      | na         |            | na    | na        | na        | na        | na        | 65.000    | 70.000
48-Sys Exhaust   | 31.000     | degrees C  | ok    | na        | na        | na        | na        | 90.000    | 95.000
49-Sys Exhaust   | 31.000     | degrees C  | ok    | na        | na        | na        | na        | 90.000    | 95.000
50-System Board  | 24.000     | degrees C  | ok    | na        | na        | na        | na        | 60.000    | 65.000
Memory           | 0x0        | discrete   | 0x4080| na        | na        | na        | na        | na        | na
C3 P2I Bay 2     | 0x1        | discrete   | 0x0180| na        | na        | na        | na        | na        | na
C3 P2I Bay 3     | 0x1        | discrete   | 0x0180| na        | na        | na        | na        | na        | na
C3 P2I Bay 4     | 0x1        | discrete   | 0x0180| na        | na        | na        | na        | na        | na
C3 P2I Bay 5     | 0x1        | discrete   | 0x0180| na        | na        | na        | na        | na        | na
C3 P2I Bay 6     | 0x1        | discrete   | 0x0180| na        | na        | na        | na        | na        | na
C3 P2I Bay 7     | 0x1        | discrete   | 0x0180| na        | na        | na        | na        | na        | na
C3 P2I Bay 9     | 0x1        | discrete   | 0x0180| na        | na        | na        | na        | na        | na
C3 P2I Bay 10    | 0x1        | discrete   | 0x0180| na        | na        | na        | na        | na        | na
C3 P2I Bay 11    | 0x1        | discrete   | 0x0180| na        | na        | na        | na        | na        | na
C3 P2I Bay 12    | 0x1        | discrete   | 0x0180| na        | na        | na        | na        | na        | na

ну собственно вот из документации, но так всеравно не пашет уже попробовал, походу нужно пересобирать

Extensions to the protocols for IPMI over IP, collectively referred to as “RMCP+”, support new
algorithms that provide more robust key exchange process for establishing sessions and authenticating
users. These steps more closely align with those used for the DMTF ASF 2.0 specification (see
[ASF2.0]), making it simpler to create applications that can connect to both ASF and IPMI-based
system.

[yukra]

Странно почему не увидели мое редактированное сообщение, я там скрин показал что пробовал с авторизацией RMCP+ не получается, несколько по перепробовал фиг там.

Я ответ писал несколько часов, большую часть времени отвлекаясь на другие дела.

что касается

ipmi_si

ее вообще не в каком порядке не получилось на в гугле нашел еще это

mknod -m 0600 /dev/ipmi0 c 254 0

Это все по большому счету фигня. Вам не нужно /dev/ipmi0 что бы мониторить IPMI в заббикс, заббикс в IPMI "по сети" ходит, а /dev/ipmi0 нужен что бы из ОС настройки делать.

и после этого и выставил RMCP+ но увы, не пашет. Буду искать дальше.

OpenIPMI пересобрали? ссылка в моем предыдущем сообщении, в самом конце. Без пересборки точно работать не будет (во всяком случае так написано в документации).

А еще есть мониторинг IPMI через external check. Мне кажется тоже под ваши задачи вполне подойдет https://habrahabr.ru/post/330604/

[mzfaker]

OpenIPMI пересобрали? ссылка в моем предыдущем сообщении, в самом конце. Без пересборки точно работать не будет (во всяком случае так написано в документации).

не пересобрать не удалось не силен в этом
по этому ману ZBX-6139



ну на хабре, честно хотелось бы обойтись стандартным что предложено в забикс, добавлять свои шаблоны и скрипты в замен существующим, хз, хотя я ток изучать это начал, может это и в пользу, но хотелось бы обойтись малой кровью, буду искать способы как пересобрать еще или может уже где есть готовый пакет openipmi

[mzfaker]

https://habrahabr.ru/post/330604/

так тоже не пашет, zabbix 3.2 этот скрипт там не работает, не знаю что автор еще там дописывал. но даже элементарно в мониторинге элементов данных нет. самих элементов