Опыт клиента: интервью с NTT Communications

NTT Communications обслуживала и эксплуатировала системы клиентов с помощью нескольких инструментов мониторинга. Внедрив Zabbix, компания добилась значительного снижения затрат, а также автоматизации и оптимизации операций.

Задача

Автоматизировать и оптимизировать работы по обслуживанию за счет консолидации нескольких решений для мониторинга

Требования

Система должна позволять строить резервированные конфигурации

Снижение затрат на обслуживание, чтобы сохранить менеджеры мониторинга

Подход

Консолидировать три сервера мониторинга с помощью Zabbix

Связать систему с инструментами автоматизации, чтобы автоматизировать локализацию неисправностей и восстановление

Результат

Значительное повышение доступности благодаря резервированным конфигурациям

Одновременное снижение затрат и повышение эффективности за счет интеграции систем мониторинга

Курс на эксплуатацию без участия человека

NTT Communications - крупный телекоммуникационный оператор и глобальная компания, которая предоставляет ИКТ-решения корпорациям по всему миру. Компания развивает разнообразные направления бизнеса по всему миру, включая сетевые услуги, центры обработки данных, облачные сервисы и услуги в области безопасности.

Широкий спектр ее услуг включает поддержку интеграции, обслуживания и эксплуатации систем клиентов. В такой поддержке востребовано снижение затрат за счет автоматизации.

Г-н Satoshi Imai работает в группе 2 управления эксплуатацией, которая относится к отделу сервисных решений в составе подразделения бизнес-решений. Перед группой стояла цель вести эксплуатацию с минимальным участием человека, и она занималась автоматизацией. В рамках этой работы г-н Imai обратил внимание на Zabbix.

Одновременное использование 3 инструментов мониторинга привело к избытку серверов

Отдел, в котором работает г-н Imai, отслеживает системы, построенные NTT Communications для своих клиентов, и отвечает за их обслуживание, восстановление и эксплуатацию. До внедрения Zabbix в отделе одновременно использовались инструменты мониторинга трех разных компаний.

Г-н Imai вспоминает, как обстояли дела в то время: «Поскольку мы использовали три инструмента, для каждого проекта мы готовили по два сервера. Настройка серверов для каждого проекта давалась нам непросто, а поскольку версии на всех серверах различались, мы не могли стандартизировать настройки».

Еще одной проблемой была конфигурация с единственным сервером. «Если хотя бы один сервер выходил из строя, со мной связывались даже посреди ночи. Иногда я даже мчался на место на такси. И хотя для наших многочисленных серверов было выделено большое помещение, проблемой был и нагрев». (г-н Imai)

Еще более острым вопросом стало решение о переезде отдела г-на Imai в 2021 году. «При переезде площадки серверы тоже пришлось бы перевозить, но остановить мониторинг на время переезда было бы сложно. Поэтому мы решили установить новые серверы на новом месте, временно вести мониторинг одновременно и с их помощью, а затем остановить исходные серверы», - говорит г-н Imai.

Но даже в этом случае, если бы для каждого проекта устанавливался свой сервер, их число было бы огромным. Поэтому было решено внедрить Zabbix, чтобы консолидировать серверы.

К счастью, в NTT Communications есть команда ZABICOM, которая уже более десяти лет предоставляет клиентам услуги по настройке, обслуживанию и поддержке Zabbix. Г-н Imai решил построить резервированную конфигурацию Zabbix с помощью этой команды.

Консолидация 12 серверов в 1

Г-н Imai рассказывает о требованиях к новой системе мониторинга. «Прежде всего, мы не могли менять услуги, которые предоставляли клиентам, поэтому сосредоточились на том, чтобы новая система обладала нашими существующими возможностями мониторинга. Кроме того, требовалась возможность резервированной конфигурации. Резервированную конфигурацию так или иначе можно организовать на любом сервере, но идея заключалась в том, чтобы база данных работала отдельно. Далее, поскольку в системе мониторинга компании N работал только один процесс, параллельный мониторинг был невозможен, поэтому мы искали менеджер мониторинга, который позволил бы улучшить этот процесс. Мы также проверяли, подойдет ли система для автоматизации операций, которые мы используем внутри компании». Всем требованиям г-на Imai отвечал именно Zabbix.

Одобрение удалось получить легко, поскольку консолидация серверов обещала значительное снижение затрат. «Для начала при миграции серверов мониторинга десяти компаний, за которые я отвечаю, двенадцать серверов в итоге были объединены в один. Мы могли рассчитывать на значительное снижение затрат, которого с лихвой хватило бы, чтобы оправдать миграцию», - говорит г-н Imai. «Теперь, когда мы интегрировали в Zabbix 30 компаний, думаю, мы добились снижения затрат на 20% по сравнению с прежним уровнем».

План по ускорению базы данных

Mr. Imai
NTT Communications Corporation
Г-н Imai

Во время внедрения возникали некоторые трудности, например неизвестные ошибки в системе хранения, но само внедрение Zabbix прошло гладко. Кроме того, чтобы увеличить скорость базы данных, которая важна для Zabbix, компания приобрела сервер БД с более высокой скоростью записи и подключила его к базе данных напрямую кабелем DAC. Вдобавок для резервирования дисков была выбрана самая быстрая конфигурация - RAID10.

Различие между решением компании N, которое использовалось до этого, и только что внедренным Zabbix заключалось в периодичности мониторинга, и это беспокоило г-на Imai. «С инструментом компании N мы выполняли мониторинг каждые пять минут, а если во время проверки обнаруживалась аномалия, повторяли проверку каждую минуту. Иначе говоря, при возникновении проблемы клиент получал уведомление самое позднее через шесть минут, а самое раннее - через одну минуту. В Zabbix такой функции повторных проверок не было, поэтому меня беспокоило, как мы справимся с этим различием», - признается г-н Imai.

Чтобы решить эту проблему, г-н Imai задумал гарантировать окно как минимум в шесть минут - максимальное время отправки уведомлений до тех пор. «В Zabbix мы решили сообщить клиентам, что оповещений будет два, а мониторинг будет выполняться с интервалом в три минуты. Так нам удалось сгладить разницу в функциях». (г-н Imai)

Кроме того, чтобы повысить эффективность настройки мониторинга, был создан общий шаблон элементов данных. Это ускорило работу и позволило стандартизировать мониторинг. «Поскольку все привязано к шаблону, новые проекты автоматически связываются с сервером. С инструментом компании N нам приходилось настраивать элементы данных по одному, а теперь достаточно применить шаблон. В последнее время количество устройств и портов, которые нужно отслеживать, выросло, и вручную это заняло бы огромное количество времени, поэтому автоматизация была необходима», - говорит г-н Imai.

Значительное сокращение остановок на обслуживание благодаря резервированной конфигурации

Так была построена система мониторинга на базе Zabbix с резервированной конфигурацией. Благодаря повышению доступности больше не возникало ситуаций, когда ночью нужно было срочно ехать на работу, и эксплуатация шла гладко.

«Система помогает автоматизировать локализацию неисправностей и восстановление, работая вместе с инструментами автоматизации. Благодаря резервированной конфигурации также значительно сократилось количество остановок на обслуживание. Кроме того, мы можем устранять уязвимости, не останавливая мониторинг, поэтому делаем это раз в неделю». (г-н Imai)

Кроме того, раньше приходилось проверять три разных экрана, поскольку одновременно использовались три инструмента, а теперь достаточно одного экрана. Сократить удалось не только количество серверов, но и количество компьютеров для мониторинга. Раньше на одного человека приходилось от четырех до пяти компьютеров, а теперь примерно один.

Г-н Imai отмечает преимущества Zabbix по сравнению с другими системами: возможность параллельного мониторинга, простоту построения резервированной конфигурации, а также простоту интеграции через API. «Поскольку мы можем увеличивать количество процессов, мы можем параллельно обрабатывать объекты мониторинга блоками по 100 или 200. Кроме того, когда производительность сервера Zabbix приближается к пределу, установка прокси Zabbix позволяет легко масштабироваться горизонтально, ведь на одном экране можно отслеживать от сотен до тысяч компаний», - объясняет г-н Imai.

По словам г-на Imai, полезны также функции карт и связей «родитель-потомок». «Карта показывает конфигурацию сети, а участки, где возникают аномалии, выделяются красным, поэтому с первого взгляда видно, в каком месте сети они возникают. А функция связей родитель-потомок предотвращает оповещения от множества устройств, расположенных за вышедшим из строя устройством, что позволяет сократить количество уведомлений».

Г-н Imai также ценит то, что права пользователей разделены на три категории. В инструменте компании N права пользователей не разграничивались и у всех пользователей были права администратора, поэтому в прошлом операторы иногда удаляли настройки. «В Zabbix можно задать три типа пользователей: пользователи, которые могут только просматривать, пользователи, которые могут добавлять настройки мониторинга, и пользователи, которые могут управлять всем. Это помогает предотвращать ошибки при эксплуатации», - говорит г-н Imai.

Кроме того, по словам г-на Imai, поскольку графики отображаются по умолчанию, а их изображения можно сразу все вставить в отчеты, «работа по подготовке ежемесячных отчетов для клиентов стала эффективнее».

Расширение внедрения и ожидания от новых функций

Хотя используемая сейчас версия Zabbix 5.0 этого не поддерживает, г-н Imai хотел бы использовать функцию геокарт после одного из будущих обновлений. Функция геокарт подключается к Google Maps и позволяет с первого взгляда увидеть, в каких местах есть оповещения, что упрощает мониторинг магазинов торговой сети. «До сих пор, когда происходил сбой, я сам рисовал схему и объяснял ее. Раньше мы проверяли каждую неисправность сами, а с этой функцией могли бы визуализировать их и реагировать быстрее», - говорит г-н Imai, с оптимизмом ожидая обновления.

Г-н Imai стал своего рода испытателем, внедрив Zabbix в рамках проекта, за который он отвечал, а теперь внедрение расширяется в пределах всего отдела.

«В дальнейшем мы планируем перевести на Zabbix все, кроме тех случаев, которые не подходят по соображениям безопасности. Сейчас мы используем Zabbix для мониторинга около 30 компаний, а в будущем хотели бы увеличить это число примерно до 100». (г-н Imai)

Эксплуатация с Zabbix, которая повысила доступность и сделала отчеты более понятными, получила высокую оценку клиентов. Инициатива г-на Imai, начавшаяся в небольшом масштабе, теперь распространяется на весь отдел, повышая его эффективность и, как следствие, удовлетворенность клиентов.

Обзор системы

Количество серверов Zabbix: 2
Количество прокси Zabbix: 2
Резервирование: да. Active - Active
Количество площадок: 1,000
Количество отслеживаемых устройств: 40,000
Количество триггеров: 41,000
Количество элементов данных: 130,000
Количество пользователей: 75
NVPS: 426

NTT Communications Corporation

Как «DX Enabler™», способствующий цифровой трансформации клиентов, NTT Communications стремится решать управленческие задачи клиентов и создавать более интеллектуальное общество с помощью ИКТ.

Благодаря интеграции наших глобальных операций в июле 2019 года мы расширили перечень услуг и зону покрытия.

Наша компания будет поддерживать глобальный бизнес своих клиентов с помощью еще более совершенных систем и решений.

Головной офис:
Токио, Япония
Дата основания:
1999
Сотрудники:
9,000
(июль 2022 г.)
Уставный капитал:
230.9 млрд JPY

Хотели бы поделиться своей историей использования решения мониторинга Zabbix?

Заполните этот опросный лист или напишите нашей команде маркетинга для получения дальнейшей помощи.

Приступите к работе за 10 минут, совершенно БЕСПЛАТНО

Скачать Zabbix

Zabbix - бесплатное программное обеспечение с открытым исходным кодом. Никаких ограничений и скрытых расходов