KDDI использовала разные приложения мониторинга для разных систем, пока не стандартизировала задачи мониторинга с помощью Zabbix. Это позволило интегрировать системы поддержки и повысить операционную эффективность.
Обеспечить возможность эксплуатировать решения для мониторинга собственными силами, а также стандартизировать мониторинг и повысить его эффективность
Все функции, необходимые для эксплуатации и мониторинга, доступны в полном объеме без привязки к конкретным поставщикам или продуктам
Возможность совершенствовать эксплуатацию/мониторинг внутри компании
Сформулирована политика внедрения мониторинга
Созданы и развернуты стандартные шаблоны для Zabbix
Создана общая база знаний, необходимая для настройки эксплуатации/мониторинга, и интегрированы системы поддержки
Благодаря стандартизации упрощен процесс внедрения
Время создания и разработки системы мониторинга сокращено с трех недель до 30 минут
Будучи крупным оператором связи, KDDI предоставляет услуги связи на базе технологии 5G и содействует цифровой трансформации клиентов, а также ведет разнообразный бизнес, в том числе в финансовом и энергетическом секторах, в Японии и за ее пределами.
Компания начала рассматривать внедрение нового решения для мониторинга, поскольку на тот момент для разных систем использовались разные приложения мониторинга. Были и проблемы с эффективностью, так как операционные задачи выполнялись вручную. Кроме того, операторов на местах беспокоило, что выполнение задач зависело от навыков отдельных сотрудников.
«Поскольку серверы мониторинга различались в зависимости от оборудования, каждый раз, когда оператор брал на себя новое оборудование, возникали дополнительные затраты на обучение. Мы также хотели снизить затраты на внедрение, разработку и обслуживание оборудования для мониторинга», - говорит г-н Taro Kamiya из KDDI (эксперт, отдел облачного инжиниринга, инженерное подразделение).
KDDI рассматривала внедрение системы, которая могла бы улучшить ситуацию, но не могла ничего изменить, поскольку поставщик, которому была передана разработка, отвечал и за мониторинг. Другим вариантом было доработать решение для мониторинга, предоставленное поставщиком, чтобы KDDI могла управлять им самостоятельно, однако г-н Kamiya поясняет: «Это создало бы проблему разграничения зон ответственности с поставщиком. Кроме того, мы хотели уйти от ситуации, когда в зависимости от системы использовались разные системы мониторинга. По этим причинам мы решили рассмотреть решение для мониторинга, которое могли бы эксплуатировать внутри компании».
Кроме того, содержание мониторинга различалось в зависимости от оборудования, поскольку элементы данных мониторинга проектировались или создавались для каждой единицы оборудования отдельно, и качество мониторинга было неоднородным.
В силу этих обстоятельств команда г-на Kamiya приступила к стандартизации мониторинга. Прежде всего, была сформулирована политика стандартизации внедрения мониторинга. Команда задокументировала назначение и примеры реализации элементов данных мониторинга, чтобы определить минимальные требования. Затем эта информация была передана партнерам по разработке, чтобы все подразделения KDDI одинаково понимали эти требования. Так в рамках подготовки к стандартизации мониторинга была разработана политика внедрения мониторинга.
Прежде чем внедрить решение для мониторинга, KDDI сравнила и изучила различные инструменты. В итоге выбор сузился до Zabbix и еще одного решения. Г-н Kamiya объясняет, почему в конце концов выбрали Zabbix: «Мы уже использовали Zabbix в прошлом, и многие наши сотрудники имели о нем базовые знания. Кроме того, что еще важнее, в Zabbix есть почти все функции, необходимые для операций мониторинга, например функция статистики».
Он также добавил: «Поскольку наша команда в основном отслеживает журналы, нам нужно было решение для этой задачи, и Zabbix подошел идеально. Большинство других решений были рассчитаны на мониторинг состояния сервисов, а некоторые из них не подходили для долгосрочного хранения данных или мониторинга журналов». Хотя г-на Kamiya беспокоила производительность мониторинга журналов в старых версиях, включая Zabbix 1.8, которым он пользовался раньше, он говорит: «Когда мы внедрили Zabbix 5.0/6.0, мы убедились, что производительность значительно улучшилась, и решили, что его можно смело использовать».
Г-н Kamiya также ценит то, что настройки мониторинга, например настройки элементов данных и триггеров, можно задавать через GUI, как и детально настраивать отправку уведомлений на более высокие уровни. «Я считаю, что GUI Zabbix удобен и интуитивно понятен, поэтому даже новичкам легко настроить мониторинг. Еще одно преимущество в том, что при опросе можно использовать API для связи с другими системами», - говорит г-н Kamiya.
Хотя внедрение Zabbix прошло гладко, по словам г-на Kamiya, настроить его производительность было несколько сложно. «Чтобы обеспечивать поддержку своими силами, на этапе стандартизации мы включили функции для базовой настройки производительности, опираясь на примеры настройки других систем. Особенно непросто было настроить MariaDB, которую мы сейчас используем, поскольку при ее разрастании отдельные части могут работать некорректно», - говорит г-н Kamiya.
Тем не менее внедрение принесло значительный эффект. Во-первых, была создана общая база знаний, необходимая для настройки эксплуатации/мониторинга. Это не только снизило затраты, но и упростило обучение операторов на местах. «Раньше многое знали только определенные сотрудники, и даже найти нужного человека, чтобы попросить о помощи, было непросто. А теперь наша команда работает как отдел поддержки Zabbix. Запросы приходят из подразделений, с которыми мы раньше никогда не работали, и обрабатывать их непросто, однако благодаря интеграции систем поддержки эффективность выросла», - отмечает г-н Kamiya.
Кроме того, в результате внедрения системы, которая автоматически применяет политику, «процесс создания, применения шаблонов и настройки системы мониторинга теперь занимает около 30 минут. Раньше на это уходило около трех недель, так что экономия времени значительная», - говорит г-н Kamiya. «Кроме того, поскольку политика применяется ко всем сотням серверов без исключения, это способствует повышению качества. Мониторинг контейнеров также можно автоматизировать с помощью механизмов LLD», - рассказывает г-н Kamiya о результатах.
Переход на внутреннюю поддержку не вызвал серьезных проблем, говорит г-н Kamiya. Напротив, он позволил оказывать поддержку быстрее, поскольку теперь пользователи могут задавать вопросы ответственному сотруднику внутри организации, у которого есть опыт работы с Zabbix. Г-н Kamiya также настроил в Microsoft Teams, который используется внутри компании, функцию вопросов и ответов (Q&A), где пользователи могут задавать вопросы о Zabbix. Целевой срок решения проблемы - не более трех рабочих дней, а ответы на вопросы сопровождаются описанием порядка действий.
После внедрения Zabbix были стандартизированы и элементы данных мониторинга. Г-н Mitsuru Kawamata, руководитель группы секции системных активов, говорит: «Раньше при вводе оборудования приходилось проверять, правильно ли работает мониторинг на каждой единице оборудования, поскольку он проектировался индивидуально. Стандартизация позволила нам исключить этот этап внедрения. Теперь нет необходимости проверять элементы данных мониторинга, поэтому процедуры согласования можно упростить».
При стандартизации ставилась цель реализовать возможность настраивать элементы данных мониторинга в соответствии с политикой внедрения мониторинга, сформулированной KDDI. Кроме того, KDDI подготовила стандартные шаблоны для Zabbix, соответствующие этой политике. Также появилась возможность адаптировать мониторинг к конкретной среде, изменяя макросы. «Я также считаю преимуществом Zabbix простоту использования шаблонов», - говорит г-н Kawamata.
Теперь, когда KDDI создала систему мониторинга серверов, компания планирует распространить использование Zabbix на другое оборудование, например сетевое оборудование и оборудование мобильной связи. Компания считает, что обмен опытом и обсуждение проблем помогают совместно решать задачи и в итоге повышают качество мониторинга. Количество отслеживаемых узлов сети планируется увеличить примерно до 5,000 для серверов и для оборудования мобильной связи соответственно и примерно до 20,000 для сетевого оборудования.
Первым шагом на этом пути станет стандартизация мониторинга по базовой линии. Это позволит для каждого вида оборудования определять KPI для проверки использования сервисов, выявлять отклонения на основе KPI и обнаруживать сбои в реальном времени. KDDI также рассматривает стандартизацию машинного обучения с помощью Zabbix, чтобы анализировать данные метрик устройств, например загрузку CPU, определять наличие отклонений и обнаруживать сбои.
«Мы продолжим совершенствовать мониторинг на Zabbix, а также развивать его, чтобы задать стандарт эксплуатации оборудования», - говорит г-н Kamiya.
KDDI - многопрофильная телекоммуникационная компания, предоставляющая услуги как фиксированной, так и мобильной связи, - стремится быть лидером в эпоху перемен.
Частным клиентам KDDI предлагает услуги мобильной связи (мобильные телефоны au) и фиксированной связи (широкополосный интернет/телефония) под брендом «au», помогая создавать новые бесшовные коммуникационные среды. А корпоративным клиентам KDDI предоставляет все услуги в сфере ИКТ (информационно-коммуникационных технологий): от сетей FMC (Fixed Mobile Convergence) до центров обработки данных, приложений и стратегий безопасности, помогая клиентам укреплять бизнес.
Заполните этот опросный лист или напишите нашей команде маркетинга для получения дальнейшей помощи.
Zabbix - бесплатное программное обеспечение с открытым исходным кодом. Никаких ограничений и скрытых расходов