Опыт клиента: интервью с KDDI

Мониторинг приложений, доводящий раннее обнаружение и быстрое восстановление до предела: что стоит за качеством облачного сервиса KDDI Cloud Platform Service (KCPS), который предоставляет KDDI

Задача

KDDI требовался гибкий процесс мониторинга, позволяющий отслеживать различные обстоятельства, действия и возможные проблемы клиентов и реагировать на них.

Повысить эффективность работы и производительность, сократить время простоя.

Требования

Зрелое решение для мониторинга корпоративного уровня, которое легко интегрируется с CloudStack и другими системами.

Автоматическая привязка для эффективного мониторинга приложений примерно 20 тысяч узлов сети.

Подход

Для мониторинга нескольких сотен тысяч элементов данных использовалось около 40 дублированных серверов Zabbix.

Реализована схема, в которой Zabbix и CloudPlatform автоматически связаны между собой.

Результат

Интеграция с CloudStack и связанными системами.

Легко настраиваемые возможности построения графиков в веб-интерфейсе.

Повышение эффективности и производительности за счет расширенных возможностей.

Полноценная система поддержки.

KDDI предоставляет высококачественный облачный сервис для бизнеса под названием «KDDI Cloud Platform Service (KCPS)», который позиционируется как «Quality Cloud» на базе Citrix CloudPlatform. Качество этого сервиса операторского класса обеспечивается непрерывным мониторингом приложений с помощью Zabbix. Мы расспросили об этом KDDI - компанию, которая использует Zabbix для раннего обнаружения и быстрого восстановления.

KDDI Cloud Platform Service (KCPS): Quality Cloud с коэффициентом готовности 99.9999% (фактические результаты за период с июля по сентябрь)

Mr. Takeshi Maehara
Г-н Takeshi Maehara
Руководитель
секция разработки 1,
отдел разработки
облачных сервисов,
подразделение разработки
платформ, KDDI

KDDI Cloud Platform Service (KCPS) - это инфраструктура как услуга (IaaS), которую KDDI предоставляет компаниям с июля 2012 года. Это высококачественный сервис на базе облачной программной инфраструктуры Citrix CloudPlatform, в котором отражен разнообразный опыт, накопленный KDDI как телекоммуникационным оператором. Сервис на базе Citrix CloudPlatform, получивший высокую оценку за качество, KDDI Cloud Platform Service (KCPS) вырос в один из крупнейших сервисов такого рода в Японии и даже лидирует в мировом масштабе. (По состоянию на ноябрь 2014 года)

В ответ на опасения многих японских компаний относительно безопасности облачных сервисов безопасность обеспечивается за счет того, что предоставляется не только подключение через интернет, но и стандартная услуга подключения к интранету через специальную закрытую сеть. Кроме того, помимо общих виртуальных серверов, KDDI предоставляет собственный сервис с выделенными ресурсами, в котором особое внимание уделяется конфиденциальности, и создает среду, которой клиенты, рассматривающие переход в облако, могут пользоваться спокойно и безопасно.

Кроме того, хотя SLA сервиса KDDI Cloud Platform Service (KCPS) предусматривает коэффициент готовности 99.99%, в последние месяцы этот показатель постоянно превышался и достиг 99.9999%. Ключевой фактор такого результата - тщательная и глубокая эксплуатация и мониторинг. Г-н Takeshi Maehara из KDDI (руководитель секции разработки 1, отдел планирования облачных сервисов, подразделение разработки платформ) говорит: «Мы не достигли уровня, при котором сбои не происходят совсем, но серверы как машины по своей природе неизбежно время от времени ломаются. Поэтому главное - насколько быстро удается перезапустить сервер после сбоя и свести к минимуму время, в течение которого сервер неисправен».

*Коэффициент готовности = общее количество часов работы за месяц / (общее количество часов работы за месяц + общее количество часов неисправности за месяц), без учета времени обслуживания

Реализация мониторинга за счет связки Citrix CloudPlatform и Zabbix

Mr. Masato Kato
Г-н Masato Kato
Руководитель
секция разработки 1,
отдел разработки
облачных сервисов,
подразделение разработки
платформ, KDDI
Г-н Taketo Kosaka
Группа технологий OSS,
подразделение платформенных решений,
Intelligence Business Solutions

Качество KDDI Cloud Platform Service (KCPS) обеспечивается «мониторингом приложений». И здесь важную роль играет «Zabbix». Помимо стандартных функций CloudPlatform, гибкий процесс мониторинга, реагирующий на различные обстоятельства, реализуется за счет сочетания Zabbix и собственных shell-скриптов.

В KDDI Cloud Platform Service (KCPS) около 40 серверов Zabbix обеспечивают мониторинг нескольких сотен тысяч элементов данных в инфраструктуре, насчитывающей примерно 20 тысяч узлов сети. Изначально KDDI использовала Zabbix для эксплуатации собственных внутренних систем, поэтому ее операторы были знакомы с работой Zabbix. Его высоко оценили за гибкость: он позволяет свободно настраивать и адаптировать элементы данных и параметры действий, выполняемых при обнаружении.

Есть и еще одна важная причина - возможность связки с CloudPlatform. Помимо оборудования, составляющего основу IaaS, KDDI по запросу клиентов в качестве опции также отслеживает рабочее состояние их виртуальных серверов. Но если полагаться только на это, как говорит г-н Masato Kato из KDDI (менеджер секции разработки 1, отдел планирования облачных сервисов, подразделение разработки платформ), «даже если клиент сам по какой-то причине перезапустил виртуальный сервер, это было бы расценено как аномалия и вызвало бы оповещение. Поэтому мы реализовали схему, в которой Zabbix и CloudPlatform автоматически связаны между собой, чтобы предупреждение не выдавалось, когда объекты были остановлены намеренно». Автоматическая привязка также позволила эффективно выполнять мониторинг приложений примерно 20 тысяч узлов сети без необходимости проверять IP-адрес или тип ОС каждого узла сети по отдельности.

Эта схема была реализована благодаря продукту компании Intelligence Business Solutions (IBS) - партнера Zabbix, который предоставляет консалтинг и услуги поддержки, связанные с установкой. Г-н Taketo Kosaka из группы технологий OSS подразделения платформенных решений IBS поясняет: «Zabbix использует функции, подготовленные изначально, и смог отслеживать действия на стороне CloudPlatform». Динамично развивающаяся CloudPlatform также продолжит обновляться до новых версий.

Создание шаблонов и автоматизация благодаря общим целям и сотрудничеству с IBS

Mr. Jun Endo
Г-н Jun Endo
Заместитель руководителя
отдел разработки
облачных сервисов,
подразделение разработки
платформ, KDDI
Г-н Naoyuki Kajiwara
Старший инженер
группы технологий OSS,
подразделение платформенных решений,
Intelligence Business Solutions
Г-н Naoya Tsuchiyama
Группа технологий OSS,
подразделение платформенных решений,
Intelligence Business Solutions

Одна из возможностей Zabbix, которую KDDI особенно ценит, - повышение эффективности работы за счет создания шаблонов для настроек мониторинга. Г-н Jun Endo, заместитель руководителя секции разработки 1 в отделе планирования облачных сервисов подразделения разработки платформ KDDI, говорит: «Сейчас Zabbix используется в KDDI Cloud Platform Service (KCPS) для мониторинга серверов клиентов, а также серверов и сетевого оборудования KDDI и даже для мониторинга сервисного оборудования за пределами KDDI Cloud Platform Service (KCPS), и все это выполняется эффективно благодаря шаблонам, которые мы создаем вместе с IBS с учетом особенностей каждой задачи».

Но это было непросто. Например, когда серверы Zabbix только внедрялись, количество элементов данных значительно выросло, а занятый объем дисков существенно увеличился. Иногда это приводило к нестабильной работе серверов мониторинга. Г-н Endo добавляет, что с учетом этого опыта «IBS теперь подбирает параметры и с помощью оптимизации производительности поддерживает состояние, в котором мониторинг выполняется без сбоев».

Оглядываясь назад, г-н Kato вспоминает: «На самом деле в начале было несколько проблем, например с настройкой порогов и т. п.». Даже малейшая неточность может привести к серьезным проблемам в облачной среде с тысячами виртуальных серверов и десятками тысяч элементов данных.

Поэтому KDDI и IBS создали инструменты, которые проверяют, что настройки применяются так, как задумано, от формирования настроек до их фактической работы, и стремятся и дальше оптимизировать эксплуатацию. Г-н Kato поясняет: «В традиционных системах возможности проверки конфигурации облачной среды человеческим глазом ограничены. С учетом этого мы проводим точную систематизацию». Г-н Maehara соглашается: «Облака развиваются с огромной скоростью, и KDDI Cloud Platform Service (KCPS) тоже расширяется невероятными темпами. Без автоматизации за этим невозможно успеть».

По мере эксплуатации системы количество отдельных компонентов, требующих мониторинга, растет, а общих частей шаблонов становится относительно мало, но и эта проблема решается за счет переработки шаблонов совместно с IBS.

Г-н Naoyuki Kajiwara, старший инженер группы технологий OSS подразделения платформенных решений IBS, вспоминает, что иногда «мы получали очень глубокие вопросы, на которые невозможно было ответить сразу». Г-н Naoya Tsuchiyama, также из группы технологий OSS подразделения платформенных решений IBS, говорит: «Вместо того чтобы просто отвечать спецификациями продукта, мы стремимся дать наилучший возможный ответ, предполагая, чего клиент хочет добиться с помощью мониторинга».

Дальнейшее повышение качества с еще большим вниманием к мониторингу приложений

Наряду с пересмотром архитектуры с нуля ради дальнейшего повышения качества цель состоит в том, чтобы создать мир, в котором клиенты видят качество облака и могут спокойно им пользоваться.

Г-н Maehara подчеркивает важность мониторинга для обеспечения качества: «Когда в этой сфере мы говорим о „качестве“, это включает и детальный мониторинг, и быструю подачу отчетов. Чтобы обеспечить еще более высокий уровень качества, важно как можно быстрее распознавать проблемы и как можно быстрее выполнять восстановление. Мониторинг приложений и Zabbix играют в этом исключительно важную роль».

Кроме того, г-н Endo говорит: «Мы возлагаем большие надежды на механизм, добавленный в Zabbix, благодаря которому клиенты в многопользовательской среде смогут самостоятельно настраивать и проверять элементы данных». Мы с нетерпением ждем дальнейшего роста KDDI Cloud Platform Service (KCPS), использующего такие функции.

Обзор системы

Количество серверов Zabbix: около 40
Резервирование: да. Active-Active
Мониторинг в многопользовательской среде: да.
Количество отслеживаемых устройств: около 20,000
Количество триггеров: около 800,000
Количество элементов данных: около 400,000

Оборудование для сервера Zabbix

Оборудование для серверов Zabbix: виртуальные машины и физические серверы
Количество ядер CPU: от 4 до 16 (в зависимости от случая)
Память: от 16 ГБ до 128 ГБ (в зависимости от случая)

※Официальное название CloudPlatform - «Citrix CloudPlatform powered by Apache CloudStack». Citrix, CloudStack и CloudPlatform являются товарными знаками Citrix Systems, Inc. и/или одной или нескольких ее дочерних компаний и могут быть зарегистрированы в Ведомстве по патентам и товарным знакам США и в других странах.

KDDI corporation

KDDI как комплексная телекоммуникационная компания, предлагающая услуги фиксированной и мобильной связи, стремится быть лидером в эпоху перемен.

Частным клиентам KDDI предлагает услуги мобильной связи (мобильные телефоны au) и фиксированной связи (широкополосный интернет и телефония) под брендом «au», помогая создавать новые бесшовные коммуникационные среды. А корпоративным клиентам KDDI предоставляет все услуги в сфере ИКТ (информационно-коммуникационных технологий), от сетей FMC (Fixed Mobile Convergence) до центров обработки данных, приложений и стратегий безопасности, помогая клиентам укреплять свой бизнес.

Ее подразделение планирования облачных сервисов предоставляет облачные сервисы корпоративным клиентам. Облако KDDI строится на концепциях «Облако, сеть и мобильная связь в одном окне», «Свободно и глазами клиентов» и «QualityCloud».

Головной офис:
Токио, Япония
Дата основания:
1984
Сотрудники:
27,073
Уставный капитал:
141,85 млн иен
(март 2014 г.)
www.kddi.com

Хотели бы поделиться своей историей использования решения мониторинга Zabbix?

Заполните этот опросный лист или напишите нашей команде маркетинга для получения дальнейшей помощи.

Приступите к работе за 10 минут, совершенно БЕСПЛАТНО

Скачать Zabbix

Zabbix - бесплатное программное обеспечение с открытым исходным кодом. Никаких ограничений и скрытых расходов