Close
Log in to Zabbix Blog
Email
Password
Show password Hide password
Forgot password?
Incorrect e-mail and/or password
or
By creating an account or logging in with an existing account, you agree to our Terms of Service
Как сделатьТехнический постВойти

Построение Zabbix с высокой доступностью на базе PostgreSQL и Patroni

Эксплуатация платформы мониторинга, такой как Zabbix, в производственной среде требует надежности и устойчивости к сбоям. Когда ваше решение для мониторинга не работает, вы действуете вслепую, а для многих организаций это просто недопустимо. В этой статье представлена надежная архитектура высокой доступности (HA) для Zabbix на базе PostgreSQL,  Patroni, etcd, HAProxy, keepalived и PgBackRest. Это решение, построенное […]

Эксплуатация платформы мониторинга, такой как Zabbix, в производственной среде требует надежности и устойчивости к сбоям. Когда ваше решение для мониторинга не работает, вы действуете вслепую, а для многих организаций это просто недопустимо. В этой статье представлена надежная архитектура высокой доступности (HA) для Zabbix на базе PostgreSQL,  Patroni, etcd, HAProxy, keepalived и PgBackRest. Это решение, построенное на RHEL 9 или его производных, объединяет современные инструменты с открытым исходным кодом, чтобы обеспечить автоматическое аварийное переключение, балансировку нагрузки и бесперебойный мониторинг, сохраняя при этом согласованность и производительность.

Обзор архитектуры

Архитектура HA состоит из нескольких уровней, которые работают совместно и обеспечивают непрерывность работы даже при отказах узлов или служб:

Уровень кластера баз данных

Кластер PostgreSQL образуют 2 или более узлов, которыми управляет Patroni, а координацию обеспечивает etcd. В любой момент времени один узел является ведущим (чтение/запись), а остальные работают как резервные узлы в режиме горячего резерва и готовы автоматически взять на себя его роль.

Уровень консенсуса

etcd работает на тех же узлах и служит распределенным хранилищем конфигурации и уровнем координации для Patroni. Он обеспечивает согласованное состояние кластера и позволяет безопасно принимать решения об аварийном переключении.

Уровень балансировки нагрузки  

Два узла HAProxy служат единой точкой входа для всех клиентов (включая Zabbix) и направляют запросы на текущий ведущий узел PostgreSQL. Эти узлы отслеживаются и координируются с помощью Keepalived, который поддерживает плавающий виртуальный IP-адрес (VIP), что обеспечивает бесшовное аварийное переключение на уровне подключений.

Уровень резервного копирования

Отдельный сервер резервного копирования отвечает за работу PgBackRest, который создает полные и инкрементальные резервные копии, выполняет архивирование WAL и восстановление на момент времени (PITR). Этот сервер безопасно взаимодействует со всеми узлами баз данных по SSH.

Уровень мониторинга

Два сервера Zabbix, работающие в режиме «активный-пассивный», непрерывно отслеживают все уровни этого стека, включая работоспособность HAProxy, роль узлов в кластере Patroni и состояние etcd, используя VIP PostgreSQL для подключения к серверной базе данных.

Такая многоуровневая конфигурация гарантирует, что никакой одиночный отказ, будь то отказ базы данных, балансировщика нагрузки или сервера мониторинга, не выведет из строя платформу мониторинга.

Почему высокая доступность важна для Zabbix

Zabbix в значительной степени зависит от своей серверной базы данных PostgreSQL. В ней хранятся все метрики, триггеры, события и оповещения. Если PostgreSQL становится недоступным, даже ненадолго, возможны потеря данных или слепые зоны в мониторинге. Именно поэтому внедрение HA на уровне базы данных является важнейшим шагом при масштабировании Zabbix для корпоративных сред.

Хотя сам Zabbix поддерживает HA на уровне приложения, эта архитектура гарантирует, что серверная база данных также полностью отказоустойчива: для этого применяется современная кластеризация на основе консенсуса с автоматическим аварийным переключением.

Обзор компонентов

Чтобы обеспечить HA, мы объединяем несколько специализированных компонентов, каждый из которых выполняет важнейшую роль в системе:

PostgreSQL

Реляционная СУБД, которую использует Zabbix. В этом примере конфигурации она работает на трех узлах, образуя кластер под управлением Patroni.

Patroni

Patroni выполняет роль оркестратора кластера PostgreSQL. Он отслеживает работоспособность узлов, управляет репликацией, при необходимости повышает резервные узлы до ведущего и гарантирует, что в любой момент существует только один лидер, доступный для записи. Для координации решений в кластере Patroni использует распределенное хранилище консенсуса (в данном случае etcd, но возможны и другие DCS).

etcd

etcd представляет собой легковесное хранилище «ключ-значение» с высокой доступностью, которое Patroni использует для хранения состояния кластера. В нем хранятся данные о выборах лидера, состояния работоспособности и блокировки. Мы развертываем его как кластер из трех узлов, для удобства размещенный на узлах PostgreSQL, хотя при необходимости эту часть конфигурации можно масштабировать независимо, поскольку etcd очень чувствителен к задержкам.

HAProxy

Чтобы упростить подключение приложений, HAProxy работает как балансировщик нагрузки перед кластером баз данных. Он отслеживает роль каждого узла через REST API Patroni и направляет подключения на активный ведущий сервер. Если лидер выходит из строя, HAProxy автоматически перенаправляет трафик на новый ведущий узел.

Keepalived

Keepalived предоставляет плавающий виртуальный IP-адрес (VIP), общий для узлов HAProxy. Этот VIP позволяет клиентским системам, например веб-интерфейсу Zabbix, подключаться к одному стабильному IP-адресу, даже если один из узлов HAProxy выйдет из строя.

PgBackRest

Для защиты самих данных мы используем PgBackRest: он выполняет полное и инкрементальное резервное копирование, а также восстановление на момент времени (PITR). В конфигурацию входит выделенный сервер резервного копирования, который безопасно получает и хранит архивные журналы и резервные копии по SSH.

Сервер Zabbix

Наконец, мы запускаем два сервера Zabbix в режиме «активный-пассивный». Оба настроены на подключение к кластеру PostgreSQL через VIP, который предоставляет HAProxy. Веб-интерфейс Zabbix также развернут на обоих узлах, что обеспечивает его постоянную доступность благодаря конфигурации с балансировкой нагрузки.

Краткий обзор топологии

Вот упрощенное представление архитектуры:

  • 2 или более узлов баз данных (PostgreSQL + Patroni + etcd)
  • Два узла HAProxy, каждый из которых настроен с Keepalived для управления плавающим виртуальным IP-адресом
  • Один узел резервного копирования для PgBackRest
  • Два сервера Zabbix, подключенных к VIP PostgreSQL

Все системы связаны между собой единообразным сопоставлением имен узлов сети, синхронизацией времени (Chrony) и мониторингом служб.

Примечания:

  • PgBackRest напрямую подключен ко всем трем узлам PostgreSQL, что позволяет ему архивировать сегменты WAL и получать резервные копии независимо от того, какой узел является ведущим.
  • Такая архитектура позволяет выполнять полное резервное копирование с резервных узлов и поддерживает восстановление на момент времени (PITR).
  • HAProxy гарантирует, что Zabbix всегда взаимодействует с текущим ведущим узлом, а Patroni и etcd обеспечивают автоматическое аварийное переключение и управление состоянием кластера.

Обоснование архитектуры

Эта конфигурация ставит в приоритет устойчивость к сбоям и самовосстановление. Если любой отдельный компонент выйдет из строя, будь то узел базы данных, балансировщик нагрузки или даже сервер мониторинга, система продолжит работать.

Использование Patroni вместе с etcd гарантирует, что аварийное переключение выполняется автоматически, без вмешательства человека. HAProxy гарантирует, что клиентский трафик всегда направляется на текущий ведущий узел, а Keepalived обеспечивает высокую доступность самого этого уровня маршрутизации.

Мы выбрали PgBackRest вместо простых скриптов или базовых резервных копий, потому что он обеспечивает не только эффективное инкрементальное резервное копирование, но и полное архивирование WAL и восстановление на момент времени, которые бесценны как для аварийного восстановления, так и для отладки.

Наконец, мы решили включить в эту архитектуру HA и сам Zabbix, рассматривая его не просто как приложение, а как полностью устойчивую к сбоям службу, способную, так сказать, отслеживать саму себя.

Практические соображения
  • Планирование ресурсов: хотя наши узлы работают без затруднений, масштабирование этой конфигурации под высокие нагрузки требует тщательной настройки памяти, ввода-вывода и параметров PostgreSQL.
  • Размещение etcd: хотя в этом примере etcd размещен на узлах баз данных, в крупномасштабных средах лучше всего выносить etcd на выделенную инфраструктуру. Это позволяет избежать конкуренции за ресурсы и сохранить кворум при экстремальных сценариях отказов.
  • Мониторинг систем мониторинга: сам Zabbix тоже необходимо отслеживать. В нашей конфигурации каждый компонент, включая etcd, Patroni и PostgreSQL, предоставляет конечные точки проверки работоспособности, которые агенты Zabbix или скрипты могут использовать для генерации оповещений о задержке репликации, работоспособности кластера и событиях аварийного переключения.

Заключение

Эта архитектура служит надежной основой для работы Zabbix в отказоустойчивой среде, готовой к производственной эксплуатации. Она не только обеспечивает высокую доступность уровня базы данных, но и дает гибкость, наблюдаемость и безопасность эксплуатации.

Независимо от того, отвечаете ли вы за мониторинг внутренней инфраструктуры или предоставляете Zabbix как управляемую услугу, внедрение такой конфигурации HA устраняет единые точки отказа и дает вам уверенность — и все это с использованием проверенных в боевых условиях и широко поддерживаемых технологий с открытым исходным кодом.

Если вам нужна помощь с миграцией или вы хотите быть уверены, что применяете лучшие практики масштабирования и оптимизации Zabbix, не стесняйтесь обращаться в OICTS. Мы являемся премиум-партнером Zabbix, работаем по всему миру, у нас есть офисы в США, Великобритании, Нидерландах и Бельгии, и мы готовы помочь вам на каждом этапе.

 

Prev Post Prev Post Next Post Next Post
Подписаться
Уведомить о
0 Comments
Старые
Новые Популярные
0
Оставьте комментарий! Напишите, что думаете по поводу статьи.x