22. Что с индексами

Мы разбираем инфраструктуру по фактам: Linux, Zabbix, мониторинг, диагностика и архитектура. От симптома — к проверяемому выводу: что именно доказывает метрика, какие гипотезы остаются и как подтвердить решение. Без догадок там, где можно проверить. Если нужно понимать не только что сделать, но и почему — вам сюда.

zabbixpostgresqlиндексы

Индексы ускоряют поиск. Но у них есть цена. Каждая новая запись может требовать обновления:

table
+
index

Поэтому индекс:

ускоряет SELECT

но одновременно:

создаёт дополнительную стоимость INSERT/UPDATE

Добавлять индексы в огромную Zabbix DB «на всякий случай» — плохая идея. Нужно сначала показать:

конкретный запрос
        ↓
плохой execution plan
        ↓
index действительно решает проблему

И учитывать, что изменение штатной схемы Zabbix усложняет дальнейшую эксплуатацию и обновления.

23. Cache PostgreSQL и cache ОС

Ещё одна частая ошибка: база большая — значит вся база должна помещаться в RAM. Нет. PostgreSQL работает одновременно с:

shared_buffers
+
page cache операционной системы

Нам важно, чтобы активный набор данных обслуживался эффективно. Полезно смотреть соотношение чтений:

blks_hit
blks_read

но превращать их в единственный «процент здоровья PostgreSQL» тоже нельзя. Высокий cache hit сам по себе не доказывает, что база работает быстро.

24. Connections

Допустим:

max_connections = 1000

Можно ли сказать: теперь PostgreSQL выдержит тысячу клиентов? Нет. Каждое backend-соединение PostgreSQL потребляет ресурсы. Большое количество одновременно активных connections может означать:

больше памяти
+
больше процессов
+
больше конкуренции
+
больше переключений

Для Zabbix в первую очередь нужно понимать реальное количество необходимых соединений, а не просто ставить большое значение «с запасом».

25. Очень важна сеть между Zabbix и PostgreSQL

Если база находится на отдельном сервере:

Zabbix server
      ↓
network
      ↓
PostgreSQL

в путь добавляется сеть. И тогда база может быть быстрой:

PostgreSQL CPU → OK
storage        → OK

но:

network latency
→ нестабильна

История начинает записываться медленнее. Особенно важны:

  • — latency;
  • — packet loss;
  • — retransmissions;
  • — перегрузка интерфейса.

Поэтому «БД на отдельном сервере» автоматически не означает более высокую производительность.

26. Как отличить проблему PostgreSQL от проблемы Zabbix

Полезно искать корреляцию. Например:

history syncer utilization ↑
        +
history cache free ↓
        +
PostgreSQL I/O latency ↑
        +
database waits ↑

Это уже сильная цепочка подтверждений. Другой сценарий:

pollers 100%
        +
Zabbix queue ↑

history syncers → normal
history cache   → normal
PostgreSQL      → normal

Тогда обвинять базу оснований значительно меньше. Ещё пример:

preprocessing workers 100%
        +
preprocessing queue ↑

database → normal

И снова PostgreSQL не выглядит первичной причиной.

27. Начинать лучше со стороны Zabbix

Я бы двигался примерно так:

Zabbix queue
      ↓
какой тип items задерживается?
      ↓
process utilization
      ↓
history syncers
      ↓
history cache
      ↓
values written per second

Если цепочка указывает на запись в БД — только тогда углубляемся в PostgreSQL. Это значительно лучше подхода: Zabbix медленный → открываем postgresql.conf → начинаем менять параметры.

28. Затем смотрим PostgreSQL

Минимальная карта:

CPU
↓
RAM
↓
storage latency
↓
WAL
↓
checkpoints
↓
active queries
↓
wait events
↓
autovacuum
↓
dead tuples
↓
temporary files
↓
table/index size

И только после этого становится понятно, какую гипотезу нужно проверять глубже.

29. И только потом параметры PostgreSQL

Например:

shared_buffers
work_mem
maintenance_work_mem
checkpoint_timeout
max_wal_size
autovacuum_*

Это важные параметры. Но каждый из них отвечает на конкретную часть поведения базы. Поэтому схема:

нашли статью
        ↓
скопировали «оптимальный postgresql.conf»
        ↓
перезапустили

— не tuning. Это эксперимент без гипотезы.

Читайте так же