SashaBus
Местный
- Тема Автор
- #1
Ты запустил проект. Всё работает. Ты спишь спокойно. Но в 3 часа ночи база данных переполнилась, сервер упал, и ты узнаёшь об этом утром из гневных писем клиентов. Чтобы такого не было, нужен мониторинг и алерты.
Метрики — что измерять?
yaml
global:
scrape_interval: 15s
scrape_configs:
- job_name: 'prometheus'
static_configs:
- targets: ['localhost:9090']
Логи.
Логи нужно собирать в одном месте. Популярный стек: ELK (Elasticsearch + Logstash + Kibana) или Loki + Grafana.
Трейсинг (трассировка).
В распределённых системах (микросервисы) запрос проходит через 5-10 сервисов. Трейсинг позволяет увидеть полный путь запроса и найти узкое место. Инструменты: Jaeger, Zipkin.
Алерты (оповещения).
Настраиваешь правило: если метрика вышла за границы, отправляется уведомление.
Пример правила в Prometheus:
yaml
groups:
- name: example
rules:
- alert: HighErrorRate
expr: rate(http_requests_total{status="500"}[5m]) > 0.05
for: 2m
annotations:
summary: "Слишком много ошибок 500"
Куда отправлять алерты:
Метрики — что измерять?
- Системные: CPU, RAM, диск (занятое место, I/O), сеть (входящий/исходящий трафик).
- Прикладные: количество запросов в секунду (RPS), процент ошибок (5xx), время ответа (latency), количество активных пользователей.
- Бизнес-метрики: число регистраций, заказов, платежей.
- Prometheus — сбор метрик, язык запросов PromQL.
- Grafana — красивые дашборды, подключается к Prometheus.
- VictoriaMetrics — альтернатива Prometheus, более производительная.
yaml
global:
scrape_interval: 15s
scrape_configs:
- job_name: 'prometheus'
static_configs:
- targets: ['localhost:9090']
Логи.
Логи нужно собирать в одном месте. Популярный стек: ELK (Elasticsearch + Logstash + Kibana) или Loki + Grafana.
- Elasticsearch — хранилище и поиск по логам.
- Logstash — обработка и парсинг логов.
- Kibana — интерфейс для поиска и визуализации.
Трейсинг (трассировка).
В распределённых системах (микросервисы) запрос проходит через 5-10 сервисов. Трейсинг позволяет увидеть полный путь запроса и найти узкое место. Инструменты: Jaeger, Zipkin.
Алерты (оповещения).
Настраиваешь правило: если метрика вышла за границы, отправляется уведомление.
Пример правила в Prometheus:
yaml
groups:
- name: example
rules:
- alert: HighErrorRate
expr: rate(http_requests_total{status="500"}[5m]) > 0.05
for: 2m
annotations:
summary: "Слишком много ошибок 500"
Куда отправлять алерты:
- Telegram (бот).
- Slack / Discord (вебхук).
- PagerDuty (для серьёзных проектов, разбудит ночью).
- E-mail (менее оперативно).