Linux Labs
С чего начать Первые шаги трек · 15 ступеней
Linux Labs
RU

Prometheus — сбор метрик

3 мин Prometheus 2.x

Prometheus собирает метрики по pull-модели: таргеты, язык запросов PromQL, экспортеры и алерты.

Шпаргалка

2 команды Версия для печати
  • promtool check config prometheus.yml проверить конфиг
  • curl http://target:9100/metrics отдаёт ли экспортер метрики

Обзор

Prometheus собирает метрики по pull-модели: сам периодически опрашивает (scrape) HTTP-эндпоинты /metrics у целей (таргетов). Хранит временные ряды, позволяет запрашивать их языком PromQL и слать алерты.

экспортеры (node_exporter, app /metrics) ← scrape ← Prometheus → PromQL / алерты → Alertmanager

Метрики служб дают экспортеры: node_exporter (хост), nginx-exporter, и т.п.

Конфигурация

prometheus.yml — что и как часто опрашивать:

yaml 
global:
  scrape_interval: 15s
scrape_configs:
  - job_name: node
    static_configs:
      - targets: ['10.0.0.1:9100', '10.0.0.2:9100']
  - job_name: app
    metrics_path: /metrics
    static_configs:
      - targets: ['app:8000']
bash 
promtool check config prometheus.yml      # проверить конфиг
curl -s localhost:9090/-/reload -X POST   # перечитать (если включён web.enable-lifecycle)

Рецепты

1

PromQL и проверка

Веб-интерфейс на :9090. Примеры запросов:

promql 
up                                  # 1/0 — жив ли таргет
rate(http_requests_total[5m])       # запросов в секунду за 5 минут
node_filesystem_avail_bytes / node_filesystem_size_bytes   # доля свободного на ФС
100 - (avg by(instance)(rate(node_cpu_seconds_total{mode="idle"}[5m]))*100)  # %CPU

http://<prom>:9090/targets — статус всех целей (UP/DOWN и ошибки scrape).

Неполадки

4

Таргет DOWN

Открой /targets — там причина (connection refused / timeout / 404). Проверь, что экспортер слушает (ss -tlnp | grep 9100) и порт открыт (firewall). curl http://target:9100/metrics — отдаёт ли метрики.

Нет данных по метрике

Проверь имя метрики и лейблы в UI (autocomplete). up{job="x"} — скрапится ли job.

Prometheus ест диск

Ретеншн и количество рядов. --storage.tsdb.retention.time=15d; сократи high-cardinality лейблы.

Алерты не приходят

Проверь правила (promtool check rules), связь с Alertmanager и его маршруты.

См. также

  • grafana — Визуализация метрик и логов — источники данных, дашборды, переменные, алерты.
  • system-monitoring — Нагрузка, CPU, память, I/O — load average, top/htop, vmstat, iostat, free.
  • ss — Кто слушает порты и какие соединения открыты — современная замена netstat.

Есть неточность? Сообщить об ошибке в статье

Темы
Загрузка…