Monitoring::Prometheus
Lásd még: Monitoring (áttekintés) · Grafana (a Prometheus leggyakoribb megjelenítő rétege - a kettő tipikusan együtt kerül szóba)
Mi a Prometheus?
A Prometheus-t 2012-ben a SoundCloud fejlesztette, Google belső "Borgmon" nevű monitoring-rendszerének elvei alapján; mára a CNCF (Cloud Native Computing Foundation) "graduated" (kiforrott, a legmagasabb érettségi szintű) projektje - ugyanaz az alapítvány felügyeli, amelyik a Kubernetes-t is.
Pull-modell: a legfontosabb architekturális döntés
Szemben a Zabbix passzív (Server kérdez) és aktív (Agent küld) kettősségével, a Prometheus kizárólag pull-alapú: a Prometheus-szerver rendszeres időközönként (alapból 15 másodpercenként) HTTP GET-tel lekérdezi ("scrape-eli") minden egyes célgép egy /metrics nevű végpontját, ami egyszerű, szöveges formátumban sorolja fel az aktuális mérőszámokat.
Exporterek
A legtöbb szoftver alapból nem beszéli a Prometheus /metrics-formátumát - ezt hidalják át az exporterek: önálló, kis segédprogramok, amik egy adott rendszer állapotát Prometheus-kompatibilis formátumban teszik elérhetővé:
| Exporter | Mit figyel |
|---|---|
| node_exporter | Az adott Linux-gép saját erőforrásai (CPU, memória, lemez, hálózati interfészek) |
| mysqld_exporter | Egy MySQL/MariaDB-szerver belső állapota |
| blackbox_exporter | "Kívülről" tesztel (ping, HTTP-válasz, TCP-port-elérhetőség) - olyan eszközökhöz is használható, amik egyáltalán nem Prometheus-tudatosak (pl. egy router) |
PromQL
A Prometheus saját lekérdező nyelve a PromQL - pl. az elmúlt 5 percben mért kérés-ráta kiszámítása egy számláló-típusú metrikából:
rate(http_requests_total[5m])
Alertmanager - a riasztás külön komponensben
Fontos, hogy maga a Prometheus-szerver nem küld e-mailt/Slack-üzenetet - csak kiértékeli, mikor "tüzel" egy riasztási szabály, majd ezt egy külön futó komponensnek, az Alertmanager-nek adja át, ami a csoportosításért, duplikátum-szűrésért és a tényleges értesítés-kiküldésért (e-mail, Slack, PagerDuty stb.) felel. Ez a "sok kicsi, egymással együttműködő komponens" felépítés a Zabbix/Nagios "egy nagy, mindent-tudó rendszer" filozófiájának éles ellenpontja (lásd az áttekintő oldalt).
Kis példa - scrape-konfiguráció és egy exporter telepítése
# /etc/prometheus/prometheus.yml
global:
scrape_interval: 15s
scrape_configs:
- job_name: 'node'
static_configs:
- targets: ['192.168.1.10:9100', '192.168.1.11:9100']
# node_exporter telepítése/indítása a felügyelt gépen
tar xvf node_exporter-*.tar.gz
./node_exporter &
# alapból a 9100-as porton kezdi el szolgáltatni a /metrics végpontot
Szükséges tűzfalportok
| Port | Célja |
|---|---|
| 9090/TCP | A Prometheus-szerver saját webes/API felülete |
| 9100/TCP | A node_exporter alapértelmezett portja (más exporterek más portot használnak) |
| 9093/TCP | Alertmanager |
Sajátosságai (összefoglalva)
- Kizárólag pull-alapú - a szerver kérdezi le a célgépeket, nem fordítva.
- Az exporterek miatt gyakorlatilag bármi mérhetővé tehető vele, még olyan rendszer is, ami eredetileg nem Prometheus-kompatibilis.
- A riasztás külön komponensben (Alertmanager), a megjelenítés jellemzően szintén külön eszközben (Grafana) történik - önmagában a Prometheusnak nincs "szép" dashboardja, csak egy ad-hoc lekérdező felülete.
- Elsősorban felhő-natív/konténeres (Kubernetes) környezetekben vált de-facto szabvánnyá, de hagyományos szerverparkban is jól használható.