Postavljanje sistema za nadzor servera pomoću Prometheus + Grafana

Postavljanje sistema za nadzor servera pomoću Prometheus + Grafana

Nadzor CPU-a, memorije, diska i mrežnih metrika servera u realnom vremenu osnova je proaktivnog otkrivanja problema. Prometheus i Grafana zajedno čine odličan sistem za nadzor.

Nadzor CPU-a, memorije, diska i mrežnih metrika vaših servera u realnom vremenu osnova je proaktivnog otkrivanja problema. Prometheus se bavi prikupljanjem metrika i upitima, dok Grafana pruža sloj vizualizacije; zajedno čine odličan sistem za nadzor. Ovaj vodič vas korak po korak vodi kroz postavljanje, izradu dashboarda, pravila upozorenja i osnove PromQL-a.

Arhitektura sistema Prometheus

Prometheus je sistem za nadzor zasnovan na modelu povlačenja (pull). U redovnim intervalima prikuplja metrike od exportera na ciljnim serverima i čuva ih u lokalnoj TSDB bazi (Time Series Database). Osnovne komponente su:

Komponenta Uloga Port
Prometheus Server Prikupljanje, čuvanje i upiti nad metrikama 9090
Node Exporter Metrike servera (CPU, RAM, disk, mreža) 9100
Alertmanager Upravljanje upozorenjima i slanje obaveštenja 9093
Grafana Dashboardi i vizualizacija 3000

Konfiguracija sistema Prometheus

Fajl prometheus.yml definiše sa kojih ciljeva Prometheus prikuplja metrike i koliko često to radi.

prometheus.yml
global:
  scrape_interval: 15s
  evaluation_interval: 15s

rule_files:
  - "alert_rules.yml"

alerting:
  alertmanagers:
    - static_configs:
        - targets:
            - "alertmanager:9093"

scrape_configs:
  # Prometheus monitors its own metrics
  - job_name: "prometheus"
    static_configs:
      - targets: ["localhost:9090"]

  # Server metrics
  - job_name: "node"
    static_configs:
      - targets:
          - "server-1:9100"
          - "server-2:9100"
          - "server-3:9100"
        labels:
          env: production

Instalacija alata Node Exporter

Node Exporter je lagan exporter koji prikuplja metrike CPU-a, memorije, diska i mreže sa Linux servera. Mora biti instaliran na svakom serveru koji želite da nadzirete.

terminal
# Download and install Node Exporter
wget https://github.com/prometheus/node_exporter/releases/download/v1.7.0/node_exporter-1.7.0.linux-amd64.tar.gz
tar xvfz node_exporter-1.7.0.linux-amd64.tar.gz
sudo mv node_exporter-1.7.0.linux-amd64/node_exporter /usr/local/bin/

# Create systemd service file
sudo cat <<EOF > /etc/systemd/system/node_exporter.service
[Unit]
Description=Node Exporter
After=network.target

[Service]
User=node_exporter
ExecStart=/usr/local/bin/node_exporter
Restart=always

[Install]
WantedBy=multi-user.target
EOF

# Start the service
sudo systemctl daemon-reload
sudo systemctl enable --now node_exporter

# Verify metrics
curl http://localhost:9100/metrics | head -20

💡 Savet: Ako koristite Docker, ceo sistem možete pokrenuti jednom komandom pomoću docker-compose. Pokrenite Prometheus, Grafanu, Node Exporter i Alertmanager u istoj mreži.

Grafana dashboardi i pravila upozorenja

Grafana se koristi za vizualizaciju metrika iz sistema Prometheus. Možete uvesti gotove dashboarde ili napraviti sopstvene. Uz pravila upozorenja dobijate obaveštenja kada se pređu kritični pragovi.

alert_rules.yml
groups:
  - name: server_alerts
    rules:
      # CPU usage above 85% for 5 minutes
      - alert: HighCpuUsage
        expr: 100 - (avg by(instance) (rate(node_cpu_seconds_total{mode="idle"}[5m])) * 100) > 85
        for: 5m
        labels:
          severity: warning
        annotations:
          summary: "High CPU usage ({{ $labels.instance }})"
          description: "CPU usage is {{ $value }}% - above 85% for 5 minutes."

      # Memory usage above 90%
      - alert: HighMemoryUsage
        expr: (1 - node_memory_MemAvailable_bytes / node_memory_MemTotal_bytes) * 100 > 90
        for: 5m
        labels:
          severity: critical
        annotations:
          summary: "Critical memory usage ({{ $labels.instance }})"

      # Disk usage above 90%
      - alert: DiskSpaceLow
        expr: (1 - node_filesystem_avail_bytes{mountpoint="/"} / node_filesystem_size_bytes{mountpoint="/"}) * 100 > 90
        for: 10m
        labels:
          severity: critical

⚠️ Upozorenje: Ne postavljajte previše kratko for trajanje u pravilima upozorenja. Privremeni skokovi mogu izazvati lažne alarme. Razumne početne vrednosti su 5 minuta za CPU i 10 minuta za disk.

Osnove PromQL-a

PromQL (Prometheus Query Language) je moćan jezik za postavljanje upita i analizu metrika. PromQL izrazi koriste se u Grafana dashboardima i pravilima upozorenja.

PromQL upiti
# CPU usage percentage (5-minute average)
100 - (avg by(instance) (rate(node_cpu_seconds_total{mode="idle"}[5m])) * 100)

# Available memory (GB)
node_memory_MemAvailable_bytes / 1024 / 1024 / 1024

# Disk I/O - reads/writes per second
rate(node_disk_read_bytes_total[5m])
rate(node_disk_written_bytes_total[5m])

# Network traffic (MB/s)
rate(node_network_receive_bytes_total{device="eth0"}[5m]) / 1024 / 1024

# Uptime (days)
(time() - node_boot_time_seconds) / 86400

Za bezbednost servera pogledajte naš vodič kontrolna lista za hardening servera. Za upravljanje logovima pogledajte naš vodič za ELK Stack. Za upravljanje infrastrukturom pomoću IaC-a istražite naš vodič za Terraform. Zvanična dokumentacija sistema Prometheus i Grafana dokumentacija predstavljaju vredne dodatne izvore.

Često postavljana pitanja

Koliko prostora na disku koristi Prometheus?

Potrošnja diska zavisi od broja metrika i perioda čuvanja. Za prosečno okruženje (100 ciljeva, interval prikupljanja 15 s, čuvanje 15 dana) dovoljno je približno 10-20 GB prostora na disku. Period čuvanja podesite pomoću --storage.tsdb.retention.time=15d parametra.

Kako da uvezem gotove dashboarde u Grafani?

Možete ih uvesti pomoću ID-a sa Grafana.com tržišta dashboarda. Dashboard 1860 popularan je za Node Exporter. U Grafana korisničkom okruženju idite na Dashboards > Import > unesite ID i izaberite Prometheus izvor podataka.

Kako se postiže visoka dostupnost (HA) sistema Prometheus?

Podesite dve Prometheus instance da prikupljaju metrike sa istih ciljeva. Za dugoročno čuvanje koristite Thanos ili Cortex. Klaster režim sistema Alertmanager obezbeđuje uklanjanje duplih upozorenja.

Po čemu se razlikuje od nadzora zasnovanog na slanju (push)?

Prometheus radi po modelu povlačenja, što znači da prikuplja metrike sa ciljeva. U sistemima zasnovanim na slanju (kao što su Datadog, InfluxDB) aplikacije šalju metrike. Pristup povlačenja automatski otkriva stanje ispravnosti ciljeva i omogućava centralizovanu konfiguraciju.

Zaključak

Proaktivno nadzirite svoju infrastrukturu postavljanjem moćnog sistema za nadzor servera pomoću Prometheus i Grafana. Prikupljajte sistemske metrike alatom Node Exporter, pišite smislene upite u PromQL-u, vizualizujte ih Grafana dashboardima i rano otkrivajte probleme pomoću pravila upozorenja.

Serveri visokih performansi za nadzor

Pokrenite svoj Prometheus + Grafana sistem bez brige na Hosted Cloud serverima.

Pogledajte pakete cloud servera →

Podelite

M

Merve Arslan

Stručnjak za WordPress i hosting

Autorka vodiča o optimizaciji performansi WordPress-a, izboru hostinga i infrastrukturi za e-trgovinu.

Komentari uskoro