{"id":14434,"date":"2024-03-08T20:34:56","date_gmt":"2024-03-08T19:34:56","guid":{"rendered":"https:\/\/linux-bibel.at\/?p=14434"},"modified":"2024-03-08T20:34:59","modified_gmt":"2024-03-08T19:34:59","slug":"monitoring-mit-prometheus-unter-linux","status":"publish","type":"post","link":"https:\/\/linux-bibel.at\/index.php\/2024\/03\/08\/monitoring-mit-prometheus-unter-linux\/","title":{"rendered":"Monitoring mit Prometheus unter Linux"},"content":{"rendered":"\n

Nicht nur für Firmen zahlt es sich aus, die laufenden Server<\/a>, Geräte und das Netzwerk<\/a> zu monitor<\/a>en – also zu beobachten. Wir haben auf der Linux<\/a> Bibel neben vielen kleinen Tools, auch schon das große Monitor<\/a>ing-System Zabbix<\/a> kennengelernt – in diesem Beitrag geht es um das Monitor<\/a>ing mit Prometheus.<\/p>\n\n\n\n

Prometheus ist nicht so Hardware-lastig wie Zabbix, für manche Dinge vor allem nicht so kompliziert und umständlich, vor allem, wenn es um einfache Dinge geht. Man muss auch sagen – wird es spezieller, als rein nur normale Rechner zu monitor<\/a>en, kann es schon auch komplizierter werden.<\/p>\n\n\n\n

Prometheus installieren<\/h3>\n\n\n\n

Unter auf Debian<\/a> basierenden Linux<\/a>-Distribution<\/a>en installieren Sie diese Software wie üblich ganz einfach über die Paket<\/a>-Verwaltung durch das Paket<\/a> „prometheus<\/strong>„. Etwa am einfachsten als root<\/a> am Terminal<\/a> mit dem Befehl<\/a>:<\/p>\n\n\n\n

apt install prometheus<\/code><\/pre>\n\n\n\n
Ich habe hier Prometheus auf einem Raspberry Pi<\/a> installiert. Die Software braucht auch einen Webserver<\/a> – hierzu installiere ich den schlan<\/a>ken Nginx:<\/p>\n\n\n\n
apt install nginx<\/code><\/pre>\n\n\n\n
Jetzt muss der Webserver<\/a> darauf konfiguriert werden, dass Prometheus auch angezeigt wird – hierzu öffnen wir dessen Konfiguration<\/a>sdatei<\/a>. In diesem Fall mit dem professionellen Editor<\/a> Vim:<\/p>\n\n\n\n
vim \/etc\/nginx\/conf.d\/prometheus.conf<\/code><\/pre>\n\n\n\n
Hier fügen wir folgenden Code ein:<\/p>\n\n\n\n
server {\n    listen 80;\n    server_name prometheus.robert.org;\n    location \/ {\n        proxy_pass http:\/\/localhost:9090;\n        proxy_http_version 1.1;\n        proxy_set_header Upgrade $http_upgrade;\n        proxy_set_header Connection 'upgrade';\n        proxy_set_header Host $host;\n        proxy_cache_bypass $http_upgrade;\n    }\n\n}<\/code><\/pre>\n\n\n\n
Den server_name<\/code> passen Sie natürlich entsprechend an, den Port, wenn gewünscht ebenfalls, anschließend starten Sie den Server<\/a> neu:<\/p>\n\n\n\n
systemctl restart nginx.service<\/code><\/pre>\n\n\n\n
Anschließend rufen Sie Prometheus über den Webbrowser auf – etwa auf dem lokalen Rechner mit „http:\/\/localhost<\/a>:80<\/em>“ oder auf einem anderen Rechner, mit der IP-Adresse<\/a> des Rechners „http:\/\/192.168.1.105:80<\/em>“ – zuletzt geben Sie nach einem Doppelpunkt den Port an:<\/p>\n\n\n\n
\"\"<\/a><\/figure>\n\n\n\n
Damit wäre Prometheus betriebsbereit, wir müssen nur noch entsprechende zu überwachende Systeme einfügen. Wollen wir als Erstes gleich einmal den Prometheus-Host<\/a> angeben – hierzu ist unter Debian<\/a> mit Prometheus auch gleich der passende Exporter installiert, dieser läuft auch bereits, wie der Befehl<\/a>:<\/p>\n\n\n\n
systemctl status prometheus-node-exporter.service<\/code><\/pre>\n\n\n\n
zeigt:<\/p>\n\n\n\n
\"\"<\/a><\/figure>\n\n\n\n
Wir müssen Prometheus jetzt nur noch anweisen, den Exporter zu nutzen – dies erledigen wir wieder als root<\/a> am Terminal<\/a> mit dem gewünschten Editor<\/a> über die Datei<\/a> „\/etc\/prometheus\/prometheus.yml<\/em>„:<\/p>\n\n\n\n
vim \/etc\/prometheus\/prometheus.yml<\/code><\/pre>\n\n\n\n
Hier scrollen Sie erst einmal ganz hinunter und finden folgenden Code:<\/p>\n\n\n\n
  - job_name: node\n    # If prometheus-node-exporter is installed, grab stats about the local\n    # machine by default.\n    static_configs:\n      - targets: ['localhost:9100']<\/code><\/pre>\n\n\n\n
\"\"<\/a><\/figure>\n\n\n\n
Unter Debian<\/a> ist dieser Exporter bereits aktiv, Sie müssen also nichts weiter tun. Wichtig ist, von dieser Datei<\/a> schon einmal gehört zu haben – es ist die zentrale Konfiguration<\/a>sdatei<\/a>. Im Webbrowser klicken Sie jetzt auf „Status → Targets<\/em>“ – hier sehen Sie bereits den aktiven Exporter, der lokale Rechner wird also bereits überwacht:<\/p>\n\n\n\n
\"\"<\/a><\/figure>\n\n\n\n
Die Funktion können wir auch überprüfen, indem Sie auf „Prometheus<\/strong>“ klicken und im Feld „Execute<\/em>“ etwa folgenden Befehl<\/a> eingeben:<\/p>\n\n\n\n
node_memory_MemAvailable_bytes<\/code><\/pre>\n\n\n\n
Anschließend klicken Sie auf „Execute<\/strong>„, im Feld darunter erhalten Sie den aktuellen Wert:<\/p>\n\n\n\n
\"\"<\/a><\/figure>\n\n\n\n
Sie könnten jetzt in der Prometheus-Oberfläche entsprechende Graphen einfügen, dies ist jedoch weder bequem noch schön. Verbinden Sie doch die Software Grafana mit Prometheus. Doch – dazu mehr später, jetzt wollen wir einen weiteren Host<\/a> einfügen. Für normale Betriebssystem<\/a>e (Linux<\/a>, macOS, BSD<\/a>, Windows-Zeugs und so weiter<\/em>) nutzen man sogenannte Node-Exporter<\/strong>, die man auf den entsprechenden Host<\/a>s installiert. Diese finden Sie auf GitHub<\/a> – laden Sie den passenden herunter. Einen Exporter für Windows finden Sie unter Prometheus-Exporter<\/a>.<\/p>\n\n\n\n
Unter Linux<\/a> starten Sie den Exporter entweder beim Start des Systems per Script<\/a>, über Cron<\/a> oder auch über Systemd<\/a>. Zum Test lässt sich dieser nach dem Entpacken auch einfach mit dem Befehl<\/a>:<\/p>\n\n\n\n
.\/node_exporter<\/code><\/pre>\n\n\n\n
starten. Jetzt wechseln Sie wieder auf Ihren Prometheus-Server<\/a> und öffnen die Konfiguration<\/a>sdatei<\/a>, scrollen ganz nach unten – hier finden Sie die Zeile:<\/p>\n\n\n\n
\u00a0- <\/strong>targets: ['localhost:9100']<\/code><\/pre>\n\n\n\n
Hier fügen Sie die IP-Adresse<\/a> des entsprechenden Host<\/a>s ein – und den Port 9100<\/strong> – dieser muss über die Firewall freigeschaltet sein:<\/p>\n\n\n\n
\u00a0- <\/strong>targets: ['localhost:9100','192.168.1.101:9100']<\/code><\/pre>\n\n\n\n
Anschließend starten Sie Prometheus neu:<\/p>\n\n\n\n
systemctl restart prometheus.service<\/code><\/pre>\n\n\n\n
Jetzt finden Sie in der Prometheus-GUI<\/a> unter den „Targets<\/em>“ den neuen Host<\/a>:<\/p>\n\n\n\n
\"\"<\/a><\/figure>\n\n\n\n
Für weiteres Monitor<\/a>ing (eigentlich geht so gut wie alles<\/em>) finden Sie unter Prometheus-Exporter<\/a> entsprechende Exporter und die passenden Anleitungen.<\/p>\n\n\n\n
Grafana als GUI für Prometheus<\/h3>\n\n\n\n
Gleich einmal zu Beginn – die Konfiguration<\/a> von Prometheus wird über die Konfiguration<\/a>sdatei<\/a> gemacht – siehe Link oben, Grafana zeigt gemonitor<\/a>te Werte an. Sie finden die Software unter Grafana zum Download, inklusive entsprechenden Anleitungen. Unter Debian<\/a> laden Sie einfach das entsprechende Debian<\/a>-Paket<\/a> herunter – etwa:<\/p>\n\n\n\n
wget https:\/\/dl.grafana.com\/oss\/release\/grafana_8.2.3_arm64.deb\napt install .\/grafana_8.2.3_arm64.deb<\/code><\/pre>\n\n\n\n
Jetzt aktivieren und starten Sie Grafana:<\/p>\n\n\n\n
systemctl enable --now grafana-server.service<\/code><\/pre>\n\n\n\n
Anschließend wechseln Sie im Browser auf den Host<\/a> mit dem Port 3000<\/strong>:<\/p>\n\n\n\n
\"\"<\/a><\/figure>\n\n\n\n
Hier loggen Sie sich mit dem Benutzer admin<\/strong> und dem Passwort admin<\/strong> ein, anschließend werden Sie aufgefordert das Passwort zu ändern:<\/p>\n\n\n\n
\"\"<\/a><\/figure>\n\n\n\n
Hier klicken Sie links auf das Zahnrad und wählen „Data sources<\/em>„, klicken auf den Schalter „Add data source<\/strong>„:<\/p>\n\n\n\n
\"\"<\/a><\/figure>\n\n\n\n
Hier zeigt sich gleich einmal Prometheus, klicken Sie darauf:<\/p>\n\n\n\n
\"\"<\/a><\/figure>\n\n\n\n
Unter „HTTP → URL<\/em>“ geben Sie die lokale Adresse ein „http:\/\/localhost<\/a>:9090<\/em>“ und klicken ganz unten auf „Save & Test<\/strong>„. Was Sie jetzt noch benötigen, ist ein passendes Dashboard – könnte man selbst erstellen, schneller geht es natürlich mit vorgefertigten. Solche für Prometheus finden Sie unter Grafana Dashboards<\/a>. Ein passendes für alle möglichen Host<\/a>s wäre etwa Node exporter full with node name<\/a>. Hier kopieren Sie die ID unten rechts – jetzt klicken Sie in Grafana links auf das Plus und wählen „Import<\/em>„, fügen die ID ein und klicken auf „Load<\/strong>„:<\/p>\n\n\n\n
\"\"<\/a><\/figure>\n\n\n\n
Unten wählen Sie „Prometheus<\/em>“ und klicken auf „Import<\/strong>„:<\/p>\n\n\n\n
\"\"<\/a><\/figure>\n\n\n\n
Schon wird der erste Host<\/a> angezeigt, oben können Sie zwischen den überwachten Host<\/a>s wechseln. Rechts oben passen Sie das Intervall für die automatische Aktualisierung der Anzeige an, scrollen Sie hinunter, finden Sie weitere Daten<\/a>, die Sie nur ausklappen müssen:<\/p>\n\n\n\n
\"\"<\/a><\/figure>\n\n\n\n
Es dauert ein wenig, bis sich die ganzen Ausgaben mit Daten<\/a> füllen, ist dann in Grafana aber sehr übersichtlich – geradezu hübsch. In Grafana finden Sie in den Einstellungen auch den Alert-Manager, über diesen können Sie sich bei Problemen informieren lassen (mehr hierzu unter Grafana<\/a><\/em>).<\/p>\n\n\n\n
Grundsätzlich ist Prometheus ein System für die Echtzeit-Überwachung, gespeichert und angezeigt werden nur die letzten acht Stunden. Möchten Sie Daten<\/a> über längere Zeit speichern<\/a>, verbinden Sie Prometheus zusätzlich mit einer Timescale-DB.<\/p>\n\n\n\n
\"\"<\/a><\/figure>\n
\r\n    
\r\n    \r\n                            \"Gef\u00e4llt\r\n            <\/a>\r\n    10    <\/span>\r\n<\/div>
\r\n    \r\n                            \"Gef\u00e4llt\r\n            <\/a>\r\n    20<\/span>\r\n<\/div><\/div>","protected":false},"excerpt":{"rendered":"
Nicht nur f\u00fcr Firmen zahlt es sich aus, die laufenden Server, Ger\u00e4te und das Netzwerk zu monitoren – also zu beobachten. Wir haben auf der Linux Bibel neben vielen kleinen Tools, auch schon das gro\u00dfe Monitoring-System Zabbix kennengelernt – in diesem Beitrag geht es um das Monitoring mit Prometheus. Prometheus ist nicht so Hardware-lastig wie […]<\/p>\n","protected":false},"author":1,"featured_media":14451,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[38,72],"tags":[39,37],"class_list":["post-14434","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-netzwerk","category-sicherheit","tag-netzwerk","tag-sicherheit"],"_links":{"self":[{"href":"https:\/\/linux-bibel.at\/index.php\/wp-json\/wp\/v2\/posts\/14434","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/linux-bibel.at\/index.php\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/linux-bibel.at\/index.php\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/linux-bibel.at\/index.php\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/linux-bibel.at\/index.php\/wp-json\/wp\/v2\/comments?post=14434"}],"version-history":[{"count":1,"href":"https:\/\/linux-bibel.at\/index.php\/wp-json\/wp\/v2\/posts\/14434\/revisions"}],"predecessor-version":[{"id":14454,"href":"https:\/\/linux-bibel.at\/index.php\/wp-json\/wp\/v2\/posts\/14434\/revisions\/14454"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/linux-bibel.at\/index.php\/wp-json\/wp\/v2\/media\/14451"}],"wp:attachment":[{"href":"https:\/\/linux-bibel.at\/index.php\/wp-json\/wp\/v2\/media?parent=14434"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/linux-bibel.at\/index.php\/wp-json\/wp\/v2\/categories?post=14434"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/linux-bibel.at\/index.php\/wp-json\/wp\/v2\/tags?post=14434"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}