Überwachung Festplattenstatus mit Grafana

vorhergehende Artikel in: Linux TeleGrafana
15.02.2022

Ich hatte nach dem Update meines Raid mit größeren Platten festgestellt, dass der automatische Standby nach einiger Zeit Nicht-Benutzung nicht mehr funktionierte.

Trotzdem die Platten sich mittels hdparm noch sofort in den Standby-Modus versetzen ließen funktionierte der Idle-Timer nicht mehr. Ich hatte nachgelesen und stieß auf die Information, dass der mittels hdparm -B gesetzte Wert den Idle-Standby verhindert, wenn der angegebene Wert größer als 127 wäre. Ich versuchte diesen zu ändern und bekam für jede der im Raid befindlichen Platten eine Fehlermeldung - ich konnte ihn nicht ändern.

Ich stieß im Internet auf die Idee, statt hdparm einen service namens hd-idle zu nutzen. Nach Installation und Konfiguration mittels

HD_IDLE_OPTS="-i 0 -a /dev/sdb -i 600 -a /dev/sdc -i 600 -a /dev/sdd -i 600 -a /dev/sde -i 600 -l /var/log/hd-idle.log"

funktionierte es tatsächlich wieder: Nach 10 Minuten ohne Beschäftigung wechselten die Platten in den Standby-Modus.

Nun wollte ich dieses neu gewonnene Feature in meine Überwachung mittels Grafana einbauen. Das erwies sich als schwierig, denn ich konnte nur dann den Status active/standby ermitteln, wenn ich als Nutzer root unterwegs war. Ich wollte aber an Telegraf/InfluxDB/Grafana festhalten und nicht irgendetwas daneben zusammenhacken, Telegraf läuft aber nicht unter dem Nutzer root. Also teilte ich die Funktionalität auf: Ich schrieb ein Skript, das der Nutzer root per Cron ausführt - Dieses Skript schreibt den Status aller überwachten Festplatten in temporäre Dateien:

#!/bin/bash

mkdir -p /tmp/diskstats

sdbstat=`/usr/sbin/smartctl -i -n standby /dev/sdb|grep "Device is in"|cut -d ' ' -f 4` if [ "$sdbstat" = "STANDBY" ]; then echo -n "0" >"/tmp/diskstats/sdb" else echo -n "1" >"/tmp/diskstats/sdb" fi

sdcstat=$(/sbin/hdparm -C /dev/sdc|grep "drive state is"|cut -d ':' -f 2 |rev|cut -d ' ' -f 1|rev) if [ "$sdcstat" = "standby" ]; then echo -n "0" >"/tmp/diskstats/sdc" else echo -n "1" >"/tmp/diskstats/sdc" fi

sddstat=$(/sbin/hdparm -C /dev/sdd|grep "drive state is"|cut -d ':' -f 2 |rev|cut -d ' ' -f 1|rev) if [ "$sddstat" = "standby" ]; then echo -n "0" >"/tmp/diskstats/sdd" else echo -n "1" >"/tmp/diskstats/sdd" fi

sdestat=$(/sbin/hdparm -C /dev/sde|grep "drive state is"|cut -d ':' -f 2 |rev|cut -d ' ' -f 1|rev) if [ "$sdestat" = "standby" ]; then echo -n "0" >"/tmp/diskstats/sde" else echo -n "1" >"/tmp/diskstats/sde" fi

Wichtig ist hier, die Pfade zu den Programmen explizit anzugeben: Das Skript soll von Cron aufgerufen werden und erbt den extrem eingeschränkten Suchpfad PATH von Cron!

Ein anderes Skript, das ich dann über das exec-Plugin von Telegraf einband liest diese temporären Dateien aus und schreibt die Werte in die InfluxDB:

#!/bin/bash

HOST=$(hostname)

sdb=$(cat /tmp/diskstats/sdb) echo "diskstat,host=${HOST},dev=/dev/sdb state=${sdb}i" sdc=$(cat /tmp/diskstats/sdc) echo "diskstat,host=${HOST},dev=/dev/sdc state=${sdc}i" sdd=$(cat /tmp/diskstats/sdd) echo "diskstat,host=${HOST},dev=/dev/sdd state=${sdd}i" sde=$(cat /tmp/diskstats/sde) echo "diskstat,host=${HOST},dev=/dev/sde state=${sde}i"

Eingebunden wird das Skript in Telegraf zum Beispiel so:

[[inputs.exec]]
  commands = [ "/bin/bash /opt/telegraf/diskstat.sh" ]
  timeout = "10s"
  data_format = "influx"

Da die Werte nun in der InfluxDB stehen, kann ich den Status anschließend mittels Grafana visualisieren:

Screenshot Grafana zeigt den Status der vier Festplatten im Raid an

Aktualisierung vom 15. Februar 2022

Es gab interessantes Feedback zu diesem Artikel, das ich nicht vorenthalten möchte: DrTron hat einige interessante Verbesserungen vorgeschlagen, die in der Diskussion zu diesem Artikel zusammengefasst sind.

Artikel, die hierher verlinken

Spezielle Telegraf-Anpassungen für Rock64

20.12.2020

Obwohl mein letztes Vorhaben mit dem Rock64 kläglich gescheitert ist habe ich ihn in mein Netzwerklabor eingebaut - und das bedeutet, dass die 2-Faktor-Authentifizierung aktiviert ist und das System mittels Telegraf Daten an die Influx-DB meldet und mit Grafana überwacht werden kann:

Günstiges Arm64-Board mit Raspi-Formfaktor

12.12.2020

Ich habe ein neues Gerät in meinem Hardware-Zoo: Nachdem ich bereits einigeErfahrungen mit Raspis sammeln konnte, machte mich ein Kollege neulich auf eine günstige Variante aufmerksam, Erfahrungen mit ARM64 zu sammeln...

Alle Artikel rss Wochenübersicht Monatsübersicht Codeberg Repositories Mastodon Über mich home xmpp


Vor 5 Jahren hier im Blog

  • Multi-User-WebDAV, Docker, GitHub

    17.11.2019

    Nachdem ich mich in letzter Zeit verstärkt mit Docker und dem zugehörigen Ökosystem beschäftige, habe ich begonnen, verschiedenste Dienste in Containern zu testen um zu sehen, ob in manchen Fällen LXC oder KVM nicht doch die bessere Wahl wäre...

    Weiterlesen...

Neueste Artikel

  • Migration der Webseite und aller OpenSource Projekte

    In eigener Sache...

    Weiterlesen...
  • AutoHideToolbar für Java Swing

    Ich habe eine neue Java Swing Komponente erstellt: Es handelt sich um einen Wrapper für von JToolBar abgeleitete Klassen, die die Werkzeugleiste minimieren und sie nur dann einblenden, wenn der Mauszeiger über ihnen schwebt.

    Weiterlesen...
  • Integration von EBMap4D in die sQLshell

    Ich habe bereits in einem früheren Artikel über meine ersten Erfolge berichtet, der sQLshell auf Basis des bestehenden Codes aus dem Projekt EBMap4D eine bessere Integration für Geo-Daten zu spendieren und entsprechende Abfragen, bzw. deren Ergebnisse auf einer Kartenansicht zu visualisieren.

    Weiterlesen...

Manche nennen es Blog, manche Web-Seite - ich schreibe hier hin und wieder über meine Erlebnisse, Rückschläge und Erleuchtungen bei meinen Hobbies.

Wer daran teilhaben und eventuell sogar davon profitieren möchte, muss damit leben, daß ich hin und wieder kleine Ausflüge in Bereiche mache, die nichts mit IT, Administration oder Softwareentwicklung zu tun haben.

Ich wünsche allen Lesern viel Spaß und hin und wieder einen kleinen AHA!-Effekt...

PS: Meine öffentlichen Codeberg-Repositories findet man hier.