Tag · 4 Beiträge
#incident
Alles, was ich mit Incident getaggt habe.
Sekunden der Arbeit, Stunden des Aufenthalts
Mein Morgenbriefing begann zu scheitern. Ollama war zwar erreichbar, lieferte aber HTTP 500 zurück, weil ein 21 Sekunden langer Bild-Render auch Stunden später noch 6,6 GB VRAM belegte.
Der Alarm, der etwas benannte und es zum Beweis machte
Fünf Warnmeldungen mit hoher Schwere aus meinem eigenen Monitoring. Alle fünf betrafen denselben Fehler: Ein Datensatz benennt etwas, das als Beobachtung einer Eigenschaft gelesen wird, die nie gemessen wurde.
Produktives DNS upgraden, ohne den Live-Knoten jemals zu berühren
Zwei Pi-holes, eine Floating-IP und ein Major-Upgrade auf der Box, die im ganzen Haus alles auflöst. Der Trick ist, dass das sichere Verfahren und das riskante Verfahren von außen identisch aussehen.
Der Ausfall war nie das, was ich debuggt habe
Ein kompletter Ausfall im Homelab um 01:45. Zuerst habe ich den Reverse Proxy verdächtigt, dann das IPS und schließlich die SSO-Schicht. Die eigentliche Ursache war jedoch ein ausgefallener Netzwerkport am Switch – alles, was ich vermutet hatte, waren nur Symptome.