Arbejdsform · 03 af 03

Monitorér og observér.

Observation er, hvordan mål forbliver ærlige efter launch. Vi følger de signaler, der betyder noget, lukker loopet til handling og fører det, vi lærer, tilbage til næste beslutning.

Mål. Risiko. Observation.Baseret i Skandinavien · Arbejder globalt

Instrumentér det, målet afhænger af

Dashboards fulde af vanity-charts er ikke observation. Vi instrumenterer de stier, der er knyttet til de aftalte resultater: API'et, der skal holde latency-budget, køen, der ikke må vokse ubegrænset, backup'en, der faktisk skal kunne restores. Hvis en metrik ikke kan ændre en beslutning, fortjener den ikke et permanent panel.

Se signaler, ikke kun gennemsnit

Gennemsnit skjuler weekend-spiken og den ene tenant, der fejler. Vi ser på error budgets, saturation — også af mennesker — og de mærkelige signaler, operatorer allerede kender: en loglinje der betyder problemer, certifikat-alder, replication lag der altid går forud for smerte. God observation blander produktmetrics med de operationelle tegn.

Luk loopet fra alert til handling

En alert uden ejer og næste skridt er støj. Vi kobler signaler til runbooks, on-call-stier og severity, der matcher forretningsimpact. I hverdagen betyder det færre pages, klarere pages og en vane med at fikse alerten selv, når den råber ulv. Feedback-loops virker kun, når nogen forventes at handle.

Gennemgå incidents uden teater

Efter noget går i stykker, skriver vi hvad der skete, hvad vi missede, og hvad der ændrer sig som resultat — kort, teknisk, uden blame-teater. Pointen er at forbedre detection og response, ikke at producere en poleret fortælling. Hvis samme klasse af incident gentager sig, er observationssystemet eller mitigationsplanen ufuldstændig.

Hold runbooks ved arbejdet

Runbooks i en glemt wiki rådner. Vi holder trinene til diagnose og recovery tæt på de systemer, de beskriver, og opdaterer dem, når arkitekturen flytter sig. En ny ingeniør skal kunne følge stien uden arkæologi. Observation uden operable instruktioner er bare sightseeing.

Før observation tilbage til målene

Det, I lærer i produktion, bør ændre det næste resultat. Langsomme restores skubber backup-mål; støjende alerts skubber reliability-arbejde; stigende omkostningskurver skubber arkitektur-reviews. Vi behandler monitoring som input til planlægning, ikke som en separat eftertanke. Sådan forbliver mål, risiko og observation ét system i stedet for tre slide-sektioner.

Også i sættet

De andre principper.

Alle principper →

Lad os vækste noget

Fortæl os, hvad I bygger
eller fikser.

Vi svarer med et klart næste skridt.

[email protected] ↗