Wenige, echte Alarme
Wer zehnmal am Tag eine falsche Warnung bekommt, ignoriert die elfte. Jeder Alarm muss eine Handlung auslösen.
Leistung 02 / Überwachung
Automatisierte Prozesse laufen nur so lange gut, wie jemand hinschaut. Wir bauen das Hinschauen ein: Messen, Schwellen, Alarme, und eine Prüfung, ob die KI noch tut, was sie soll.
01 / Was das ist
Ein Prozess, der automatisch läuft, fällt auch automatisch aus: Die Schnittstelle antwortet nicht mehr, die Datei kommt im falschen Format, die KI liefert plötzlich leere Antworten. Ohne Überwachung merkst du das erst, wenn ein Kunde anruft.
Deshalb bekommt jedes System, das wir bauen, eine Überwachung dazu: technische Kennzahlen wie Laufzeit, Fehlerquote und Kosten, und inhaltliche Prüfungen wie Stichproben der KI-Ausgaben. Weicht etwas ab, gibt es eine Meldung mit Ursache und nächstem Schritt, nicht nur ein rotes Lämpchen.
Ob der Service läuft, ist die eine Frage. Ob die Ergebnisse noch stimmen, die andere. Wir überwachen beides.
Ein Alarm sagt, was passiert ist, seit wann, und was zu tun ist. Wer nachts geweckt wird, soll nicht erst suchen müssen.
Nicht jede Abweichung ist ein Notfall. Wir legen mit dir fest, was sofort gemeldet wird und was im Wochenbericht reicht.
KI-Aufrufe kosten Geld pro Anfrage. Eine Schleife, die nachts tausendmal läuft, fällt sofort auf, nicht erst auf der Rechnung.
02 / Vorgehen
Überwachung baut man nicht einmal, sondern zieht sie mit jedem neuen Prozess nach.
Jeder Schritt schreibt mit: Dauer, Ergebnis, Fehler, Kosten. Ohne Messung gibt es nichts zu überwachen.
Was ist normal, was nicht? Aus den ersten Wochen Messdaten entstehen die Grenzwerte.
Mail, Chat oder Anruf, je nach Dringlichkeit. Mit Ursache und nächstem Schritt in der Meldung.
Jeder echte Vorfall verbessert die Überwachung: neue Prüfung, angepasste Schwelle, klarere Meldung.
03 / Beispiele
Systeme, wie wir sie neben die Automatisierung stellen.
Ein Überwachungssystem meldet sofort, wenn ein Service nicht mehr korrekt funktioniert: nicht erreichbar, zu langsam oder mit falschen Antworten.
Jede Nacht zieht das System Stichproben aus den KI-Antworten des Tages und bewertet sie nach festen Kriterien. Sinkt die Quote, gibt es eine Meldung.
Kommt die tägliche Lieferung aus dem Shop? Hat sie die erwartete Anzahl Zeilen? Fehlt etwas, weiß der Verantwortliche es um acht, nicht um vier.
Wie viele KI-Anfragen laufen pro Stunde, was kosten sie, welcher Prozess verursacht sie? Eine Übersichtsseite, auf der Ausreißer sofort auffallen.
Was lief, was fiel aus, was wurde repariert. Eine Seite pro Woche, damit auch ohne Vorfall klar ist, dass alles funktioniert.
04 / Worauf es ankommt
Zu viele Alarme sind so schlecht wie keine. Überwachung muss so gebaut sein, dass man ihr glaubt.
Wer zehnmal am Tag eine falsche Warnung bekommt, ignoriert die elfte. Jeder Alarm muss eine Handlung auslösen.
Jede Meldung geht an eine Person, nicht an eine Gruppe. Sonst denkt jeder, der andere kümmert sich.
Ein System, das nichts meldet, ist entweder gesund oder tot. Ein Lebenszeichen pro Tag unterscheidet die beiden Fälle.
Wenn die Antwort „ich glaube schon“ ist, lohnt sich ein Gespräch. Wir zeigen dir, wie du es sicher weißt.