Nutzen einer Automatisierung messen

Vom Geschäftsziel zur messbaren Erwartung gelangen

Zuerst beschreibt das Team, welches Problem kleiner werden soll. „Effizienz steigern“ ist zu breit; „Rückfragen wegen unvollständiger Übergaben senken“ lässt sich beobachten. Zu jedem Ziel gehört eine Ergebniskennzahl und mindestens eine Schutzkennzahl, damit Geschwindigkeit nicht auf Kosten von Fehlern oder Überlastung wächst. Die Kennzahlen werden vor der Umsetzung ausgewählt. Später nur den günstigsten Wert hervorzuheben würde die Bewertung verzerren. Verantwortliche einigen sich außerdem auf Einheit, Datenquelle, Messpunkt und Zielgruppe. So bleibt derselbe Begriff über Ausgangslinie, Pilot und Regelbetrieb hinweg vergleichbar.

Einordnung: Redaktioneller Arbeitsschritt; keine gesetzliche oder technische Vorgabe.

Eine repräsentative Ausgangslinie bilden

Die Baseline umfasst einen Zeitraum, der normale Schwankungen und wichtige Fallarten enthält. Aktive Bearbeitungszeit, Liegezeit und Nacharbeit werden getrennt, weil eine Automatisierung sie unterschiedlich beeinflussen kann. Fälle mit fehlenden Daten oder Sonderfreigaben werden nicht entfernt, sondern als eigene Gruppe sichtbar. Das Team dokumentiert Zählregeln und bekannte Lücken. Historische Systemdaten können genauer als Erinnerungen sein, müssen aber auf geänderte Definitionen geprüft werden. Ist die Datenlage schwach, wird die Unsicherheit angegeben und zunächst eine kurze kontrollierte Erhebung durchgeführt, statt eine präzise Scheinzahl zu erzeugen.

Einordnung: Redaktioneller Arbeitsschritt; keine gesetzliche oder technische Vorgabe.

Gesamten Betriebsaufwand statt Lizenzpreis erfassen

Zum Aufwand gehören Konzeption, Einrichtung, Schnittstellen, Tests, Schulung, Überwachung, Fehlerklärung, Pflege und spätere Änderungen. Einmalige und laufende Bestandteile werden getrennt. Interne Zeit erhält eine nachvollziehbare Einheit; wenn keine belastbare Geldbewertung vorliegt, bleibt sie in Stunden. Auch manuelle Kontrollen nach der Automatisierung zählen dazu. Unerwartete Störungen und Pflege an Datenregeln werden während des Beobachtungszeitraums ergänzt. Diese Vollsicht verhindert, dass eingesparte Klicks als Nettogewinn erscheinen, während neue Arbeit in Betrieb oder Fachabteilung aus der Rechnung verschwindet.

Einordnung: Redaktioneller Arbeitsschritt; keine gesetzliche oder technische Vorgabe.

Qualität und Sicherheit als eigene Dimensionen behandeln

Zeitersparnis ist nur dann nützlich, wenn das Ergebnis mindestens ausreichend verlässlich bleibt. Gemessen werden je nach Prozess beispielsweise vollständige Übergaben, Korrekturquote, unklare Zustände und Zeit bis zur Fehlererkennung. Der BSI-Grundschutz bietet einen Rahmen, Informationssicherheit systematisch am Schutzbedarf auszurichten, liefert aber keinen universellen Nutzenwert für Automatisierungen. Sicherheitsbefunde werden daher nicht willkürlich in Euro umgerechnet. Kritische Mängel können als Ausschlusskriterium wirken, auch wenn die Durchschnittszeit sinkt. Die Organisation dokumentiert diese Gewichtung vor der Abschlussentscheidung.

Beleggrundlage: BSI-Standard 200-2: IT-Grundschutz-Methodik · IT-Grundschutz-Kompendium

Vergleich gegen Mengen- und Lerneffekte absichern

Vorher und nachher müssen vergleichbare Mengen und Fallstrukturen besitzen. Ein ruhiger Pilotmonat darf nicht direkt mit dem Jahresendgeschäft verglichen werden. Neue Mitarbeitende, parallel geänderte Regeln oder eine Bereinigung der Stammdaten werden als Einflussfaktoren vermerkt. Während der Anlaufphase sind Werte häufig schlechter; deshalb werden Lernphase und stabiler Betrieb getrennt ausgewertet. Wo möglich, hilft eine zeitgleiche Vergleichsgruppe ähnlicher Fälle. Sie beweist keine Kausalität, kann aber allgemeine Schwankungen sichtbar machen. Das Ergebnis nennt Spannweite und Unsicherheit, statt aus wenigen Beobachtungen eine dauerhafte Prognose abzuleiten.

Einordnung: Redaktioneller Arbeitsschritt; keine gesetzliche oder technische Vorgabe.

Messung in eine wiederholbare Entscheidung übersetzen

Der Ergebnisbericht zeigt Baseline, Messzeitraum, Fallzahlen, Definitionen, Abweichungen und nicht erfasste Effekte. Neben Mittelwerten können Median und Extremfälle wichtig sein, weil wenige schwere Störungen im Durchschnitt verschwinden. Die Entscheidung lautet nicht automatisch Fortsetzen: Möglich sind Anpassung, begrenzter Einsatz oder Rückkehr zum früheren Weg. Für den Regelbetrieb werden wenige Kennzahlen mit Warnschwellen und Verantwortlichen übernommen. Nach wesentlichen Änderungen beginnt ein neuer Vergleich. So bleibt der Nutzen eine überprüfbare betriebliche Aussage und wird nicht zu einer einmal berechneten Werbeziffer ohne aktuellen Bezug. Eine Kurzfassung für Entscheider verweist auf das vollständige Messblatt und trennt bestätigte Werte von Prognosen. Werden erwartete Einsparungen genannt, erscheinen Annahmen, Zeitraum und Unsicherheitsband unmittelbar daneben und nicht erst in einer schwer auffindbaren Fußnote.

Einordnung: Redaktioneller Arbeitsschritt; keine gesetzliche oder technische Vorgabe.

Im Zusammenhang weiterlesen

• Automatisierung klein pilotieren — Ein Pilot liefert verwertbare Erkenntnisse, wenn Umfang, Vergleichsbasis, Sicherheitsgrenzen und Entscheidung nach dem Test vorher feststehen.
• Automatisierungskandidat sachlich bewerten — Ein guter Automatisierungskandidat ist nicht bloß häufig, sondern ausreichend stabil, beobachtbar und bei Fehlern beherrschbar.
• Kennzahlen mit Definition dokumentieren — Eine Kennzahl ist erst steuerbar, wenn verschiedene Personen sie mit derselben Definition reproduzieren und richtig einordnen können.