Woran erkennt man, ob eine Digitalisierung wirklich gewirkt hat?

Der Go-Live ist ein Meilenstein, kein Beweis. Ob ein digitalisiertes Verfahren tatsächlich etwas verändert hat, zeigt sich erst danach – und nur, wenn jemand systematisch hinschaut.

Vor einigen Monaten wird ein Fachverfahren in einer Verwaltung auf ein neues Online-Portal umgestellt. Der Projektabschluss wird gefeiert, die Meldung an die Leitung ist positiv, die Fallzahl der digital eingereichten Anträge steigt sichtbar. Sechs Monate später sitzt in derselben Abteilung noch immer dasselbe Team an denselben Rückfragen, die Bearbeitungsdauer hat sich kaum verändert, und ein Teil der Mitarbeitenden druckt die digital eingereichten Anträge aus, um sie wie gewohnt weiterzubearbeiten. Auf dem Papier – im wörtlichen wie im übertragenen Sinn – ist das Projekt ein Erfolg. In der Wirkung ist es das nicht.

Dieses Muster begegnet mir in der Beratung regelmäßig, und es hat einen einfachen Grund: Die meisten Digitalisierungsprojekte definieren ihren Erfolg über den Rollout, nicht über die Wirkung danach. Ist das System eingeführt, laufen erste Anträge durch, funktioniert die Schnittstelle – dann gilt das Projekt als abgeschlossen. Was danach passiert, wird selten mit derselben Sorgfalt beobachtet wie das, was vorher geplant wurde.

Der Go-Live ist kein Wirkungsnachweis

Der Grund dafür liegt in der Projektlogik selbst. Ein Digitalisierungsprojekt hat einen Projektplan, einen Termin, ein Budget – und all das endet am Tag der Einführung. Die Organisation, die das Projekt getragen hat, löst sich danach in aller Regel auf oder wendet sich dem nächsten Vorhaben zu. Genau in diesem Moment beginnt aber erst die Phase, in der sich zeigt, ob etwas gewirkt hat.

Ein digitalisiertes Verfahren kann aus zwei sehr unterschiedlichen Gründen erfolgreich aussehen. Entweder, weil es tatsächlich schneller, fehlerärmer oder ressourcenschonender geworden ist. Oder, weil es lediglich die alte Arbeitsweise in neuer Form abbildet – der Antrag läuft jetzt digital durch dieselben fünf Zuständigkeiten wie vorher, nur dass niemand mehr das Papier anfassen muss. Von außen betrachtet, an Kennzahlen wie „Anzahl digitaler Anträge“ oder „Nutzung des Portals“ gemessen, sehen beide Fälle identisch aus. Erst ein Blick auf die tatsächliche Bearbeitungszeit, die Zahl der beteiligten Stellen und die Fehlerquote unterscheidet den einen vom anderen Fall.

Vier Kriterien, die mehr sagen als die Einführung selbst

Wer wissen will, ob eine Digitalisierung gewirkt hat, kommt an vier Fragen nicht vorbei, die alle erst nach dem Go-Live beantwortbar sind:

Hat sich die Durchlaufzeit tatsächlich verkürzt – gemessen vom Eingang bis zum Abschluss, nicht nur bis zur digitalen Erfassung? Ein Antrag, der jetzt in Sekunden digital erfasst wird, aber danach genauso lange in einer Warteschlange liegt wie vorher, hat an der entscheidenden Stelle nichts gewonnen. Die Erfassung ist selten der Engpass – die Bearbeitung ist es.

Ist die Zahl der beteiligten Stellen gesunken, oder wurde sie nur digital abgebildet? Wenn ein Vorgang weiterhin durch fünf Zuständigkeiten wandert, nur eben elektronisch statt auf Papier, hat sich an der eigentlichen Ursache von Verzögerung nichts geändert. Ein echtes Wirkungssignal ist eine sinkende Zahl von Übergabepunkten, nicht deren Beschleunigung.

Hat sich der tatsächliche Arbeitsaufwand der Mitarbeitenden verändert – oder ist ein Medienbruch dazugekommen? Ein verlässliches Warnzeichen ist, wenn digital eingereichte Unterlagen ausgedruckt werden, um sie „wie gewohnt“ weiterzubearbeiten. Das deutet darauf hin, dass die Digitalisierung an der Oberfläche endet und der eigentliche Arbeitsprozess unverändert geblieben ist.

Gibt es weniger Rückfragen und Nacharbeit als vorher, oder produziert das neue System neue Fehlerquellen? Digitalisierte Formulare mit unklaren Feldbezeichnungen oder fehlender Plausibilitätsprüfung erzeugen häufig mehr Rückfragen als das analoge Pendant, weil Fehler jetzt technisch möglich sind, die vorher am Schalter sofort aufgefallen wären.

Was das für die Praxis bedeutet

Für Verwaltungen, die aus dieser Beobachtung etwas Konkretes machen wollen, folgen daraus vier Konsequenzen. Erstens: Ein Digitalisierungsprojekt braucht einen Wirkungstermin, der einige Monate nach dem Go-Live liegt – nicht als Formalität, sondern mit derselben Aufmerksamkeit wie der Projektabschluss selbst. Zweitens: Die Kennzahl, die erhoben wird, muss die Bearbeitungszeit und nicht die Nutzungszahl in den Mittelpunkt stellen. Eine hohe Zahl digitaler Anträge sagt nichts darüber, ob die Bearbeitung dahinter schneller geworden ist.

Drittens: Wer Wirkungskontrolle ernst nimmt, fragt nicht nur die Projektverantwortlichen, sondern die Sachbearbeitung selbst – dort zeigt sich zuerst, ob ein Medienbruch entstanden ist oder ob sich tatsächlich etwas vereinfacht hat. Viertens: Eine Organisation, die ihre Digitalisierungsprojekte konsequent auf Wirkung statt auf Einführung prüft, lernt mit der Zeit, welche Vorhaben tatsächlich Wirkung erzeugen und welche vor allem Aufwand verlagern. Dieses Wissen ist wertvoller als jede einzelne Rolloutzahl, weil es sich auf das nächste Projekt übertragen lässt.

Eine kurze Prüfliste für die Praxis

Wer diese Wirkungskontrolle nicht als eigenes Projekt aufsetzen will, kommt mit wenigen, immer wiederkehrenden Fragen weit. Wie lange dauert ein Vorgang heute vom Eingang bis zum Abschluss, verglichen mit dem Wert vor der Umstellung – nicht geschätzt, sondern aus den vorhandenen Fallzahlen abgelesen? Wie viele Stellen sind an einem typischen Vorgang noch beteiligt, und ist diese Zahl gegenüber vorher tatsächlich kleiner geworden? Werden digitale Unterlagen an irgendeiner Stelle im Prozess wieder ausgedruckt, gescannt oder manuell in ein anderes System übertragen? Und hat die Zahl der Rückfragen bei der Sachbearbeitung zu- oder abgenommen, seit das neue Verfahren läuft? Wer diese vier Fragen sechs Monate nach der Einführung beantworten kann, weiß mehr über den tatsächlichen Erfolg des Projekts als jede Statistik über Nutzungszahlen des neuen Portals.

Diese Prüfung kostet wenig – ein Gespräch mit der Sachbearbeitung, ein Blick in die vorhandenen Fallzahlen, eine halbe Stunde Auswertung. Sie liefert aber etwas, das keine Projektabschlussmeldung liefern kann: eine ehrliche Antwort darauf, ob sich für die Menschen, die den Vorgang bearbeiten, und für die Bürgerinnen und Bürger, die ihn einreichen, tatsächlich etwas zum Besseren verändert hat.

Der Erfolg einer Digitalisierung entscheidet sich nicht am Tag der Einführung, sondern an dem, was sich Monate später messen lässt. Eine Verwaltung, die diesen Unterschied ernst nimmt, braucht keine aufwendige neue Bürokratie zur Erfolgskontrolle – sie braucht die Bereitschaft, dieselben Fragen zu stellen, die sie sich vor dem Projekt gestellt hat, auch danach noch einmal.