KPMG testet KI-Prüfung: Agenten stellten bessere Fragen als Wirtschaftsprüfer
KPMG hat erstmals eine KI-gestützte Prüfung eines in Großbritannien notierten Unternehmens durchgeführt – mit teils überraschenden Ergebnissen.

Der Wirtschaftsprüfungskonzern KPMG hat erstmals eine weitgehend KI-gestützte Prüfung eines in Großbritannien börsennotierten Unternehmens durchgeführt. Im Rahmen des Experiments mit dem Codenamen Project Exponential kamen in diesem Jahr mehr als 100 KI-Agenten zum Einsatz, um die Jahresabschlüsse eines nicht genannten FTSE-250-Unternehmens zu überprüfen. Die Prüfung lief parallel zu einer konventionellen Prüfung durch die regulären Wirtschaftsprüfer des Hauses.
Das Ergebnis fiel für die Technologie günstig aus. In mehreren Fällen „konnte die KI viel tiefer gehen" als das reguläre Prüfungsteam, sagte Cath Burnet, Leiterin der Abschlussprüfung bei KPMG im Vereinigten Königreich. In einigen Situationen habe die KI zudem „bessere Fragen" gestellt. Allerdings musste in einem Bereich der Prüfung ein Mensch eingreifen, nachdem ein KI-Agent daran gescheitert war, einen Satz von Vorschriften mit den Dokumenten des Unternehmens abzugleichen.
Die KI ging bei einigen Themen tiefer als die menschlichen Prüfer
Für die Branche steht viel auf dem Spiel. Prüfungsgesellschaften haben traditionell Kunden für große Teams von Junior-Wirtschaftsprüfern abgerechnet, die arbeitsintensive Tätigkeiten ausführen und von einer kleinen Zahl von Senior-Mitarbeitern überwacht werden. KPMG räumte ein, dass es „offensichtliche Zeitersparnis-Chancen" durch KI-basierte Prüfungen gebe, verweigerte jedoch die Auskunft, ob dies auch die Gebühren senken würde. KPMG International hat selbst niedrigere Gebühren von seinem eigenen Prüfer ausgehandelt – mit dem Argument, dass KI die Arbeit günstiger machen werde.
Die Konkurrenz arbeitet an ähnlichen Modellen. Die Big-Four-Gesellschaft PwC hat nach Angaben von Andy Hammond, dem globalen Assurance-Leiter, mehrere „Parallelprüfungs"-Projekte durchgeführt, „um zu sehen, wie KI im gesamten Prozess abschneidet, ohne sich darauf zu verlassen". Zuvor hatten Wirtschaftsprüfer KI lediglich für bestimmte Prüfungsaufgaben genutzt. In allen Phasen einer großen britischen Prüfung war die Technologie bis jetzt nicht im Einsatz.
KPMG setzt auf eine andere Teamgröße als bei klassischen Prüfungen
Bei Project Exponential arbeiteten die Agenten, die auf verschiedene Prüfungsbereiche angesetzt waren, autonom zusammen und konnten selbst nächste Schritte vorschlagen. Sie sammelten und analysierten Daten und dokumentierten ihre Arbeit, bevor sie Entwurfsschlussfolgerungen und Beobachtungen für die Prüfung bildeten. Ein Team baute die Agenten in vier Monaten; anschließend ließ ein Prüfungspartner die experimentelle Prüfung „genehmigen". Auf diese Ergebnisse griff KPMG jedoch nicht zurück, als es die Konten des Unternehmens formell testierte.
Zur genauen Größe des Teams machte KPMG keine Angaben, erklärte aber, dass zwei Partner und ein Direktor mit Senior-Managern und Junior-Mitarbeitern zusammenarbeiteten, um die Agenten zu entwickeln und zu betreiben. Das Project-Exponential-Team habe eine „andere Form und Größe" als eine traditionelle Prüfung, sagte Burnet. Menschliches Engagement bleibe jedoch „kritisch": Mitarbeiter legten die Ziele der Agenten fest, stellten Informationen zum Geschäftsmodell und zu früheren Prüfungen bereit, kontrollierten die Arbeit der Agenten regelmäßig und hinterfragten deren Schlussfolgerungen, bevor das Prüfungsurteil finalisiert wurde.
Der britische Regulator FRC warnt vor Risiken für die Unabhängigkeit
Die rasante Verbreitung von KI hat Zweifel geweckt, ob Prüfer die von Maschinen durchgeführte Arbeit angemessen überwachen können. Der britische Rechnungslegungsregulator Financial Reporting Council (FRC) warnte diese Woche, die Nutzung von KI könne eine „distinkte Bedrohung" für die Integrität und Unabhängigkeit der Prüfer darstellen, wenn diese Erkenntnisse aus KI-Agenten nutzten, um ihre Mandanten zu beraten. Prüfern ist es untersagt, Beratungsleistungen für Prüfungskunden zu erbringen.
„Unabhängig davon, welche Technologie ein Unternehmen nutzt, bleibt der Prüfer verantwortlich", sagte Mark Babington, Executive Director für regulatorische Standards beim FRC. „Prüfer müssen in der Lage sein, zu erklären, wie sie es genutzt haben, dessen Ausgaben herauszufordern und hinter den Beweisen zu stehen."
Ein Bericht des Centre for Public Interest Audit, einer Politik- und Forschungsgruppe für große Prüfungsgesellschaften, kam im vergangenen Monat zu dem Ergebnis, dass 23 Prozent der Vorsitzenden von Prüfungsausschüssen, die Prüfer ernennen und überwachen, nur „begrenztes" Vertrauen in KI haben. Zu den Bedenken zählen das Risiko, dass Prüfer zu stark auf KI angewiesen sind und dadurch ihr Skeptizismus geschwächt wird, sowie Fragen der Datensicherheit und mögliche „Halluzinationen", bei denen die Technologie falsche, irreführende oder erfundene Informationen liefert.
Burnet hält dem entgegen, dass das System von KPMG „volle Sichtbarkeit und volle Nachverfolgbarkeit" der Arbeit der KI-Agenten biete. Es zeichne deren Interaktionen mit Dokumenten bis hinunter zu einzelnen Zeichen und Zeitstempeln auf. KPMG habe dem FRC außerdem einen hochrangigen Überblick über das Experiment gegeben.
KPMG weitet das Projekt auf bis zu 20 größere Prüfungen aus
Das Projekt soll auf bis zu 20 größere Prüfungen ausgeweitet werden, und KPMG hofft, seinen Kunden schließlich KI-basierte Prüfungen anzubieten. Noch ist die erforderliche Technologie nach Einschätzung von Burnet aber nicht in dem benötigten Umfang verfügbar, um Tausende von Prüfungen durchzuführen. Zudem könnten einige Unternehmen den Dienst nicht nutzen wollen, und nur wenige verfügten derzeit über „saubere" genug Daten, mit denen KI-Agenten arbeiten könnten.
Für deutsche Anleger ist das Experiment vor allem deshalb relevant, weil KPMG zu den vier großen Prüfungsgesellschaften zählt, die weltweit die Abschlüsse großer Konzerne testieren. Sollte sich die KI-gestützte Prüfung durchsetzen, könnte das die Kostenstruktur und die Personalplanung der Branche verändern. Ob und in welchem Umfang niedrigere Prüfungskosten an die Mandanten weitergegeben werden, ließ KPMG bislang offen.
