Skip to content
    HAQQ
    • Preise
    Kostenlos starten
    Kostenlos startenDemo buchen
    Einloggen
    1. Startseite
    2. Blog
    3. KI-Halluzinationen im Recht: 1,313 Gerichtsverfahren - Tendenz steigend
    Zurück zum BlogKI & Rechtstechnologie

    KI-Halluzinationen im Recht: 1,313 Gerichtsverfahren - Tendenz steigend

    1,313 Gerichtsverfahren, 496 sanktionierte Anwälte, fünf Durchsetzungspfade in 106 Ländern. Der globale Report zu KI-Halluzinationen im Recht.

    May 19, 2026
    45 Min. Lesezeit
    |
    HAQQ Legal AI
    KI-Halluzinationen im Recht: 1,313 Gerichtsverfahren  -  Tendenz steigend

    Version 5 — Primärquellen-Intelligence-Bericht. Jede zitierte Gerichtsentscheidung und jedes zitierte Gesetzesinstrument wurde direkt aus der Live-Datenbank von Legal Data Hunter abgerufen — 19,8 Mio. Dokumente, 106 Länder, 686 Quellen. Über 460 API-Aufrufe in 18 Recherche-Batches. Jede Quelle ist unter den angegebenen URLs unabhängig überprüfbar.

    Zusammenfassung

    Generative KI hat die Gerichtssäle der Welt erreicht. Und das nicht leise. Stand April 2026 haben Forscher 1.313 Gerichtsverfahren dokumentiert, in denen KI-generierter Inhalt — erfundene Fälle, erfundene Zitate, falsche Zitate aus echten Urteilen — bei Gerichten und Tribunalen eingereicht wurde. Davon betrafen 496 lizenzierte Anwälte. Finanzielle Sanktionen erreichten in einzelnen Verfahren 55.597 US-Dollar — eine Verzehnfachung gegenüber den ersten Sanktionen von 2024.

    Wichtige Fakten

    • Stand April 2026 sind 1.313 Gerichtsverfahren mit KI-erfundenem Inhalt dokumentiert; 496 betrafen lizenzierte Anwälte, mit Sanktionen in Einzelverfahren von bis zu 55.597 US-Dollar.
    • Die Sanktionen sind in 18 Monaten um das 11-Fache gestiegen: von 5.000 US-Dollar (2023) auf 55.597 US-Dollar (2025).
    • Stanford dokumentierte Fehlerquoten von 69-88 % bei allgemeinen LLMs für juristische Anfragen, 34 %+ bei Westlaw AI-Assisted Research, 17 %+ bei Lexis+ AI.

    Im Vereinigten Königreich, in Singapur, Kanada, Australien, Argentinien, der EU, Korea, Italien, Norwegen, Frankreich und den Vereinigten Staaten bildet sich ein konvergenter rechtlicher und regulatorischer Rahmen um ein einziges Prinzip: Die berufliche Pflicht, KI-Ergebnisse vor Erreichen eines Gerichts zu verifizieren, ist absolut, nicht delegierbar und wird bereits durchgesetzt.

    Der zentrale Befund: Die Halluzinationskrise legt eine strukturelle Diskrepanz zwischen generischer KI und den evidenzrechtlichen Anforderungen der juristischen Praxis offen. Die gerichtliche und gesetzgeberische Antwort ist zu einer einzigen architektonischen Anforderung konvergiert: KI-Systeme im Rechtswesen müssen Ergebnisse liefern, die auf verifizierte Primärquellen rückführbar, rechtsraumbewusst und auditierbar sind. Das ist keine Trainingsanweisung. Das ist eine Design-Spezifikation.

    Fünf Durchsetzungsstränge laufen inzwischen parallel. Die ersten vier waren bereits in früheren Versionen dokumentiert: berufsrechtliche Haftung, Compliance-Haftung nach dem EU AI Act, verbraucherschutzrechtliche Durchsetzung und DSGVO-/Datenschutzhaftung. Ein fünfter Strang ist neu hinzugekommen: die EU-Produkthaftungsrichtlinie 2024/2853 (Oktober 2024), die erstmals eine verschuldensunabhängige, strikte Produkthaftung für Entwickler KI-gestützter, fehlerhafter Softwareprodukte einführt.

    Ein völlig neuer regionaler Rechtsprechungskorpus ist aus Argentinien entstanden. Zwischen August und November 2025 sanktionierten mehrere argentinische Provinz-Berufungsgerichte unabhängig voneinander Anwälte für die Einreichung KI-halluzinierter Zitate in Verfahren. Argentiniens Gerichte kamen durch unabhängige Argumentation zu denselben dogmatischen Schlüssen wie London, Singapur und Vancouver. Die Halluzinationskrise ist damit auch in Lateinamerika auf Berufungsebene dokumentiert.

    Teil I: Das Lagebild — Quantitative Analyse

    Die 11-fache Sanktionseskalation

    Sanktionsverlauf: 5.000 US-Dollar (2023) → 55.597 US-Dollar (2025) = 11-fache Eskalation in 18 Monaten. Der gesamte Rahmen von der ersten Gerichtsentscheidung (Februar 2024) bis zur Aufsichtshaftung (November 2025–März 2026) umfasst 22 Monate. Die gesetzgeberische Ebene folgte innerhalb von 12 Monaten. Der verbraucherschutzrechtliche Durchsetzungsstrang entstand unabhängig davon im selben Zeitraum. Argentiniens Berufungsgerichte schlossen sich zwischen August und November 2025 dem gerichtlichen Durchsetzungskorpus an, ohne jeden internationalen Koordinationsmechanismus.

    Die geografische Verbreitung der Durchsetzung

    Die primäre Durchsetzungsachse — London, Singapur, Vancouver, Sydney und nun Buenos Aires — erstreckt sich über die gesamte Common-Law-Welt und reicht bis in Civil-Law-Rechtsräume hinein. Alle verbindlichen gerichtlichen Standards in der Common-Law-Welt bis März 2026 stammen von obersten Gerichten. Die EU, Korea und Dänemark bauen die gesetzliche Ebene auf. Italien hat einen völlig eigenständigen verbraucherschutzrechtlichen Durchsetzungsstrang geschaffen. Argentinien zeigt die unabhängige gerichtliche Konvergenz der Civil-Law-Welt.

    Analyse nach Gerichtsebene: ein Rahmenwerk der obersten Instanzen

    Keine der zentralen Entscheidungen stammt von einem unter- oder erstinstanzlichen Gericht. Der Rahmen wird in jedem Rechtsraum auf der höchstverfügbaren Ebene festgelegt: Divisional Court (UK), High Court (Singapur), Supreme Court (British Columbia), Federal Court (Australien), Provinz-Berufungsgerichte (Argentinien). Die Rechtsprechung des EuGH zu automatisierten Entscheidungen und deren Anwendung durch den österreichischen VwGH verleihen dem DSGVO-Strang verbindliche Autorität in allen 27 EU-Mitgliedstaaten.

    Die Verschiebung zur Aufsichtshaftung

    Sowohl [2026] UKUT 81 (UK) als auch [2026] SGHC 49 (Singapur), vier Monate auseinander und in unterschiedlichen Rechtsräumen entschieden, verlagerten unabhängig voneinander die Haftung von der Person, die die Halluzination erzeugt hat, auf die Aufsichtskette. Die beiden Entscheidungen stimmen miteinander überein, obwohl sie unabhängig voneinander getroffen wurden.

    Die neue Regel: Ein Vorgesetzter, der die KI-Ausgabe eines Nachwuchsjuristen nicht prüft, trägt mehr Verantwortung, nicht weniger, als derjenige, der die Halluzination erzeugt hat.

    Teil II: Der primärrechtliche Befund

    Der grundlegende UK-Fall: R (Ayinde) v Haringey [2025] EWHC 1383

    Frei verfügbare generative KI-Tools, trainiert auf einem großen Sprachmodell wie ChatGPT, sind nicht in der Lage, verlässliche Rechtsrecherche zu betreiben. Solche Tools können scheinbar kohärente und plausible Antworten auf Anfragen erzeugen, doch diese kohärenten und plausiblen Antworten können sich als vollständig falsch erweisen.

    Das Gericht definierte „autoritative Quellen" konkret: die Regierungsdatenbank für Gesetzgebung, die Datenbank des National Archives für Gerichtsurteile, die offiziellen Law Reports und die Datenbanken renommierter Rechtsverlage. Diese Liste beschreibt im Grunde, wie ein verifizierter juristischer KI-Korpus aussieht.

    Der Meilenstein zur Aufsichtshaftung: UKUT 81 (IAC) [2026]

    Diese Entscheidung eines dreiköpfigen Upper Tribunal begründet vier ineinandergreifende Standards: Aufsichtshaftung (Vorgesetzte sind stärker verantwortlich als Nachwuchsjuristen), Bruch der Mandantenvertraulichkeit beim Hochladen in Open-Source-KI, eine neue prozessuale Wahrheitserklärungspflicht und eine aufsichtsrechtliche Meldung als Standardfolge.

    Vertrauliche Dokumente in ein Open-Source-KI-Tool wie ChatGPT hochzuladen bedeutet, diese Informationen öffentlich ins Internet zu stellen und damit die Mandantenvertraulichkeit zu brechen und das anwaltliche Privileg aufzugeben.

    Singapur: doppelte persönliche Kostenfolgen — Tan Hai Peng v Tan Cheong Joo [2026] SGHC 49

    Entschieden 37 Tage vor diesem Bericht. Richter S Mohan verhängte persönliche Kostenanordnungen sowohl gegen Herrn Sidhu (den Nachwuchsjuristen, der den Inhalt erzeugte) als auch gegen Herrn Goh (den Partner, der ohne Prüfung unterzeichnete). Die Verteidigung des aufsichtführenden Partners — „Zeitdruck und seine Arbeitsbelastung" — wurde zurückgewiesen.

    Generative KI verändert den Anwaltsberuf in einer Weise, die man treffend als nichts weniger als einen radikalen Wandel bezeichnen kann. Während der technologische Fortschritt, den GenAI mit sich gebracht hat, an sich nicht unwillkommen ist, verlangt seine Integration in die Rechtspraxis eine entsprechende Weiterentwicklung der beruflichen Verantwortung.

    Der argentinische Rechtsprechungskorpus: Lateinamerikas unabhängige Konvergenz

    Zwischen August und November 2025 entwickelten und wendeten mehrere argentinische Provinz-Berufungsgerichte unabhängig voneinander eine Doktrin zu KI-Halluzinationen in der Rechtspraxis an. Der Korpus wurde aus AR/SAIJ abgerufen — Argentiniens nationaler Rechtsdatenbank — und stellt die erste dokumentierte lateinamerikanische Durchsetzung auf Berufungsebene dar.

    Si bien el uso de chatbots de inteligencia artificial generativa constituye una herramienta que puede ser válidamente empleada en el trabajo cotidiano, sus resultados deben necesariamente ser cotejados siempre toda vez que se verifica la existencia de las denominadas alucinaciones.

    Übersetzung: „Auch wenn die Nutzung generativer KI-Chatbots ein Werkzeug darstellt, das legitim in der täglichen Arbeit eingesetzt werden kann, müssen seine Ergebnisse angesichts der Existenz sogenannter Halluzinationen zwingend immer überprüft werden." Der Zusatz „siempre" (immer) schließt jedes Argument einer selektiven Überprüfung aus.

    Der argentinische Standard könnte anspruchsvoller sein als der angelsächsisch-commonwealth-rechtliche. Die Standards in UK und Singapur verlangen Verifizierung; der argentinische Standard verlangt zusätzlich eine „Pflicht, die Grenzen" von KI-Tools zu kennen — eine eigenständige und potenziell weiterreichende Pflicht. Argentiniens 14 dokumentierte Fälle umfassen die Aufhebung einer Verurteilung, bei der ein Richter KI zur Beweiswürdigung einsetzte, ohne dies offenzulegen — ein Verstoß gegen das rechtliche Gehör.

    EuGH: automatisierte Entscheidungsfindung nach Art. 22 DSGVO

    Der EuGH hat die dogmatische Frage in zwei wegweisenden Urteilen geklärt. C-634/21 (Dezember 2023): Wenn eine Partei ihre Entscheidung „maßgeblich" auf einen automatisiert erzeugten Wahrscheinlichkeitswert stützt, stellt die Erstellung dieses Werts eine automatisierte Entscheidungsfindung im Sinne von Art. 22 dar — selbst wenn ein Mensch die formale Endentscheidung trifft. C-203/22 (Februar 2025) bestätigte dies und erweiterte es auf KI zur Risikobewertung in der Versicherung.

    Ein juristisches KI-System, das Prozessrisiko-Scores oder Compliance-Bewertungen erzeugt — auf die sich ein Anwalt „maßgeblich" verlässt — fällt unter Art. 22. Der Mensch, der die KI-Ausgabe erhält, bietet keinen sicheren Hafen. Diese Pflicht gilt SCHON JETZT nach geltender DSGVO.

    Teil III: Der EU AI Act — 16 Wochen bis zur vollständigen Durchsetzung

    Der EU AI Act (Verordnung 2024/1689 — 594.453 Zeichen) klassifiziert juristische Recherche-KI als Hochrisiko-KI nach Anhang III. Die Ausnahme setzt voraus, dass das KI-System „eine enge verfahrenstechnische Aufgabe" erfüllt oder „das Ergebnis einer zuvor abgeschlossenen menschlichen Tätigkeit verbessert". Allgemeine juristische Recherche-KI erfüllt keine dieser Ausnahmen.

    Höchststrafen: 30 Mio. € oder 6 % des weltweiten Jahresumsatzes bei verbotener KI-Nutzung; 20 Mio. € oder 4 % bei sonstigen Hochrisiko-Verstößen. Die EU baut diesen Rahmen bereits seit 2017 auf — 9 Jahre gesetzgeberisches Signal.

    Teil IV: Der verbraucherschutzrechtliche Strang

    Italiens Wettbewerbsbehörde AGCM eröffnete Verfahren PS12942 gegen DeepSeek und PS12968 gegen Mistral AI wegen desselben Vorwurfs: unzureichende Offenlegung des Halluzinationsrisikos als unlautere Geschäftspraktik nach dem italienischen Verbrauchergesetzbuch.

    DeepSeek hätte nicht ausreichend klar, unmittelbar und verständlich darüber informiert, dass Nutzer seiner KI-Modelle auf sogenannte „Halluzinationen" stoßen könnten: Situationen, in denen das KI-Modell Ausgaben mit ungenauen, irreführenden oder erfundenen Informationen erzeugt.

    Ein generischer, nur auf Englisch verfasster Haftungsausschluss („KI-generiert, nur zu Referenzzwecken") wurde als rechtlich unzureichend eingestuft. Sowohl die Allgemeinheit der Formulierung als auch die sprachliche Unzugänglichkeit für italienischsprachige Verbraucher wurden als Gründe für die Unzulänglichkeit angeführt.

    Italiens Garante: der weltweit aktivste KI-DSGVO-Durchsetzer

    Italiens Datenschutzbehörde Garante hat die umfangreichste KI-Durchsetzungsbilanz aller nationalen Aufsichtsbehörden aufgebaut. Sieben Entscheidungen zwischen 2022 und 2025: ChatGPT-Verbot (März 2023 — erste Maßnahme einer westlichen Datenschutzbehörde gegen ein generatives KI-LLM, unter Berufung auf den Richtigkeitsgrundsatz von Art. 5(1)(d) DSGVO), 20-Mio.-€-Bußgeld gegen Clearview AI, Anordnung gegen die Companion-KI Replika, DeepSeek-Verbot (Tage nach dem Launch), Notfallanordnung gegen die Deepnude-App ClothOff und umfassende Deepfake-Leitlinien.

    Das Recht auf Berichtigung KI-erfundener Informationen über eine Person wurde 2023 formal im italienischen Datenschutzrecht verankert. Eine KI-Halluzination über eine Person ist selbst ein DSGVO-Verstoß, unabhängig von jeder Sicherheitsverletzung oder unbefugtem Zugriff.

    FTC-Verbraucherschutz: das US-Pendant

    Die FTC hat eine parallele Durchsetzungsbilanz nach Section 5 des FTC Act aufgebaut. Zentrale Maßnahmen: DoNotPay („der weltweit erste Roboter-Anwalt" — Falschdarstellung von KI-Rechtsfähigkeit, Verbrauchererstattungen angeordnet), Rite Aid (diskriminierende KI-Gesichtserkennungshalluzination = unlautere Praktik, 5-jähriges Verbot), Air.ai (KI-Identitätstäuschung bei Anrufen) und Content at Scale AI (übertriebene Genauigkeitsversprechen).

    Die FTC-Bilanz bestätigt, dass die fehlerhafte Darstellung der Grenzen von KI nach FTC Act §5 unabhängig davon verfolgbar ist, ob der US-Kongress ein umfassendes Bundesgesetz zu KI erlässt.

    HAQQ AI kostenlos testen

    Erleben Sie KI-gestützte juristische Recherche und Entwurf

    Der US-Bundeskonflikt um KI-Regulierung

    Die Executive Order 14365 von Trump (Dezember 2025) ist der aggressivste bundesstaatliche Eingriff in die KI-Regulierung der Einzelstaaten in der US-Geschichte: eine AI Litigation Task Force zur Anfechtung einzelstaatlicher KI-Gesetze, eine Bewertung einzelstaatlicher Gesetze mit Fokus auf „belastende" Offenlegungspflichten und die Kopplung von Bundesmitteln an Konformität.

    Die Reaktion des Kongresses umfasst vier konkurrierende Vorstöße: den Algorithmic Accountability Act (HR 5511 — verpflichtende KI-Folgenabschätzungen für Rechtsdienstleistungen), den American AI Leadership and Uniformity Act (HR 5388 — 5-jähriges Moratorium für einzelstaatliche KI-Gesetze), den States' Right to Regulate AI Act (S 3557 — blockiert Bundesmittel gegen EO 14365) und den AI Civil Rights Act (HR 6356 — individuelle Rechte gegen algorithmische Diskriminierung).

    Die bundesstaatliche KI-Governance-Landschaft der USA befindet sich in einem aktiven Konflikt zwischen exekutiver Deregulierung und legislativer Rechenschaftspflicht. Für Betreiber von Legal AI ist die umsichtige Antwort, sich an EU- und italienischen Standards zu orientieren.

    Kalifornien und Texas: KI-Gesetze auf Bundesstaatenebene

    Kaliforniens AI Transparency Act (BPC §22757) verlangt eine Offenlegung, wenn KI Inhalte erzeugt, und schafft damit ein faktisches US-Pendant zu Art. 50 des EU AI Act. Texas erließ H.B. 149 (Januar 2026) und etabliert damit einen bundesstaatlichen KI-Governance-Rahmen mit OECD-orientierten Definitionen und ausdrücklichem Vorrang gegenüber lokalen KI-Regelungen — parallel zur Logik von EO 14365 auf bundesstaatlicher Ebene.

    Niederlande und Griechenland: DSGVO-Durchsetzung des Richtigkeitsgrundsatzes

    Die niederländische Datenschutzbehörde (Mai 2025) behandelt KI-Halluzinationen über Personen als DSGVO-Verstoß erster Kategorie nach Art. 5(1)(d). Eine menschliche Prüfung ist vor der Verbreitung KI-generierter personenbezogener Daten verpflichtend. Das Recht auf Berichtigung (Art. 16) gilt für KI-generierte Falschinformationen. Die Entscheidung 15/2024 der griechischen Datenschutzbehörde HDPA bestätigt, dass Einzelpersonen ihr Löschungsrecht gegenüber KI-Systemen behalten, die ihre personenbezogenen Daten verarbeiten.

    Teil V: das Fünf-Stränge-Durchsetzungsrahmenwerk

    Strang 1 — Berufsrecht: richtet sich gegen einzelne Anwälte und Vorgesetzte durch Kostenanordnungen, aufsichtsrechtliche Meldungen und Änderungen der Wahrheitserklärung. Aktiv in UK, Singapur, Kanada, Australien, Argentinien.

    Strang 2 — AI-Act-Hochrisiko-Compliance: richtet sich gegen KI-Betreiber in EU-bezogener Rechtsarbeit durch Konformitätsbewertungspflichten. Höchststrafe 30 Mio. €. Vollständige Durchsetzung in 16 Wochen.

    Strang 3 — Verbraucherschutz: richtet sich gegen KI-Entwickler, die das Halluzinationsrisiko nicht offenlegen. Laufende Verfahren gegen DeepSeek und Mistral AI (Italien), plus FTC-Durchsetzung (USA). Kein konkreter Schaden erforderlich.

    Strang 4 — Datenschutz / DSGVO: richtet sich gegen Organisationen, die juristische KI mit Gerichtsentscheidungen trainieren, die personenbezogene Daten nach Art. 9/10 DSGVO enthalten, sowie gegen Betreiber von KI-Risikobewertungssystemen nach Art. 22. Durchsetzungsbilanz des Garante (7 Entscheidungen) plus Leitlinien der niederländischen und griechischen Datenschutzbehörden.

    Strang 5 — Produkthaftung (NEU): Die EU-Richtlinie 2024/2853 begründet eine strikte Haftung für fehlerhafte KI-Softwareprodukte — ohne Verschuldensnachweis. Umkehr der Beweislast. Umsetzungsfrist für die Mitgliedstaaten: Dezember 2026.

    Nur ein System, das von Grund auf für Rechtskonformität konzipiert ist — verifizierter Quellenkorpus, DSGVO-konforme Herkunft der Trainingsdaten, dokumentierte Architektur menschlicher Aufsicht, prominente, rechtsraumspezifische Offenlegung von Halluzinationsrisiken und nachweislich fehlerfreies Produktengineering —, kann alle fünf Stränge gleichzeitig erfüllen.

    Teil VI: die Architektur-Kluft

    Die empirische Studie der Stanford University (Journal of Empirical Legal Studies, 2025) dokumentierte Fehlerquoten von 69–88 % bei allgemeinen LLMs für juristische Anfragen, 34 %+ bei Westlaw AI-Assisted Research und 17 %+ bei Lexis+ AI. Ihre Schlussfolgerung: „Anwälte könnten sich gezwungen sehen, jede einzelne Aussage und jedes Zitat zu verifizieren, was die behaupteten Effizienzgewinne zunichtemacht."

    Ein Tool, das die vollständige Verifizierung jeder Ausgabe erfordert, hat einen Nettoeffizienzgewinn von null. Die Architektur-Kluft ist kein Produktmerkmal — sie ist der Unterschied zwischen einem System, das strukturell zu konformer Rechtsarbeit fähig ist, und einem, das unabhängig von der Sorgfalt seiner Nutzung nicht konform gemacht werden kann.

    Die zehn Pflichten, die bereits gelten

    • Verpflichtende Verifizierung vor jeder Einreichung bei Gericht (Ayinde [2025]; UKUT 81 [2026]; AR/SAIJ-Korpus)
    • KI-Kompetenztraining — dokumentiert, auditierbar (EU AI Act Art. 4 — ÜBERFÄLLIG seit Februar 2025)
    • Aufsichtsführung über die KI-Nutzung von Nachwuchsjuristen (UKUT 81 [2026]; SGHC 49 [2026]; BRAK-Stellungnahme)
    • Verbot des Hochladens von Mandantendaten in Open-Source-KI (UKUT 81 [2026])
    • Konformitätsbewertung nach dem EU AI Act — 16 Wochen (Anhang III; Erwägungsgrund 61)
    • Privilegiensichere Einsatzumgebung (UKUT 81 [2026])
    • Audit-Trail von der KI-Ausgabe bis zur verifizierten Primärquelle (UKUT 81; EU AI Act Art. 12)
    • Offenlegung des Halluzinationsrisikos prominent, konkret und in der Sprache des Nutzers (AGCM PS12942/PS12968)
    • Menschliche Prüfung nach Art. 22 DSGVO bei KI-generierten rechtlichen Risikobewertungen (EuGH C-634/21; C-203/22)
    • Produktsicherheitsdokumentation und Aktualisierungspflege (EU-Richtlinie 2024/2853 — Dezember 2026)

    Fazit: fünf Stränge, ein Standard

    Die Verschiebung, die dieser Bericht dokumentiert, führt von Plausibilität hin zu Verifizierbarkeit als maßgeblichem Standard für KI in der Rechtspraxis. Gerichte in London, Singapur, Vancouver, Canberra und Buenos Aires sind — auf unabhängigen Wegen — allesamt zum selben Schluss gekommen: Eine KI-Ausgabe, die nicht auf eine verifizierte Primärquelle zurückgeführt werden kann, hat in einem Gerichtsdokument nichts zu suchen.

    Regulierungsbehörden in Rom, Oslo, Paris, Amsterdam und Athen; der EuGH in Luxemburg; der österreichische VwGH in Wien; das Europäische Parlament in Straßburg — sie alle haben weitere Ebenen hinzugefügt, jede auf einer anderen Stufe der Lieferkette und in einem anderen Durchsetzungstempo.

    Zwölf Erkenntnisse

    • 1. Sanktionen haben sich verelffacht: von 5.000 US-Dollar (2023) auf 55.597 US-Dollar (2025), mit aufsichtsrechtlichen Meldungen und Karriererisiko inzwischen als Standardfolge
    • 2. Die Haftung hat sich von Nachwuchsjuristen zu Vorgesetzten verschoben — UK, Singapur und Argentinien kamen unabhängig voneinander zu diesem Schluss
    • 3. Der Rahmen wird von obersten Gerichten geprägt: jede Entscheidung stammt von einem Divisional, High, Federal oder Berufungsgericht
    • 4. Die EU signalisiert dies bereits seit 2017: Organisationen ohne Konformitätsbewertung sind 4+ Jahre im Rückstand
    • 5. Argentinien bestätigt die Universalität: Civil-Law-Gerichte kamen durch unabhängige Argumentation zu identischen Schlüssen
    • 6. Fünf Durchsetzungsstränge laufen gleichzeitig: Berufsrecht, AI Act, Verbraucherschutz, DSGVO, Produkthaftung
    • 7. Der EuGH hat die Frage nach Art. 22 DSGVO geklärt: juristische KI-Risikobewertungen, auf die man sich „maßgeblich" verlässt, lösen SCHON JETZT Prüfungsrechte durch Menschen aus
    • 8. Der argentinische Standard ist anspruchsvoller: die „Pflicht, die Grenzen zu kennen" geht über bloße Verifizierung hinaus
    • 9. Produkthaftung ist die letzte Front: Die EU-Richtlinie 2024/2853 macht Halluzination zu einem Produktfehlerproblem mit strikter Haftung
    • 10. Italiens Garante hat die weltweit tiefste KI-DSGVO-Durchsetzungsbilanz aufgebaut: 7 Entscheidungen, die belegen, dass der Grundsatz nach Art. 5(1)(d) direkt auf KI-Halluzinationen anwendbar ist
    • 11. Die FTC-Durchsetzung bestätigt das US-Pendant zur EU-Verbraucherschutzdoktrin: DoNotPay, Rite Aid, Air.ai, Content at Scale — die fehlerhafte Darstellung der Grenzen von KI ist nach FTC Act §5 verfolgbar
    • 12. Die bundesstaatliche KI-Governance-Landschaft der USA befindet sich in einem aktiven Konflikt: EO 14365 vs. Algorithmic Accountability Act vs. AALU Act vs. States' Right to Regulate — umsichtige Compliance orientiert sich an EU-/italienischen Standards
    Das sind fünf architektonische Anforderungen. Und alle fünf sind bereits geltendes Recht.

    Methodik

    • Quelle: Legal Data Hunters Live-Primärrechtsdatenbank — 19,8 Mio. Dokumente, 106 Länder, 686 Quellen
    • Über 460 API-Aufrufe in 18 Recherche-Batches und 20+ Quellensammlungen
    • Suchmethodik: hybrides semantisches/Keyword-Matching (alpha = 0,65–0,70 für Rechtsprechung; 0,70 für Gesetzgebung)
    • Rechtsprechungsquellen: UK/FindCaseLaw (73.056), SG/eLitigation (11.253), CA/A2AJ (120.606), AU/FedCourt (298.719), AR/SAIJ (umfangreich)
    • Gesetzgebungsquellen: EU/EUR-Lex (5.001), EU/EuroParl (5.112), KR/KLRI (97.587), DK/Retsinformation (85.596)
    • Regulatorische Quellen: IT/AGCOM, IT/GarantePrivacy, NO/DTIL, FR/CNIL, NL/AP, GR/DPA, US/FTC
    • Keine Sekundärquellen in der rechtsprechungs- oder gesetzgebungsbezogenen Analyse verwendet
    • Jede zitierte Quelle unter den angegebenen URLs unabhängig überprüfbar
    • Version 5 — April 2026

    HAQQ ist ein KI-gestütztes Legal Operating System für Kanzleien, Rechtsabteilungen, Gerichte und öffentliche Institutionen in über 110 Ländern. Justinian®, HAQQs proprietäre juristische KI-Engine, liefert rechtsraumbewusste, verifizierbare Rechtsarbeit auf Basis strukturierter Rechtsontologien und verifizierter Primärquellenrecherche — nicht Textvorhersage. HAQQ betreut weltweit über 7.000 Mandanten. Konform mit ISO 27001, ISO 42001, SOC 2 Type 2.

    Weiterführende Beiträge

    • 24 % der Rechtsantworten führender Modelle zitieren Recht, das die Aussage nicht stützt
    • unser Audit der Datenbank erfundener Zitate
    • Länder-für-Länder-Tracker der KI-Regeln der Anwaltskammern
    • Rechtsraum-Treue-Benchmark für Civil-Law-Systeme
    H

    HAQQ Legal AI

    Research

    Verwandte Ressourcen

    Justinian AI EngineSecurityEnterprise

    Verwandte Artikel

    KI-Halluzinationsfälle: Der Sanktions-Tracker mit 1,598 Fällen

    KI-Halluzinationsfälle: Der Sanktions-Tracker mit 1,598 Fällen

    Nippon Life v. OpenAI: ChatGPT der unerlaubten Rechtsberatung beschuldigt

    Nippon Life v. OpenAI: ChatGPT der unerlaubten Rechtsberatung beschuldigt

    Legal-AI-Halluzination: Das gefälschte Zitat, das jede Prüfung besteht

    Legal-AI-Halluzination: Das gefälschte Zitat, das jede Prüfung besteht

    Häufig gestellte Fragen

    What are AI hallucinations in law?

    AI hallucinations in law are fabricated case citations, statutes, regulations or quotes that an AI confidently presents as real. Lawyers who file AI-hallucinated content without verification face sanctions, monetary fines, mandatory CLE, public reprimand and in some cases referral to bar disciplinary authorities.

    How many lawyers have been sanctioned for AI hallucinations?

    As of mid-2026, at least 496 attorneys across 1,313 court proceedings in 106 countries have been identified in published rulings involving AI-hallucinated content. Cumulative US sanctions crossed USD 55,597 in early 2026 - and the trend line is steeply upward, not flat.

    What is Mata v. Avianca?

    Mata v. Avianca (S.D.N.Y. 2023) is the case that put AI hallucinations on the legal map. Two attorneys filed a brief citing six fake cases generated by ChatGPT and were sanctioned USD 5,000 with public reprimand. It remains the most-cited reference point for courts dealing with AI-hallucinated filings.

    How can lawyers avoid AI hallucinations?

    Verify every citation against the authoritative source - never trust an AI's assertion that a case or statute exists. Use purpose-built legal AI with grounded retrieval and verifiable citations rather than consumer ChatGPT. Add a citation-check step to every workflow. Treat AI as a draft, not as the final answer.

    Which courts have issued standing orders on AI use?

    By 2026, dozens of US federal and state courts plus jurisdictions in the UK, Australia, Canada, Brazil and Argentina have issued standing orders or guidance requiring disclosure of AI use, certification that all citations were verified, or outright restrictions on certain AI use in filings. Check local rules before filing.

    Is HAQQ designed to prevent AI hallucinations?

    HAQQ grounds responses in jurisdiction-aware case law and statutes, requires verifiable citations on every claim, surfaces model uncertainty explicitly, logs every model call for audit, and gates output behind named-lawyer approval. The architecture is built so that an AI-hallucinated citation cannot silently reach a court filing.

    Was kommt als Nächstes?

    HAQQ AI kostenlos testen

    Erleben Sie KI-gestützte juristische Recherche und Entwurf

    ROI berechnen

    Sehen Sie, wie viel Zeit und Geld HAQQ Ihrer Kanzlei spart

    380+ juristische Prompts durchsuchen

    Sofort einsatzbereite Prompts für jede juristische Aufgabe

    Zurück zum Blog

    Vorheriger Artikel

    Beste KI für juristische Recherche: 3 Modelle, 100 echte Fragen

    Nächster Artikel

    Large Language Models für Anwälte: Der Leitfaden 2026

    Setzen Sie das ein

    Stellen Sie HAQQ die Frage, die dieser Artikel bei Ihnen aufgeworfen hat.

    HAQQ across all devices
    HAQQ Legal AI Platform Logo

    Ihr juristischer KI-Zwilling und Kanzleimanagement-System für Entwurf, Abrechnung und Gewinnen.

    Download on theApp StoreGet it onGoogle Play

    Dokumentationen

    • Docs wird in einem neuen Tab geöffnet
    • Erste Schritte wird in einem neuen Tab geöffnet
    • Presse wird in einem neuen Tab geöffnet
    • Produkt-Updates wird in einem neuen Tab geöffnet
    • Status wird in einem neuen Tab geöffnet
    • Sicherheit
    • FAQ wird in einem neuen Tab geöffnet
    • Community wird in einem neuen Tab geöffnet
    • Support wird in einem neuen Tab geöffnet

    Academy

    • Kurs wird in einem neuen Tab geöffnet
    • Skills wird in einem neuen Tab geöffnet
    • Klauseln wird in einem neuen Tab geöffnet
    • Prompt-Bibliothek wird in einem neuen Tab geöffnet
    • Tools wird in einem neuen Tab geöffnet
    • Research Hub wird in einem neuen Tab geöffnet
    • Dokumente wird in einem neuen Tab geöffnet

    Website

    • eFirm
    • Juristischer KI-Chat
    • Mobile App
    • Justinian KI-Engine
    • HAQQ eBar
    • HAQQ eWallet
    • Preise
    • Vergleichen Sie uns
    • Lösungen
    • Blog
    • Team kennenlernen
    • Mach mit wird in einem neuen Tab geöffnet
    App öffnen
    • Sprachenar en fr es it de pt
    • Kontaktinfo@haqq.ai
    • Statusbetriebsbereit·fundiert
    • Nutzungsbedingungen
    • Datenschutzrichtlinie
    • Cookie-Richtlinie
    • Datenverarbeitung wird in einem neuen Tab geöffnet
    • humans.txt wird in einem neuen Tab geöffnetlawyers.txt wird in einem neuen Tab geöffnetsecurity.txt wird in einem neuen Tab geöffnet
    © 2026 HAQQ Inc. Alle Rechte vorbehalten.Produkt intern von HAQQ entwickelt. Website mit modernen Web-Tools gebaut.

    Sanction Escalation

    11× in 18 months

    2023 — Mata v. Avianca$5,000
    2024 — Park v. Kim$11,000
    2025 — AR/SAIJ corpusAppellate sanctions
    Appellate sanctions — Career risk
    2025 — UKUT 81Dual referral SRA+BSB
    Dual referral SRA+BSB — Career risk
    2025 — US matter$55,597
    2026 — SGHC 49Dual personal costs
    Dual personal costs — Career risk

    2026: Supervisors now more culpable than juniors (UK + SG independently)

    Global Enforcement Spread

    🇬🇧

    UK

    Ayinde, UKUT 305/81

    3
    🇸🇬

    Singapore

    SGHCR 33, SGHC 49

    2
    🇨🇦

    Canada

    Zhang v. Chen

    1
    🇦🇺

    Australia

    Luck v Secretary

    1
    🇦🇷

    Argentina

    14 appellate cases

    14
    🇺🇸

    United States

    Mata, Park + FTC

    6
    🇮🇹

    Italy

    Garante (7) + AGCM (2)

    9
    🇪🇺

    EU

    CJEU + AI Act

    2
    🇳🇱

    Netherlands

    DPA Art. 5(1)(d)

    1
    🇰🇷

    Korea

    Framework Act

    Common law + civil law convergence — no coordination mechanism

    EU AI Act Compliance

    16 WEEKS
    AI Literacy Training (Art. 4)OVERDUE
    GPAI Model Transparency (Art. 53)OVERDUE
    Risk Management System (Art. 9)Aug 2026
    Technical Documentation (Art. 11)Aug 2026
    Human Oversight (Art. 14)Aug 2026
    EU AI Database Registration (Art. 71)Aug 2026
    Product Liability Directive (2024/2853)Dec 2026

    Max penalty: €30M or 6% global turnover

    Five-Track Enforcement Framework

    Individual lawyers & supervisors

    UK, SG, CA, AU, Argentina

    Active enforcement

    Compliance Architecture Divide

    Requirement
    General
    Grounded
    Verified source citations
    Cannot generate fake cases
    Client data isolation
    Human oversight (EU AI Act)
    Audit trail to source
    Jurisdiction-aware
    Hallucination disclosure
    GDPR-compliant training
    Art. 22 human review path
    Product liability docs
    Copyright-compliant data

    Stanford Study — Error Rates

    Journal of Empirical Legal Studies, 2025

    General LLMs69–88%

    Fabricated cases, false quotes

    Westlaw AI34%+

    Incorrect summaries

    Lexis+ AI17%+

    False propositions