Rechtsrecherche-KI mit belegten Quellen: Gesetze und Urteile über Jurisdiktionen hinweg

Was zitationsgestützt wirklich bedeutet

Die meisten Tools, die sich selbst als Legal AI für die Recherche bezeichnen, tun eines von zwei sehr unterschiedlichen Dingen. Die erste Art schreibt eine Antwort aus dem, was das Modell bereits während des Trainings aufgenommen hat. Es klingt autoritär und liefert Ihnen Zitate, aber diese Zitate sind generierter Text, keine abgerufenen Aufzeichnungen. Die zweite Art führt eine tatsächliche Suche in einer Datenbank mit Gesetzen und Präzedenzfällen durch, ruft die passenden Dokumente ab und antwortet auf der Grundlage dessen, was sie gefunden hat. Nur die zweite Art ist in einem sinnvollen Sinne zitationsgestützt.

Der Unterschied ist nicht akademisch. Es ist der Unterschied zwischen einem Zitat, das Sie anklicken können, und einem Zitat, bei dem Sie beten müssen. Ein zitationsgestütztes System verknüpft jeden Rechtsanspruch mit einer Quelle, die es tatsächlich geöffnet hat. Wenn die Quelle nicht vorhanden ist, sagt die ehrliche Version des Systems dies, anstatt die Lücke mit etwas Plausiblem zu füllen.

Wo die Legal AI-Forschung versagt

Die erschreckende Zahl ist real. Eine Stanford-Studie aus dem Jahr 2024 maß Halluzinationsraten von 43% für GPT-4, 33% für Westlaws Legal AI-Forschung und 17% für Lexis+. Eine separate Datenbank verfolgt inzwischen mehr als 1.000 Gerichtsverfahren, in denen Anwälte von Legal AI erfundene Zitate eingereicht haben, und einige von ihnen wurden mit Geldstrafen belegt. Abrufbasierte Tools reduzieren die Rate. Sie eliminieren sie nicht vollständig.

Es gibt zwei Arten von Fehlern, und nur eine davon ist leicht zu erkennen. Der offensichtliche ist der erfundene Fall, ein Zitat, das sich nirgendwo auflösen lässt. Sie klicken darauf, nichts lädt, Sie verwerfen es. Frontier-Modelle im Jahr 2026 sind tatsächlich recht gut darin, sich zu weigern, solche zu erfinden, wenn sie nach etwas Unmöglichem gefragt werden. Wir haben dies direkt geprüft und das Modell lehnte vier von vier gefälschten Referenzen ab. Wir haben das Experiment in warum Legal AI gefälschte Zitate halluziniert beschrieben.

Der gefährliche ist subtiler. Es ist ein echtes, anklickbares Zitat, das mit dem falschen Gesetz verknüpft ist. Der Link führt zu einer echten Vorschrift, alles sieht legitim aus, und Sie haben Ihr Argument gerade auf dem falschen Gesetz aufgebaut. Verifizierung bedeutet normalerweise zu prüfen, ob der Link funktioniert, und dieser Link funktioniert. Das ist der Fehler, der die Überprüfung überlebt und in einer Einreichung landet. Zitationsgestützter Abruf ist die Verteidigung, da die Antwort aus dem Dokument erstellt wird, das tatsächlich abgerufen wurde, und nicht nachträglich aus dem Gedächtnis rekonstruiert.

Der ehrliche Benchmark

Wir beanspruchen nicht, die juristische Recherche uneingeschränkt zu gewinnen, und die Daten lassen uns nicht so tun, als ob es anders wäre. Bei einem unabhängigen Legal AI-Benchmark mit 50 Aufgaben misst die Kategorie juristische Recherche den Abruf von Gesetzen und Präzedenzfällen, die Zuverlässigkeit von Zitaten und die Halluzinationsresistenz. Hier landen die Recherche-Tools.

Klartext. LexisNexis führt mit 46 Punkten, und für die US-amerikanische Common-Law-Forschung anhand eines proprietären Fallrechtkorpus verdient es sich diese Führung. HAQQ liegt bei 43 Punkten, gleichauf mit Perplexity auf dem zweiten Platz, fest in den Top Drei. Das ist die ehrliche Einschätzung: hervorragend, nicht der erste Platz, bei der globalen Forschungsaufgabe.

Das Bild dreht sich, sobald man das US-amerikanische Common Law verlässt. Fast jeder große Legal AI Benchmark basiert auf englischsprachigen Common-Law-Aufgaben, doch das Zivilrecht regelt mehr als 60 % der Welt, und die juristische Arbeit in der MENA-Region erfolgt auf Arabisch in zivilrechtlichen Systemen. In unserem Zivilrechts- und MENA-Benchmark, HAQQ-LAB, belegt HAQQ den ersten Platz bei der Einhaltung der Gerichtsbarkeit und der arabischen juristischen Argumentation, wo allgemeine Tools versagen. Wir erläutern dies im Zivilrechts-Legal AI Benchmark. Wenn Ihre Recherche Gesetzestexte und Fallrecht aus dem Golf, der Levante oder Nordafrika betrifft, ist das Tool, das im US-amerikanischen Common Law gewinnt, nicht das Tool, das Ihren Fall gewinnt.

Wie HAQQ anders recherchiert

Justinian, die Engine hinter HAQQ, ist darauf ausgelegt, Informationen abzurufen, bevor sie antwortet. Sie durchsucht echte juristische Quellen, zieht die Dokumente heran und begründet die Antwort mit dem, was sie gefunden hat, sodass Zitate auf Aufzeichnungen verweisen und nicht auf die Erinnerung des Modells. Wenn sie keine Unterstützung finden kann, ist sie darauf ausgelegt zu sagen, dass sie es nicht weiß, anstatt eine Quelle zu erfinden. Dieses einzige Verhalten, die Bereitschaft, nichts zurückzugeben, ist das klarste Signal dafür, dass ein Recherchetool tatsächlich fundiert ist.

Die Tiefe im arabischen und zivilen Recht ist keine Übersetzungsebene, die auf ein englisches Modell aufgesetzt wurde. Sie ist in die Engine trainiert, weshalb HAQQ Gesetzesreferenzen über Jurisdiktionen hinweg hält, die generische Assistenten vermischen. Für MENA-Kanzleien ist das der einzige Grund, warum das Tool existiert.

Wie man eine Legal AI für die Recherche wählt

• Fragen Sie, ob es abruft oder sich erinnert. Wenn es nicht auf die spezifische Quelle verweisen kann, die es durchsucht hat, sind seine Zitate Text, keine Aufzeichnungen.
• Testen Sie es mit einer Frage, deren Antwort Sie bereits kennen, in Ihrer eigenen Gerichtsbarkeit. Achten Sie darauf, ob der zitierte Gesetzestext tatsächlich das aussagt, was das Tool behauptet.
• Prüfen Sie, ob es sagen kann: „Ich weiß es nicht.“ Ein Tool, das immer eine Antwort liefert, ist ein Tool, das eine erfinden wird.
• Passen Sie das Tool an Ihr Recht an. LexisNexis führt bei der US-amerikanischen Common-Law-Forschung; HAQQ führt bei der arabischen, MENA- und zivilrechtlichen Forschung. Wählen Sie nicht das falsche Tool für Ihr Rechtsgebiet.
• Bestätigen Sie die Datenhaltung. Forschung berührt oft privilegierte Fakten, daher sollte das Tool nicht mit Ihren Eingaben trainieren und sollte innerhalb der Privilegien deploybar sein.

Wichtige Erkenntnisse

• Zitationsgestützt bedeutet, dass das Tool echte Quellen abruft und jeden Anspruch verlinkt, anstatt Zitate aus dem Gedächtnis zu generieren.
• HAQQ erzielt 43/50 Punkte in der Rechtsrecherche, gehört zu den Top 3 und liegt auf dem zweiten Platz; LexisNexis führt im US-amerikanischen Common Law mit 46.
• HAQQ steht an erster Stelle für die Recherche im arabischen, MENA- und Zivilrecht - die Rechtsordnungen, die die meisten Benchmarks ignorieren.
• Die relevante Halluzination ist ein echtes Zitat zum falschen Gesetz, und geerdete Abfrage ist die Verteidigung.
• Passen Sie das Tool an Ihre Rechtsordnung an und vertrauen Sie einem Tool mehr, wenn es sagen kann, dass es etwas nicht weiß.

Quellen und weitere Lektüre

• Warum Legal AI falsche Zitate halluziniert
• Der zivilrechtliche Legal AI Benchmark
• HAQQ Legal AI Chat
• Die Justinian engine

HAQQ bietet rechtliche Informationen und Technologie, nicht regulierte Rechtsberatung. Überprüfen Sie jede von der KI bereitgestellte Quelle anhand der Primärquelle und konsultieren Sie einen zugelassenen Anwalt in Ihrer Gerichtsbarkeit für alle haftungsrelevanten Angelegenheiten.