
Astra for Law 6.2 belegt Platz eins in Harveys Legal Benchmark. Die Halluzinationsrate ist die eigentliche Nachricht.
- GoogleNEUGoogle: Gemini 4 Carbon2026-11-10$2.00 / $10.00 pro 1 Mio. Tokens · 89 tok/s
- AnthropicNEUAnthropic: Claude Fable 5.22026-11-09$8.00 / $40.00 pro 1 Mio. Tokens · 97 tok/s
- orcaNEUOrca: OrcaC2 1.02026-11-079 tok/s
- OrcaNEUOrcaCyber: GLM 5.3 Abliterated / Uncensored2026-11-04$3.00 / $5.00 pro 1 Mio. Tokens · 88 tok/s
- OrcaNEUOrcaCyber: Hy4 Abliterated / Uncensored2026-11-04$0.80 / $1.60 pro 1 Mio. Tokens · 134 tok/s
- OrcaNEUOrcaCyber: Kimi K3.1 Pro Abliterated / Uncensored2026-11-04$2.00 / $5.00 pro 1 Mio. Tokens · 88 tok/s
- OrcaOrcaCyber: MiniMax M3.1 Flash Abliterated / Uncensored2026-10-29$0.80 / $1.60 pro 1 Mio. Tokens · 121 tok/s
- OrcaOrcaCyber: GLM 5.3 Flash Abliterated / Uncensored2026-10-27$0.80 / $1.60 pro 1 Mio. Tokens · 68 tok/s
- OrcaOrcaCyber: Qwen3.8 Flash Next Abliterated / Uncensored2026-10-26$0.80 / $1.60 pro 1 Mio. Tokens · 90 tok/s
- OrcaOrcaCyber: MiMo V2.6 Flash Abliterated / Uncensored2026-10-26$0.80 / $1.60 pro 1 Mio. Tokens · 44 tok/s
- MoonshotMoonshotAI: Kimi K3.1 Pro2026-10-2447Intelligenz
- OrcaOrcaCyber: DeepSeek V4.1 Flash Abliterated / Uncensored2026-10-23$0.80 / $1.60 pro 1 Mio. Tokens · 195 tok/s
- minimaxMiniMax: M3.1 Flash2026-10-1929Intelligenz
- OrcaOrca: OrcaCyber Ultra 1.02026-10-17$5.00 / $10.00 pro 1 Mio. Tokens · 119 tok/s
- deepseekDeepSeek: DeepSeek V4.1 Flash 10172026-10-1733Intelligenz
- DeepSeekDeepSeek: DeepSeek V4.1 Flash2026-10-1740Intelligenz
- OrcaOrca: OrcaCyber Zero 1.52026-10-10$3.00 / $7.50 pro 1 Mio. Tokens · 143 tok/s
- openaiOpenAI: GPT-6.1 Sol2026-09-2955Intelligenz
- anthropicAnthropic: Claude Sonnet 5.52026-09-2855Intelligenz
- typesafeTypeSafe: Jev 1.132026-09-24$0.04 / $0.00 pro 1 Mio. Tokens · 920 tok/s
OpenAI shipped a new version of Astra for Law on 17 November 2026 — the legal configuration built on GPT-6.2 Astra, the flagship it launched the day before — and it lands first on the Harvey LAB-AA leaderboard that Artificial Analysis maintains: 20.8% of 120 legal assignments completed to full credit, against 15.0% for GPT-6.2 Astra and 13.1% for Muse Wonder Full, the best non-OpenAI entry. The figure worth more of your attention sits two columns to the right. Astra for Law averaged 0.03 material hallucinations per assignment. Claude Opus 5.5, the next-lowest non-OpenAI model on that measure, averaged 0.59.
Both numbers describe the same 120-assignment run, which is what makes them worth reading together: a configuration that finishes the whole task slightly more often than anything else tested, and invents a substantive claim roughly twenty times less often than its strongest non-OpenAI rival. Here is what changed since September, where the claims hold, where they do not, and what access actually looks like this week.
Gleiche Gewichte, ein größerer Index und ein neuer Name, nach dem man suchen kann
Nothing here is a new model in the sense of new weights. Astra for Law is a configuration of GPT-6.2 Astra: the base model plus an expanded legal search index plus instructions for researching a question, weighing the authorities, and writing the answer. That is the same construction OpenAI used in September, when the layer sat on GPT-6 Astra. The upgrade is threefold — a newer base model, a larger index, and another two months of tuning against practitioner feedback.
The index is the concrete part. OpenAI grew it 34% since September, adding more than 80 million URLs, for a total of over 310 million, and extended coverage to the UK, Australia and Canada. On the U.S. side it claims more than 99.9% of published precedential case law, measured against CourtListener's coverage data. Instructions are invisible and unverifiable; index size is a number you can at least hold someone to.
One practical wrinkle before any of this is useful: the thing has four names. OpenAI's post calls it Astra for Law. Artificial Analysis lists the leaderboard entry as Astra for Law 6.2 (Max). The model id — the string you select in ChatGPT once access is enabled — is gpt-6.2-astra-law. Searches for "GPT-6.2 Astra for Law" return the same product. If you are briefing a procurement team, give them the model id and the leaderboard label together, because they will not find each other otherwise.
Was 20,8 % bedeuten und warum das nicht dasselbe ist wie „in 79 % der Fälle falsch“
LAB-AA ist Artificial Analysis' Durchlauf von Harveys Legal Agent Benchmark: 120 Aufgaben aus 24 Rechtsgebieten, vom Entwurf von Deposition-Gliederungen über die Prüfung gewerblicher Mietverträge bis hin zur Strategieentwicklung für Eigentümerwechsel bei Übernahmen. Die Bewertung erfolgt nach dem Alles-oder-nichts-Prinzip – und zwar in einer entscheidenden Hinsicht. Eine Antwort erhält die volle Punktzahl nur, wenn sie jede Anforderung der Aufgabe erfüllt undkeine wesentliche Halluzination enthält. Wird eine Teilanforderung verfehlt oder eine unbelegte Behauptung aufgestellt, wird die Aufgabe mit null Punkten bewertet.
Read that way, the gap between 20.8% and 15.0% is larger than five percentage points suggests: it is the difference between finishing one in five legal assignments cleanly and one in seven. OpenAI's own arithmetic checks out — 20.8 against 15.0 is a 39% relative gain, which its "nearly 40% more often" phrasing describes accurately, and 20.8 against 13.1 is 59%, again as stated.
Die Dimensionen, die entscheiden, ob dies einen Budgetposten wert ist:
• Volle Punktzahl bei LAB-AA — Astra for Law 20,8 % vs. GPT-6.2 Astra 15,0 % vs. Muse Wonder Full 13,1 %
• Ausgabe-Tokens pro Aufgabe – etwa 64.000 gegenüber 139.000 bei Muse Wonder Full, eine Reduzierung um 54 % bei einer höheren Bestehensrate
• Inhaltliche Halluzinationen pro Aufgabe — 0,03 gegenüber 0,06 bei GPT-6.2 Astra und 0,59 bei Claude Opus 5.5
• Geringfügige Halluzinationen pro Aufgabe — 0,06 gegenüber 0,51 bei Claude Opus 5.5, etwa 8,5-mal so viele
• Kosten pro LAB-AA-Aufgabe bei maximalem Aufwand — 7,33 $ gegenüber 6,35 $ für GPT-6.2 Astra und 17,93 $ für Claude Opus 5.5, laut Artificial Analysis
• Keine wesentlichen Halluzinationen bei Aufgaben, die die All-Pass-Kriterien erfüllten, was die Teilbehauptung ist, die verhindert, dass das Bestehen durch erfundene Zitate erkauft wird

Die Kostenzeile verdient einen zweiten Blick, denn sie läuft dem üblichen Muster zuwider. Bei derselben Max-Reasoning-Einstellung kostet die Legal-Konfiguration pro Aufgabe 0,98 $ mehr als ihr eigenes Basismodell, erzielt aber 5,8 Punkte mehr volle Punktzahl und erzeugt 54 % weniger Ausgabe-Tokens als das Modell, das sie schlägt. Hier zahlen Sie nicht für Weitschweifigkeit, sondern für eine Retrieval-Schicht, die das Modell früher aufhören lässt. Für ein Team, das juristische Arbeit nach Stunden abrechnet, ist das die einzige Rechnung, die zählt, und es ist die eine Zahl im Release, die ein Wettbewerber nicht kopieren kann, indem er ein größeres Modell ausliefert.
Die Halluzinationsrate ist die Behauptung mit der längsten Halbwertszeit.
Artificial Analysis counted material hallucinations — claims that could mislead a reader on a substantive point — across the same 120 assignments. Astra for Law averaged 0.03 per assignment, tied with GPT-6 for the lowest rate in the comparison and roughly half the rate of regular GPT-6.2 Astra at 0.06. Claude Opus 5.5 averaged 0.59, which is the "about 20 times" figure OpenAI quotes, and the ratio holds: 0.59 divided by 0.03 is 19.7.
Ein Vorbehalt verdient es, klar ausgesprochen statt verschwiegen zu werden, denn er hat zwei Seiten. Bei diesen Größenordnungen sind die Zählwerte winzig — 0,03 pro Zuweisung über 120 Zuweisungen sind insgesamt eine Handvoll substanzieller Halluzinationen —, sodass eine einzige schlechte Antwort die Rate substanziell verändert. Das 20-fache Verhältnis ist ein echter Unterschied zwischen zwei gemessenen Durchläufen, keine stabile physikalische Konstante, und es sollte einem Kunden nicht als Garantie für irgendetwas genannt werden. Was es jedoch belegt, sind Richtung und grobe Größenordnung, und bei einer Aufgabe, bei der ein erfundener Quellenverweis eine Beziehung beenden kann, sind Richtung und grobe Größenordnung mehr wert als eine Punktschätzung.
The provenance also needs separating. Artificial Analysis ran the evaluation, so the numbers are not OpenAI's, but Harvey wrote the benchmark and OpenAI worked with Harvey on the September rollout. LAB-AA is independent of the vendor, not independent of the benchmark's author. There is no third-party hallucination count on a task set that OpenAI had no hand in — that is the gap in the evidence, and it is a bigger gap than the 0.03 headline suggests.

Wo es nicht an erster Stelle steht
Der Legal Research Bench von Vals AI, ausgewertet am 16. November 2026, zeichnet ein ernüchternderes Bild. Astra for Law belegt mit einer All-Pass-Quote von 53,85 % bei 208 Fragen, die praktizierende Anwältinnen und Anwälte zum US-Bundesrecht und zum einzelstaatlichen Recht verfasst haben, den sechsten Platz – hinter Gemini 4 Carbon mit 55,77 % und einem Dreiergleichstand bei 55,29 % zwischen Muse Spark 1.3 Max, Claude Opus 5 und Claude Fable 5.1.
Sechster mit 1,9 Punkten Rückstand, aber wirtschaftlich Erster der Spitzengruppe:
• All-Pass-Genauigkeit — Astra for Law 53,85 % vs. Gemini 4 Carbon 55,77 % und Gemini 4 Argon 54,81 %
• Kosten pro Test — 2,75 $ gegenüber 8,74 $ für Gemini 4 Carbon, 6,76 $ für Claude Opus 5 und 23,06 $ für Claude Fable 5.1
• Token pro Test — 77.740 gegenüber 5,36 Millionen für Gemini 4 Carbon und 3,13 Millionen für Claude Opus 5
• Dauer pro Test — 16 Minuten 45 Sekunden gegenüber 51 Minuten 53 Sekunden für Gemini 4 Carbon
Dieses letzte Paar ist der Teil, der nicht zur Schlagzeile passt. Es ist nicht nur günstiger pro Antwort; es ist um eine Größenordnung sparsamer bei Tokens als die Modelle darüber, was dasselbe Signal ist, das die LAB-AA-Token-Zählung geliefert hat.
OpenAI's own framing of this benchmark is also worth checking line by line. It reports 112 of 208 questions at full credit, a gain of about eight percentage points from roughly 46% in September, and 90.9% of available points once partial credit is counted. The 112 and the 90.9% reconcile with the public board. The 46% starting point does not appear on it, so the "eight points in under two months" is a comparison OpenAI is making against its own September run and cannot be re-derived from what Vals publishes today.
The most useful figure on that board is one OpenAI did not lead with. GPT-6.2 Astra, the same base model without the legal layer, scores 42.79% and sits 31st; GPT-6 Astra sits 42nd at 39.42%. So on a benchmark neither OpenAI nor Harvey controls, the configuration is worth about eleven points over its own base. That is the cleanest independent estimate of what the legal index and instructions actually add, and it is considerably larger than the 20.8-versus-15.0 gap on LAB-AA implies.

What it costs, and the number OpenAI has not published
Für die juristische Konfiguration gibt es keinen Preis. Das ist kein Versehen im Launch-Post; das ist der Launch-Post. Zugang ist eine Anfrage, kein Checkout: Jeder ChatGPT Enterprise-Kunde kann jetzt Astra for Law über das Trusted Access Program in der Admin-Konsole anfragen, Teams, die es bereits haben, wählen gpt-6.2-astra-law in ChatGPT aus, und der API-Zugang läuft über ein Vertriebskontaktformular statt über einen Self-Service-Schlüssel.
Für die Budgetierung ist das Basismodell der einzige veröffentlichte Tarif: GPT-6.2 Astra wird mit 8 US-Dollar pro Million Input-Tokens und 40 US-Dollar pro Million Output-Tokens angegeben, bei zwischengespeichertem Input mit 0,40 US-Dollar, einem Kontextfenster von 1,05 Millionen Tokens, maximal 128.000 Output-Tokens und einem Wissensstand vom 18. Mai 2026. Der Eintrag von Artificial Analysis für die Law-Konfiguration führt dieselben 8 und 40 US-Dollar — doch dabei handelt es sich um die übertragene Preisliste des Basismodells, und es sollte als Arbeitsannahme dieses Labors und nicht als Herstellerangabe behandelt werden. Die abgeleitete Zahl ist ehrlicher in Bezug auf die Nutzung: 7,33 US-Dollar pro LAB-AA-Aufgabe bei Max Effort, was widerspiegelt, wie viele Tokens die Konfiguration tatsächlich verbraucht, statt was ein Token nominal kostet.
If you are building the retrieval layer yourself instead of buying the configuration, the base models are reachable on one key through OrcaRouter, which carries GPT-6 Astra and the surrounding OpenAI line inside a 215-model catalogue at provider list price with 0% markup and automatic failover when a provider stalls mid-run. Astra for Law is not in that catalogue and there is no public endpoint that reaches it — nothing in this route is a shortcut to the configuration. What the routing layer is good for is the part you can control: a research step that must not silently drop a citation is a reasonable candidate for a second model checking the first, and that composition is a routing-DSL call rather than two vendor integrations.
Wie viel davon entfällt auf die rechtliche Ebene, und wie viel ist einfach nur das neuere Modell?
OpenAI published one comparison that answers the question its own headline skips. On Harvey's own Legal Agent Benchmark — a different test from LAB-AA, run by Harvey rather than Artificial Analysis — GPT-6 Astra met every requirement on 4.6% of assignments, GPT-6.2 Astra tripled that to 14.6%, and the legal configuration took it to 16.2%.
Lies die Sequenz, nicht die letzte Zahl. Zwei Drittel des Weges von 4,6 % zu 16,2 % sind Fortschritt des Basismodells: der Sprung von GPT-6 Astra zu GPT-6.2 Astra, den jeder Kunde des Basismodells erhält, ohne Zugriff auf irgendetwas beantragen zu müssen. Die Konfiguration trägt die letzten 1,6 Punkte bei, eine relative Verbesserung von 11 % gegenüber der Basis. Das ist ein echter Gewinn, und es ist der Gewinn, der Ihnen verkauft wird, aber er macht einen kleineren Anteil des Gesamten aus, als die Berichterstattung zum Marktstart nahelegt – und er ist der Teil, der am wahrscheinlichsten innerhalb eines Quartals von den eigenen Retrieval-Schichten anderer Labs nachgebildet wird.
Wer sollte Zugriff beantragen und wer sollte warten?
Wenn Sie sich in einem ChatGPT Enterprise-Tenant befinden und Ihre Juristen dort bereits recherchieren, beantragen Sie diese Woche Zugriff. Die Kosten des Antrags sind ein Formular, und das erste Nützliche, das Sie damit tun können, ist nicht, Harveys Benchmark laufen zu lassen, sondern Ihren eigenen: zwanzig Aufgaben aus Ihrer eigenen Praxis, bewertet nach dem Alles-oder-nichts-Prinzip mit einem Halluzinations-Veto – ein Bewertungsraster, das Sie an einem Nachmittag erstellen können und das Ihnen mehr über Ihre Arbeit verrät als 20,8 % auf der eines anderen.
Wenn Sie außerhalb von Enterprise und außerhalb des API-Programms stehen, gibt es noch nichts zu kaufen – keine Preisliste, keinen Schlüssel, keine Verfügbarkeit über Partner. Das Warten kostet Sie nichts, was sich nicht durch ein Quartal Zugang beheben ließe, und das Fehlen eines veröffentlichten Preises ist selbst eine Information: Der Anbieter hat noch nicht entschieden, was die rechtliche Ebene unabhängig vom Basismodell wert ist.
Wenn Sie etwas bauen, ist die übertragbare Erkenntnis nicht die Platzierung im Leaderboard. Sie besteht darin, dass die bestbewertete Konfiguration auf {{1}}LAB-AA{{/1}} 54 % weniger Ausgabe-Tokens verbrauchte als das im Ranking darunter platzierte Modell. Die Wirtschaftlichkeit pro Aufgabe, nicht der Preis pro Token, entscheidet darüber, wer juristische KI gewinnt, und eine Retrieval-Schicht, die das Modell früher aufhören lässt zu reden, ist günstiger als ein klügeres Modell, das weiterredet.
Three things to watch next. A published price for the configuration, which will say whether OpenAI sees this as a premium product or a feature bundled into Enterprise. API availability beyond the request form, which determines whether anyone can reproduce the numbers independently. And a non-U.S. hallucination count: the index now covers the UK, Australia and Canada, but every published figure measures U.S. law, and the failure mode that hurts most in other jurisdictions — citing the right provision while misreading it — is the one no index expansion fixes on its own.
In diesem Artikel verglichen2
Aus diesem Artikel erkannt · Benchmarks: Artificial Analysis · täglich aktualisiert
