
Astra for Law 6.2 conquista il primo posto su Harvey's Legal Benchmark. Il tasso di allucinazione è la vera notizia.
- GoogleNUOVOGoogle: Gemini 4 Carbon2026-11-10$2.00 / $10.00 per 1M di token · 89 tok/s
- AnthropicNUOVOAnthropic: Claude Fable 5.22026-11-09$8.00 / $40.00 per 1M di token · 97 tok/s
- orcaNUOVOOrca: OrcaC2 1.02026-11-079 tok/s
- OrcaNUOVOOrcaCyber: GLM 5.3 Abliterated / Uncensored2026-11-04$3.00 / $5.00 per 1M di token · 88 tok/s
- OrcaNUOVOOrcaCyber: Hy4 Abliterated / Uncensored2026-11-04$0.80 / $1.60 per 1M di token · 134 tok/s
- OrcaNUOVOOrcaCyber: Kimi K3.1 Pro Abliterated / Uncensored2026-11-04$2.00 / $5.00 per 1M di token · 88 tok/s
- OrcaOrcaCyber: MiniMax M3.1 Flash Abliterated / Uncensored2026-10-29$0.80 / $1.60 per 1M di token · 121 tok/s
- OrcaOrcaCyber: GLM 5.3 Flash Abliterated / Uncensored2026-10-27$0.80 / $1.60 per 1M di token · 68 tok/s
- OrcaOrcaCyber: Qwen3.8 Flash Next Abliterated / Uncensored2026-10-26$0.80 / $1.60 per 1M di token · 90 tok/s
- OrcaOrcaCyber: MiMo V2.6 Flash Abliterated / Uncensored2026-10-26$0.80 / $1.60 per 1M di token · 44 tok/s
- MoonshotMoonshotAI: Kimi K3.1 Pro2026-10-2447Intelligenza
- OrcaOrcaCyber: DeepSeek V4.1 Flash Abliterated / Uncensored2026-10-23$0.80 / $1.60 per 1M di token · 195 tok/s
- minimaxMiniMax: M3.1 Flash2026-10-1929Intelligenza
- OrcaOrca: OrcaCyber Ultra 1.02026-10-17$5.00 / $10.00 per 1M di token · 119 tok/s
- deepseekDeepSeek: DeepSeek V4.1 Flash 10172026-10-1733Intelligenza
- DeepSeekDeepSeek: DeepSeek V4.1 Flash2026-10-1740Intelligenza
- OrcaOrca: OrcaCyber Zero 1.52026-10-10$3.00 / $7.50 per 1M di token · 143 tok/s
- openaiOpenAI: GPT-6.1 Sol2026-09-2955Intelligenza
- anthropicAnthropic: Claude Sonnet 5.52026-09-2855Intelligenza
- typesafeTypeSafe: Jev 1.132026-09-24$0.04 / $0.00 per 1M di token · 920 tok/s
OpenAI shipped a new version of Astra for Law on 17 November 2026 — the legal configuration built on GPT-6.2 Astra, the flagship it launched the day before — and it lands first on the Harvey LAB-AA leaderboard that Artificial Analysis maintains: 20.8% of 120 legal assignments completed to full credit, against 15.0% for GPT-6.2 Astra and 13.1% for Muse Wonder Full, the best non-OpenAI entry. The figure worth more of your attention sits two columns to the right. Astra for Law averaged 0.03 material hallucinations per assignment. Claude Opus 5.5, the next-lowest non-OpenAI model on that measure, averaged 0.59.
Both numbers describe the same 120-assignment run, which is what makes them worth reading together: a configuration that finishes the whole task slightly more often than anything else tested, and invents a substantive claim roughly twenty times less often than its strongest non-OpenAI rival. Here is what changed since September, where the claims hold, where they do not, and what access actually looks like this week.
Stessi pesi, un indice più grande e un nuovo nome da cercare
Nothing here is a new model in the sense of new weights. Astra for Law is a configuration of GPT-6.2 Astra: the base model plus an expanded legal search index plus instructions for researching a question, weighing the authorities, and writing the answer. That is the same construction OpenAI used in September, when the layer sat on GPT-6 Astra. The upgrade is threefold — a newer base model, a larger index, and another two months of tuning against practitioner feedback.
The index is the concrete part. OpenAI grew it 34% since September, adding more than 80 million URLs, for a total of over 310 million, and extended coverage to the UK, Australia and Canada. On the U.S. side it claims more than 99.9% of published precedential case law, measured against CourtListener's coverage data. Instructions are invisible and unverifiable; index size is a number you can at least hold someone to.
One practical wrinkle before any of this is useful: the thing has four names. OpenAI's post calls it Astra for Law. Artificial Analysis lists the leaderboard entry as Astra for Law 6.2 (Max). The model id — the string you select in ChatGPT once access is enabled — is gpt-6.2-astra-law. Searches for "GPT-6.2 Astra for Law" return the same product. If you are briefing a procurement team, give them the model id and the leaderboard label together, because they will not find each other otherwise.
Che cosa significa 20,8% e perché non è lo stesso di "sbagliato il 79% delle volte"
LAB-AA è l'esecuzione, da parte di Artificial Analysis, del Legal Agent Benchmark di Harvey: 120 incarichi in 24 aree del diritto, dalla redazione di scalette per le deposizioni alla revisione di contratti di locazione commerciali all'elaborazione di strategie per i cambiamenti di proprietà nelle acquisizioni. Il punteggio è tutto o niente, in un modo che conta. Una risposta ottiene il punteggio pieno solo se soddisfa ogni requisito dell'incarico e non contiene alcuna allucinazione sostanziale. Basta mancare un solo sotto-requisito, o avanzare una sola affermazione non supportata, e l'incarico ottiene zero.
Read that way, the gap between 20.8% and 15.0% is larger than five percentage points suggests: it is the difference between finishing one in five legal assignments cleanly and one in seven. OpenAI's own arithmetic checks out — 20.8 against 15.0 is a 39% relative gain, which its "nearly 40% more often" phrasing describes accurately, and 20.8 against 13.1 is 59%, again as stated.
Le dimensioni che stabiliscono se questo merita una voce di budget:
• Punteggio pieno su LAB-AA — Astra for Law 20,8% vs GPT-6,2 Astra 15,0% vs Muse Wonder Full 13,1%
• Token di output per assegnazione — circa 64.000 rispetto a 139.000 per Muse Wonder Full, una riduzione del 54% con un tasso di superamento più elevato
• Allucinazioni materiali per assegnazione — 0,03 rispetto a 0,06 per GPT-6.2 Astra e 0,59 per Claude Opus 5.5
• Allucinazioni minori per incarico — 0,06 contro 0,51 per Claude Opus 5.5, circa 8,5 volte di più
Costo per assegnazione LAB-AA con sforzo massimo — 7,33 $ rispetto a 6,35 $ per GPT-6.2 Astra e 17,93 $ per Claude Opus 5.5, secondo Artificial Analysis
• Zero allucinazioni sostanziali sui task che hanno soddisfatto i criteri all-pass, ovvero la sotto-affermazione che impedisce che i superamenti vengano ottenuti con citazioni inventate

La voce di costo merita un secondo sguardo perché va contro lo schema usuale. Con la stessa impostazione di ragionamento Max, la configurazione legale costa 0,98 $ in più per incarico rispetto al proprio modello di base, mentre ottiene 5,8 punti in più di punteggio pieno e genera il 54% in meno di token di output rispetto al modello che ha superato. Qui non stai pagando per la verbosità; stai pagando per un livello di retrieval che consente al modello di fermarsi prima. Per un team che tariffa il lavoro legale a ore, è l'unica aritmetica che conti, ed è l'unico numero nel rilascio che un concorrente non può copiare pubblicando un modello più grande.
Il tasso di allucinazione è l'affermazione con l'emivita più lunga
Artificial Analysis counted material hallucinations — claims that could mislead a reader on a substantive point — across the same 120 assignments. Astra for Law averaged 0.03 per assignment, tied with GPT-6 for the lowest rate in the comparison and roughly half the rate of regular GPT-6.2 Astra at 0.06. Claude Opus 5.5 averaged 0.59, which is the "about 20 times" figure OpenAI quotes, and the ratio holds: 0.59 divided by 0.03 is 19.7.
Un'avvertenza merita di essere dichiarata apertamente anziché sepolta, perché vale in entrambe le direzioni. A queste grandezze i conteggi sono minuscoli — 0,03 per incarico su 120 incarichi equivale in totale a una manciata di allucinazioni materiali — quindi una singola risposta errata sposta il tasso in modo sostanziale. Il rapporto di 20 volte è una differenza reale tra due esecuzioni misurate, non una costante fisica stabile, e non dovrebbe essere presentato a un cliente come garanzia di alcunché. Ciò che stabilisce è la direzione e l'ordine di grandezza approssimativo, e in un compito in cui una singola citazione inventata può porre fine a una relazione, direzione e ordine di grandezza approssimativo valgono più di una stima puntuale.
The provenance also needs separating. Artificial Analysis ran the evaluation, so the numbers are not OpenAI's, but Harvey wrote the benchmark and OpenAI worked with Harvey on the September rollout. LAB-AA is independent of the vendor, not independent of the benchmark's author. There is no third-party hallucination count on a task set that OpenAI had no hand in — that is the gap in the evidence, and it is a bigger gap than the 0.03 headline suggests.

Dove non è il primo
Il Legal Research Bench di Vals AI, valutato il 16 novembre 2026, racconta una storia meno entusiasmante. Astra for Law si colloca al sesto posto con il 53,85% di superamento totale su 208 domande che avvocati in esercizio hanno scritto sul diritto federale e statale statunitense, dietro Gemini 4 Carbon al 55,77% e un pareggio a tre al 55,29% tra Muse Spark 1.3 Max, Claude Opus 5 e Claude Fable 5.1.
Sesto con 1,9 punti di distacco, ma primo sul piano economico nel gruppo di testa:
• Precisione all-pass — Astra for Law 53,85% vs Gemini 4 Carbon 55,77% e Gemini 4 Argon 54,81%
• Costo per test: 2,75 $ contro 8,74 $ per Gemini 4 Carbon, 6,76 $ per Claude Opus 5 e 23,06 $ per Claude Fable 5.1
• Token per test — 77.740 rispetto a 5,36 milioni per Gemini 4 Carbon e 3,13 milioni per Claude Opus 5
• Durata per test — 16 minuti e 45 secondi contro 51 minuti e 53 secondi per Gemini 4 Carbon
Quell'ultima coppia è la parte che non quadra con il titolo. Non è solo più economica per risposta; è un ordine di grandezza più leggera in token rispetto ai modelli che stanno sopra, che è lo stesso segnale fornito dal conteggio dei token di LAB-AA.
OpenAI's own framing of this benchmark is also worth checking line by line. It reports 112 of 208 questions at full credit, a gain of about eight percentage points from roughly 46% in September, and 90.9% of available points once partial credit is counted. The 112 and the 90.9% reconcile with the public board. The 46% starting point does not appear on it, so the "eight points in under two months" is a comparison OpenAI is making against its own September run and cannot be re-derived from what Vals publishes today.
The most useful figure on that board is one OpenAI did not lead with. GPT-6.2 Astra, the same base model without the legal layer, scores 42.79% and sits 31st; GPT-6 Astra sits 42nd at 39.42%. So on a benchmark neither OpenAI nor Harvey controls, the configuration is worth about eleven points over its own base. That is the cleanest independent estimate of what the legal index and instructions actually add, and it is considerably larger than the 20.8-versus-15.0 gap on LAB-AA implies.

What it costs, and the number OpenAI has not published
Non c'è un prezzo per la configurazione legale. Non è un'omissione nel post di lancio; è il post di lancio. L'accesso è una richiesta, non un checkout: ogni cliente ChatGPT Enterprise può ora richiedere Astra for Law tramite il Trusted Access Program nella console di amministrazione, i team che ne dispongono già selezionano gpt-6.2-astra-law in ChatGPT, e l'accesso API avviene tramite un modulo di contatto commerciale anziché una chiave self-service.
Per la pianificazione del budget, l'unica tariffa pubblicata è quella del modello base: GPT-6.2 Astra è quotato a 8 $ per milione di token di input e 40 $ per milione di output, con input in cache a 0,40 $, una finestra di contesto di 1,05 milioni di token, un massimo di 128.000 token di output e una knowledge cutoff del 18 maggio 2026. Il record di Artificial Analysis per la configurazione law riporta gli stessi 8 $ e 40 $, ma si tratta della scheda tariffaria del modello base trasposta; va considerato come l'ipotesi di lavoro di quel laboratorio, non come una quotazione del fornitore. La cifra derivata è più onesta rispetto all'utilizzo: 7,33 $ per assegnazione LAB-AA con Max effort, il che riflette quanti token la configurazione spende effettivamente anziché quanto costa nominalmente un token.
If you are building the retrieval layer yourself instead of buying the configuration, the base models are reachable on one key through OrcaRouter, which carries GPT-6 Astra and the surrounding OpenAI line inside a 215-model catalogue at provider list price with 0% markup and automatic failover when a provider stalls mid-run. Astra for Law is not in that catalogue and there is no public endpoint that reaches it — nothing in this route is a shortcut to the configuration. What the routing layer is good for is the part you can control: a research step that must not silently drop a citation is a reasonable candidate for a second model checking the first, and that composition is a routing-DSL call rather than two vendor integrations.
Quanto di questo è lo strato legale, e quanto è solo il modello più recente?
OpenAI published one comparison that answers the question its own headline skips. On Harvey's own Legal Agent Benchmark — a different test from LAB-AA, run by Harvey rather than Artificial Analysis — GPT-6 Astra met every requirement on 4.6% of assignments, GPT-6.2 Astra tripled that to 14.6%, and the legal configuration took it to 16.2%.
Leggi la sequenza, non l'ultimo numero. Due terzi del percorso dal 4,6% al 16,2% sono progresso del modello di base: il salto da GPT-6 Astra a GPT-6.2 Astra, che qualsiasi cliente del modello di base ottiene senza dover richiedere l'accesso a nulla. La configurazione contribuisce con gli ultimi 1,6 punti, un miglioramento relativo dell'11% rispetto alla base. Si tratta di un guadagno reale ed è il guadagno che ti stanno vendendo, ma è una quota del totale inferiore a quanto lascia intendere la copertura del lancio — ed è la parte che più probabilmente sarà replicata dai livelli di retrieval proprietari di altri laboratori entro un trimestre.
Chi dovrebbe richiedere l'accesso e chi dovrebbe aspettare
Se sei all'interno di un tenant ChatGPT Enterprise e i tuoi avvocati vi svolgono già ricerche, richiedi l'accesso questa settimana. Il costo della richiesta è un modulo, e la prima cosa utile che puoi farci non è eseguire il benchmark di Harvey ma il tuo: venti incarichi tratti dalla tua attività, valutati tutto-o-niente con veto sulle allucinazioni, una rubrica che puoi costruire in un pomeriggio e che ti dirà di più sul tuo lavoro di quanto faccia un 20,8% su quello di qualcun altro.
Se sei fuori da Enterprise e fuori dal programma API, non c’è ancora nulla da acquistare — nessun listino prezzi, nessuna chiave, nessuna disponibilità tramite partner. Aspettare non ti costa nulla che un trimestre di accesso non possa risolvere, e l’assenza di un prezzo pubblicato è di per sé un’informazione: il fornitore non ha deciso quanto valga il livello legale indipendentemente dal modello di base.
Se stai costruendo, la scoperta trasferibile non è la posizione in classifica. È che la configurazione con il punteggio migliore su LAB-AA ha usato il 54% in meno di token di output rispetto al modello subito sotto di essa nella classifica. L'economia per singolo task, non il prezzo per token, è il terreno su cui si vince nell'AI legale, e uno strato di retrieval che consente al modello di smettere prima di parlare costa meno di un modello più intelligente che continua.
Three things to watch next. A published price for the configuration, which will say whether OpenAI sees this as a premium product or a feature bundled into Enterprise. API availability beyond the request form, which determines whether anyone can reproduce the numbers independently. And a non-U.S. hallucination count: the index now covers the UK, Australia and Canada, but every published figure measures U.S. law, and the failure mode that hurts most in other jurisdictions — citing the right provision while misreading it — is the one no index expansion fixes on its own.
Confrontati in questo articolo2
Rilevato da questo articolo · Benchmark: Artificial Analysis · aggiornato ogni giorno
