כרטיס כותרת עם הכיתוב 'Astra for Law 6.2' והשורה '0.03 הזיות מהותיות לכל מטלה' מעל שלושה כרטיסים המציגים 20.8% ניקוד מלא ב-Harvey LAB-AA, 0.03 הזיות מהותיות, ו-64,000 אסימוני פלט לכל מטלה, מעל כותרת תחתונה שמציינת שנתוני LAB-AA הם לפי Artificial Analysis וגם מדווחים על ידי OpenAI.
Guides & Insights

Astra for Law 6.2 תופסת את המקום הראשון ב-Harvey's Legal Benchmark. שיעור ההזיות הוא הידיעה האמיתית.

מחבר

Gideon Frost

תאריך פרסום

מודלים אחרונים · 20צפו בכל המודלים →
בנצ'מרקים: Artificial Analysis · מתעדכן יומית
חזרה לכל הפוסטים

Ope​nAI shipped a new version of Astra for Law on 17 November 2026 — the legal configuration built on GPT-6.2 Astra, the flagship it launched the day before — and it lands first on the Harvey LAB-AA leaderboard that Artificial Analysis maintains: 20.8% of 120 legal assignments completed to full credit, against 15.0% for GPT-6.2 Astra and 13.1% for Muse Wonder Full, the best non-Ope​nAI entry. The figure worth more of your attention sits two columns to the right. Astra for Law averaged 0.03 material hallucinations per assignment. Claude Opus 5.5, the next-lowest non-Ope​nAI model on that measure, averaged 0.59.

Both numbers describe the same 120-assignment run, which is what makes them worth reading together: a configuration that finishes the whole task slightly more often than anything else tested, and invents a substantive claim roughly twenty times less often than its strongest non-Ope​nAI rival. Here is what changed since September, where the claims hold, where they do not, and what access actually looks like this week.

אותם משקלים, אינדקס גדול יותר, ושם חדש לחפש

Nothing here is a new model in the sense of new weights. Astra for Law is a configuration of GPT-6.2 Astra: the base model plus an expanded legal search index plus instructions for researching a question, weighing the authorities, and writing the answer. That is the same construction Ope​nAI used in September, when the layer sat on GPT-6 Astra. The upgrade is threefold — a newer base model, a larger index, and another two months of tuning against practitioner feedback.

The index is the concrete part. Ope​nAI grew it 34% since September, adding more than 80 million URLs, for a total of over 310 million, and extended coverage to the UK, Australia and Canada. On the U.S. side it claims more than 99.9% of published precedential case law, measured against CourtListener's coverage data. Instructions are invisible and unverifiable; index size is a number you can at least hold someone to.

One practical wrinkle before any of this is useful: the thing has four names. Ope​nAI's post calls it Astra for Law. Artificial Analysis lists the leaderboard entry as Astra for Law 6.2 (Max). The model id — the string you select in ChatGPT once access is enabled — is gpt-6.2-astra-law. Searches for "GPT-6.2 Astra for Law" return the same product. If you are briefing a procurement team, give them the model id and the leaderboard label together, because they will not find each other otherwise.

מה המשמעות של 20.8%, ולמה זה לא אותו דבר כמו ״טועה ב-79% מהזמן״

LAB-AA הוא ההרצה של Artificial Analysis של מדד הסוכן המשפטי של Harvey (Legal Agent Benchmark): 120 מטלות ב-24 תחומי משפט, מהכנת מתווים לחקירות מוקדמות ועד סקירת חוזי שכירות מסחריים וגיבוש אסטרטגיה לשינויי בעלות ברכישות. הניקוד הוא הכול-או-כלום, וזה משנה. תשובה זוכה לניקוד מלא רק אם היא עומדת בכל דרישות המטלה ואינה מכילה הזיה מהותית. החמצת תת-דרישה אחת, או הצהרה אחת שאינה מבוססת, והמטלה מקבלת אפס.

Read that way, the gap between 20.8% and 15.0% is larger than five percentage points suggests: it is the difference between finishing one in five legal assignments cleanly and one in seven. Ope​nAI's own arithmetic checks out — 20.8 against 15.0 is a 39% relative gain, which its "nearly 40% more often" phrasing describes accurately, and 20.8 against 13.1 is 59%, again as stated.

הממדים שקובעים אם זה שווה שורת תקציב:

• ניקוד מלא ב-LAB-AA — Astra for Law 20.8% לעומת GPT-6.2 Astra 15.0% לעומת Muse Wonder Full 13.1%

• אסימוני פלט לכל מטלה — כ-64,000 לעומת 139,000 עבור Muse Wonder Full, הפחתה של 54% עם שיעור הצלחה גבוה יותר

• הזיות מהותיות לכל מטלה — 0.03 לעומת 0.06 עבור GPT-6.2 Astra ו-0.59 עבור Claude Opus 5.5

• הזיות קלות לכל מטלה — 0.06 לעומת 0.51 אצל Claude Opus 5.5, כ-8.5 פעמים יותר

• עלות לכל הקצאת LAB-AA במאמץ מקסימלי — ‏$7.33 לעומת ‏$6.35 עבור GPT-6.2 Astra ו-‏$17.93 עבור Claude Opus 5.5, לפי Artificial Analysis

• אפס הזיות מהותיות במשימות שעמדו בקריטריוני המעבר המלא, וזו תת-הטענה שמונעת את קניית המעברים באמצעות ציטוטים מומצאים

A scoreboard titled 'Astra for Law — the scoreboard' with six rows reading 'LAB-AA full credit: 20.8%, rank 1', 'Material hallucinations: 0.03 per assignment', 'Output tokens: 64,000 per assignment', 'Vals Legal Research Bench: 53.85%, rank 6 of 99', 'Legal search index: 310M+ URLs' and 'Published API price: none', with a footer noting that LAB-AA figures are per Artificial Analysis and Vals figures per Vals AI's 16 November 2026 evaluation.

שורת העלות ראויה למבט שני, משום שהיא מנוגדת לדפוס הרגיל. באותה הגדרת חשיבה Max, התצורה המשפטית עולה ב-$0.98 יותר לכל מטלה ממודל הבסיס שלה, ובמקביל מרוויחה 5.8 נקודות יותר של ניקוד מלא ומייצרת 54% פחות אסימוני פלט מהמודל שאותו היא ניצחה. כאן אינכם משלמים על עודף מילים; אתם משלמים על שכבת אחזור שמאפשרת למודל לעצור מוקדם יותר. עבור צוות שמתמחר עבודה משפטית לפי שעה, זו האריתמטיקה היחידה שמשנה, וזה המספר היחיד בהשקה שמתחרה לא יכול להעתיק על ידי שחרור מודל גדול יותר.

שיעור ההזיות הוא הטענה בעלת זמן מחצית החיים הארוך ביותר

Artificial Analysis counted material hallucinations — claims that could mislead a reader on a substantive point — across the same 120 assignments. Astra for Law averaged 0.03 per assignment, tied with GPT-6 for the lowest rate in the comparison and roughly half the rate of regular GPT-6.2 Astra at 0.06. Claude Opus 5.5 averaged 0.59, which is the "about 20 times" figure Ope​nAI quotes, and the ratio holds: 0.59 divided by 0.03 is 19.7.

כדאי לומר הסתייגות אחת בגלוי ולא לקבור אותה, משום שהיא פועלת לשני הכיוונים. בסדרי גודל כאלה המספרים זעירים — 0.03 להקצאה על פני 120 הקצאות הם קומץ של הזיות מהותיות בסך הכול — ולכן תשובה רעה אחת משנה את השיעור באופן מהותי. יחס פי 20 הוא הבדל אמיתי בין שתי הרצות מדודות, לא קבוע פיזיקלי יציב, ואין לצטט אותו ללקוח כערובה לשום דבר. מה שהוא כן מבסס הוא כיוון וסדר גודל גס, ובמשימה שבה ציטוט מומצא אחד יכול לשים קץ לקשר, כיוון וסדר גודל גס שווים יותר מאומדן נקודתי.

The provenance also needs separating. Artificial Analysis ran the evaluation, so the numbers are not Ope​nAI's, but Harvey wrote the benchmark and Ope​nAI worked with Harvey on the September rollout. LAB-AA is independent of the vendor, not independent of the benchmark's author. There is no third-party hallucination count on a task set that Ope​nAI had no hand in — that is the gap in the evidence, and it is a bigger gap than the 0.03 headline suggests.

Screenshot of the Artificial Analysis Harvey LAB-AA evaluation page, showing the leaderboard with Astra for Law 6.2 in first place at 20.8% full credit, GPT-6.2 Astra second at 15.0%, GPT-6.2 Astra at High effort third at 13.3%, and Muse Wonder Full fourth at 13.1%, with material hallucination rates of 0.03, 0.06, 0.03 and 0.62 per assignment and costs per task of $7.33, $6.35, $3.86 and unavailable.

היכן שזה לא ראשון

Legal Research Bench של Vals AI, שהוערך ב-16 בנובמבר 2026, מציג תמונה פחות מרשימה. Astra for Law מדורגת במקום השישי עם שיעור עבר מלא של 53.85% ב-208 שאלות שעורכי דין פעילים כתבו על המשפט הפדרלי והמדינתי של ארה״ב, מאחורי Gemini 4 Carbon עם 55.77% ותיקו תלת-כיווני בשיעור 55.29% בין Muse Spark 1.3 Max, Claude Opus 5 ו-Claude Fable 5.1.

שישי בפער של 1.9 נקודות, אך ראשון בכלכלה של הקבוצה העליונה:

• דיוק במעבר מלא — Astra for Law 53.85% לעומת Gemini 4 Carbon 55.77% ו-Gemini 4 Argon 54.81%

עלות לכל בדיקה — ‏$2.75 לעומת $8.74 עבור Gemini 4 Carbon, ‏$6.76 עבור Claude Opus 5 ו-$23.06 עבור Claude Fable 5.1

• טוקנים לכל בדיקה — 77,740 לעומת 5.36 מיליון עבור Gemini 4 Carbon ו-3.13 מיליון עבור Claude Opus 5

• משך זמן לכל בדיקה — 16 דקות ו-45 שניות לעומת 51 דקות ו-53 שניות עבור Gemini 4 Carbon

הזוג האחרון הוא החלק שלא מתאים לכותרת. הוא לא רק זול יותר לכל תשובה; הוא חסכוני יותר בטוקנים בסדר גודל מהמודלים שמעליו, וזה אותו האות שספירת הטוקנים של LAB-AA סיפקה.

Ope​nAI's own framing of this benchmark is also worth checking line by line. It reports 112 of 208 questions at full credit, a gain of about eight percentage points from roughly 46% in September, and 90.9% of available points once partial credit is counted. The 112 and the 90.9% reconcile with the public board. The 46% starting point does not appear on it, so the "eight points in under two months" is a comparison Ope​nAI is making against its own September run and cannot be re-derived from what Vals publishes today.

The most useful figure on that board is one Ope​nAI did not lead with. GPT-6.2 Astra, the same base model without the legal layer, scores 42.79% and sits 31st; GPT-6 Astra sits 42nd at 39.42%. So on a benchmark neither Ope​nAI nor Harvey controls, the configuration is worth about eleven points over its own base. That is the cleanest independent estimate of what the legal index and instructions actually add, and it is considerably larger than the 20.8-versus-15.0 gap on LAB-AA implies.

Screenshot of the Vals AI Legal Research Bench leaderboard dated 16 November 2026, showing Gemini 4 Carbon first at 55.77%, Muse Spark 1.3 Max and Claude Opus 5 tied at 55.29%, Gemini 4 Argon fifth at 54.81% and Astra for Law sixth at 53.85% with a cost of $2.75 per test, alongside GPT-6.2 Astra at 42.79% in 31st place.

What it costs, and the number Ope​nAI has not published

אין מחיר לתצורה המשפטית. זו אינה השמטה בפוסט ההשקה; זהו פוסט ההשקה עצמו. גישה היא בקשה, לא תהליך רכישה: כל לקוח של ChatGPT Enterprise יכול כעת לבקש את Astra for Law דרך Trusted Access Program בקונסולת הניהול, צוותים שכבר יש להם אותו בוחרים gpt-6.2-astra-law ב-ChatGPT, וגישה ל-API עוברת דרך טופס יצירת קשר עם המכירות ולא דרך מפתח בשירות עצמי.

לצורכי תכנון תקציב, מודל הבסיס הוא התעריף המפורסם היחיד: GPT-6.2 Astra רשום במחיר של 8 דולר למיליון טוקני קלט ו-40 דולר למיליון טוקני פלט, כאשר קלט במטמון עומד על 0.40 דולר, חלון הקשר של 1.05 מיליון טוקנים, מקסימום 128,000 טוקני פלט וחתך ידע של 18 במאי 2026. הרשומה של Artificial Analysis עבור תצורת law נושאת את אותם 8 ו-40 דולר — אבל זהו כרטיס התעריפים של מודל הבסיס שהועתק לכאן, ויש להתייחס אליו כהנחת העבודה של אותה מעבדה ולא כציטוט ספק. הנתון הנגזר נאמן יותר לשימוש: 7.33 דולר לכל מטלת LAB-AA במאמץ Max effort, והוא משקף כמה טוקנים התצורה באמת מוציאה ולא כמה טוקן עולה לכאורה.

If you are building the retrieval layer yourself instead of buying the configuration, the base models are reachable on one key through OrcaRouter, which carries GPT-6 Astra and the surrounding Ope​nAI line inside a 215-model catalogue at provider list price with 0% markup and automatic failover when a provider stalls mid-run. Astra for Law is not in that catalogue and there is no public endpoint that reaches it — nothing in this route is a shortcut to the configuration. What the routing layer is good for is the part you can control: a research step that must not silently drop a citation is a reasonable candidate for a second model checking the first, and that composition is a routing-DSL call rather than two vendor integrations.

Ope​nAI published one comparison that answers the question its own headline skips. On Harvey's own Legal Agent Benchmark — a different test from LAB-AA, run by Harvey rather than Artificial Analysis — GPT-6 Astra met every requirement on 4.6% of assignments, GPT-6.2 Astra tripled that to 14.6%, and the legal configuration took it to 16.2%.

קראו את הרצף, לא את המספר האחרון. שני שלישים מהדרך מ־4.6% ל־16.2% הם התקדמות של מודל הבסיס: הקפיצה מ־GPT-6 Astra ל־GPT-6.2 Astra, שאותה כל לקוח של מודל הבסיס מקבל בלי לבקש גישה לשום דבר. התצורה תורמת את 1.6 הנקודות האחרונות, שיפור יחסי של 11% לעומת הבסיס. זהו רווח אמיתי, וזה הרווח שמוכרים לכם, אבל חלקו מתוך הסך הכול קטן מכפי שסיקור ההשקה מרמז — וזה החלק שסביר ביותר שמעבדות אחרות ישכפלו באמצעות שכבות האחזור של עצמן בתוך רבעון.

מי צריך לבקש גישה, ומי צריך להמתין

אם אתם נמצאים בתוך סביבת ChatGPT Enterprise ועורכי הדין שלכם כבר עורכים בה מחקר, בקשו גישה השבוע. עלות הבקשה היא טופס, והדבר השימושי הראשון שתוכלו לעשות איתה הוא לא להריץ את הבנצ'מרק של Harvey אלא את שלכם: עשרים מטלות מהעשייה שלכם, שנמדדות בשיטת הכול-או-כלום עם וטו על הזיות — רובריקה שתוכלו לבנות בתוך אחר צהריים ושתלמד אתכם יותר על העבודה שלכם מאשר 20.8% על זו של מישהו אחר.

אם אתה מחוץ ל־Enterprise ומחוץ לתוכנית ה־API, אין עדיין מה לקנות — אין מחירון, אין מפתח, אין זמינות דרך שותפים. ההמתנה לא עולה לך דבר שרבעון של גישה לא יתקן, והיעדר מחיר מפורסם הוא כשלעצמו מידע: הספק טרם החליט כמה שווה השכבה המשפטית באופן בלתי־תלוי במודל הבסיס.

אם אתם בונים, הממצא שניתן להעביר הוא לא מיקום בטבלת המובילים. הוא שהתצורה בעלת הניקוד הגבוה ביותר ב-LAB-AA השתמשה ב-54% פחות טוקני פלט מהמודל שמתחתיה בדירוג. הכלכלה לפי משימה, ולא מחיר לפי טוקן, היא המקום שבו ניצחון ב-AI משפטי נקבע, ושכבת שליפה שמאפשרת למודל להפסיק לדבר מוקדם יותר זולה יותר ממודל חכם יותר שממשיך לדבר.

Three things to watch next. A published price for the configuration, which will say whether Ope​nAI sees this as a premium product or a feature bundled into Enterprise. API availability beyond the request form, which determines whether anyone can reproduce the numbers independently. And a non-U.S. hallucination count: the index now covers the UK, Australia and Canada, but every published figure measures U.S. law, and the failure mode that hurts most in other jurisdictions — citing the right provision while misreading it — is the one no index expansion fixes on its own.

השוואות במאמר הזה2

זוהה מתוך המאמר הזה · בנצ'מרקים: Artificial Analysis · מתעדכן יומית