بطاقة عنوان تحمل «Astra for Law 6.2» مع السطر «0.03 هلوسة جوهرية لكل مهمة» فوق ثلاث بطاقات تعرض 20.8% من الدرجة الكاملة على Harvey LAB-AA، و0.03 هلوسة جوهرية، و64,000 رمز إخراج لكل مهمة، أعلى تذييل يشير إلى أن أرقام LAB-AA وفق Artificial Analysis وأبلغت عنها OpenAI أيضًا.
Guides & Insights

Astra for Law 6.2 يتصدر Harvey's Legal Benchmark. معدل الهلوسة هو الخبر الحقيقي.

الكاتب

Gideon Frost

تاريخ النشر

أحدث النماذج · 20عرض جميع النماذج →
المعايير: Artificial Analysis · يُحدَّث يوميًا
العودة إلى جميع المقالات

Ope​nAI shipped a new version of Astra for Law on 17 November 2026 — the legal configuration built on GPT-6.2 Astra, the flagship it launched the day before — and it lands first on the Harvey LAB-AA leaderboard that Artificial Analysis maintains: 20.8% of 120 legal assignments completed to full credit, against 15.0% for GPT-6.2 Astra and 13.1% for Muse Wonder Full, the best non-Ope​nAI entry. The figure worth more of your attention sits two columns to the right. Astra for Law averaged 0.03 material hallucinations per assignment. Claude Opus 5.5, the next-lowest non-Ope​nAI model on that measure, averaged 0.59.

Both numbers describe the same 120-assignment run, which is what makes them worth reading together: a configuration that finishes the whole task slightly more often than anything else tested, and invents a substantive claim roughly twenty times less often than its strongest non-Ope​nAI rival. Here is what changed since September, where the claims hold, where they do not, and what access actually looks like this week.

نفس الأوزان، وفهرس أكبر، واسم جديد للبحث عنه

Nothing here is a new model in the sense of new weights. Astra for Law is a configuration of GPT-6.2 Astra: the base model plus an expanded legal search index plus instructions for researching a question, weighing the authorities, and writing the answer. That is the same construction Ope​nAI used in September, when the layer sat on GPT-6 Astra. The upgrade is threefold — a newer base model, a larger index, and another two months of tuning against practitioner feedback.

The index is the concrete part. Ope​nAI grew it 34% since September, adding more than 80 million URLs, for a total of over 310 million, and extended coverage to the UK, Australia and Canada. On the U.S. side it claims more than 99.9% of published precedential case law, measured against CourtListener's coverage data. Instructions are invisible and unverifiable; index size is a number you can at least hold someone to.

One practical wrinkle before any of this is useful: the thing has four names. Ope​nAI's post calls it Astra for Law. Artificial Analysis lists the leaderboard entry as Astra for Law 6.2 (Max). The model id — the string you select in ChatGPT once access is enabled — is gpt-6.2-astra-law. Searches for "GPT-6.2 Astra for Law" return the same product. If you are briefing a procurement team, give them the model id and the leaderboard label together, because they will not find each other otherwise.

ماذا تعني نسبة 20.8%، ولماذا لا تعني الأمر نفسه «خطأً في 79% من الوقت»

LAB-AA هو تشغيل أجرته Artificial Analysis لـ Harvey's Legal Agent Benchmark: 120 مهمة في 24 مجالًا قانونيًا، من صياغة مخططات الإفادات إلى مراجعة عقود الإيجار التجارية إلى وضع استراتيجية لتغييرات الملكية في عمليات الاستحواذ. التقييم على أساس الكل أو لا شيء، وهذا أمر مهم. لا تحصل الإجابة على الدرجة الكاملة إلا إذا استوفت كل متطلبات المهمة ولم تتضمن أي هلوسة جوهرية. إذا أغفلت متطلبًا فرعيًا واحدًا، أو قدّمت ادعاءً واحدًا غير مدعوم، فستحصل المهمة على صفر.

Read that way, the gap between 20.8% and 15.0% is larger than five percentage points suggests: it is the difference between finishing one in five legal assignments cleanly and one in seven. Ope​nAI's own arithmetic checks out — 20.8 against 15.0 is a 39% relative gain, which its "nearly 40% more often" phrasing describes accurately, and 20.8 against 13.1 is 59%, again as stated.

الأبعاد التي تحدد ما إذا كان هذا يستحق بندًا في الميزانية:

• الدرجة الكاملة في LAB-AA — Astra for Law 20.8% مقابل GPT-6.2 Astra 15.0% مقابل Muse Wonder Full 13.1%

• رموز الإخراج لكل مهمة — نحو 64,000 مقابل 139,000 لـ Muse Wonder Full، أي انخفاض بنسبة 54% مع معدل نجاح أعلى

• الهلوسات الجوهرية لكل مهمة — 0.03 مقابل 0.06 لدى GPT-6.2 Astra و0.59 لدى Claude Opus 5.5

• هلوسات طفيفة لكل مهمة — 0.06 مقابل 0.51 لدى Claude Opus 5.5، أي أكثر بنحو {{1}}8.5{{/1}} مرة

• تكلفة كل مهمة LAB-AA عند أقصى جهد — 7.33 دولار مقابل 6.35 دولار لـ GPT-6.2 Astra و17.93 دولار لـ Claude Opus 5.5، وفق Artificial Analysis

• صفر هلوسات جوهرية في المهام التي استوفت معايير الاجتياز الكامل، وهو الادعاء الفرعي الذي يمنع أن تُشترى حالات الاجتياز باستشهادات مُختلقة

A scoreboard titled 'Astra for Law — the scoreboard' with six rows reading 'LAB-AA full credit: 20.8%, rank 1', 'Material hallucinations: 0.03 per assignment', 'Output tokens: 64,000 per assignment', 'Vals Legal Research Bench: 53.85%, rank 6 of 99', 'Legal search index: 310M+ URLs' and 'Published API price: none', with a footer noting that LAB-AA figures are per Artificial Analysis and Vals figures per Vals AI's 16 November 2026 evaluation.

يستحق بند التكلفة نظرة ثانية لأنه يخالف النمط المعتاد. فعند إعداد الاستدلال Max نفسه، يكلّف الإعداد القانوني 0.98 دولار أكثر لكل مهمة من نموذجه الأساسي، بينما يحقق 5.8 نقاط إضافية من الدرجات الكاملة، ويولّد رموز إخراج أقل بنسبة 54% من النموذج الذي تفوّق عليه. أنت لا تدفع هنا مقابل الإسهاب؛ بل تدفع مقابل طبقة استرجاع تتيح للنموذج التوقف أبكر. وبالنسبة لفريق يسعّر العمل القانوني بالساعة، فهذا هو الحساب الوحيد المهم، وهو الرقم الوحيد في الإصدار الذي لا يستطيع منافس نسخه عبر إطلاق نموذج أكبر.

معدل الهلوسة هو الادعاء ذو أطول عمر نصفي.

Artificial Analysis counted material hallucinations — claims that could mislead a reader on a substantive point — across the same 120 assignments. Astra for Law averaged 0.03 per assignment, tied with GPT-6 for the lowest rate in the comparison and roughly half the rate of regular GPT-6.2 Astra at 0.06. Claude Opus 5.5 averaged 0.59, which is the "about 20 times" figure Ope​nAI quotes, and the ratio holds: 0.59 divided by 0.03 is 19.7.

ثمة تحذير واحد يستحق أن يُذكر بوضوح بدلًا من طمسه، لأنه يؤثر في الاتجاهين. فعند هذه المقادير تكون الأعداد صغيرة جدًا — إذ إن 0.03 لكل مهمة عبر 120 مهمة لا تمثل سوى حفنة قليلة من الهلوسات الجوهرية إجمالًا — ولذلك فإن إجابة سيئة واحدة تحرّك المعدل تحريكًا ملموسًا. إن نسبة العشرين ضعفًا فرق حقيقي بين جولتي قياس، وليست ثابتًا فيزيائيًا مستقرًا، ولا ينبغي اقتباسها للعميل كضمان لأي شيء. لكن ما تثبته هو الاتجاه والحجم التقريبي، وفي مهمة يمكن أن ينهي فيها استشهاد واحد مختلق علاقةً كاملة، فإن الاتجاه والحجم التقريبي أهم من تقدير نقطي.

The provenance also needs separating. Artificial Analysis ran the evaluation, so the numbers are not Ope​nAI's, but Harvey wrote the benchmark and Ope​nAI worked with Harvey on the September rollout. LAB-AA is independent of the vendor, not independent of the benchmark's author. There is no third-party hallucination count on a task set that Ope​nAI had no hand in — that is the gap in the evidence, and it is a bigger gap than the 0.03 headline suggests.

Screenshot of the Artificial Analysis Harvey LAB-AA evaluation page, showing the leaderboard with Astra for Law 6.2 in first place at 20.8% full credit, GPT-6.2 Astra second at 15.0%, GPT-6.2 Astra at High effort third at 13.3%, and Muse Wonder Full fourth at 13.1%, with material hallucination rates of 0.03, 0.06, 0.03 and 0.62 per assignment and costs per task of $7.33, $6.35, $3.86 and unavailable.

حيث لا يكون أولًا

يكشف Legal Research Bench من Vals AI، الذي قُيّم في 16 نوفمبر 2026، صورة أكثر تواضعًا. يحل Astra for Law في المركز السادس بنسبة نجاح كامل 53.85% على 208 أسئلة كتبها محامون ممارسون عن القانون الفيدرالي وقوانين الولايات الأمريكية، خلف Gemini 4 Carbon بنسبة 55.77% وتعادل ثلاثي عند 55.29% بين Muse Spark 1.3 Max وClaude Opus 5 وClaude Fable 5.1.

السادس بفارق 1.9 نقطة، لكنه الأول في اقتصاديات مجموعة الصدارة:

• دقة النجاح الكامل — Astra for Law ‏53.85% مقابل Gemini 4 Carbon ‏55.77% وGemini 4 Argon ‏54.81%

• التكلفة لكل اختبار — 2.75 دولار مقابل 8.74 دولار لـ Gemini 4 Carbon، و6.76 دولار لـ Claude Opus 5 و23.06 دولار لـ Claude Fable 5.1

• الرموز لكل اختبار — 77,740 مقابل 5.36 مليون لـ Gemini 4 Carbon و3.13 مليون لـ Claude Opus 5

• مدة كل اختبار — 16 دقيقة و45 ثانية مقابل 51 دقيقة و53 ثانية لـ Gemini 4 Carbon

الزوج الأخير هو الجزء الذي لا يتوافق مع العنوان الرئيسي. فهو ليس أرخص لكل إجابة فحسب؛ بل هو أخف بمرتبة قدر من حيث الرموز (tokens) مقارنةً بالنماذج التي تسبقه، وهو الإشارة نفسها التي أعطاها عدد رموز LAB-AA.

Ope​nAI's own framing of this benchmark is also worth checking line by line. It reports 112 of 208 questions at full credit, a gain of about eight percentage points from roughly 46% in September, and 90.9% of available points once partial credit is counted. The 112 and the 90.9% reconcile with the public board. The 46% starting point does not appear on it, so the "eight points in under two months" is a comparison Ope​nAI is making against its own September run and cannot be re-derived from what Vals publishes today.

The most useful figure on that board is one Ope​nAI did not lead with. GPT-6.2 Astra, the same base model without the legal layer, scores 42.79% and sits 31st; GPT-6 Astra sits 42nd at 39.42%. So on a benchmark neither Ope​nAI nor Harvey controls, the configuration is worth about eleven points over its own base. That is the cleanest independent estimate of what the legal index and instructions actually add, and it is considerably larger than the 20.8-versus-15.0 gap on LAB-AA implies.

Screenshot of the Vals AI Legal Research Bench leaderboard dated 16 November 2026, showing Gemini 4 Carbon first at 55.77%, Muse Spark 1.3 Max and Claude Opus 5 tied at 55.29%, Gemini 4 Argon fifth at 54.81% and Astra for Law sixth at 53.85% with a cost of $2.75 per test, alongside GPT-6.2 Astra at 42.79% in 31st place.

What it costs, and the number Ope​nAI has not published

لا يوجد سعر للإصدار القانوني. وهذا ليس سهوًا في منشور الإطلاق؛ بل هو منشور الإطلاق نفسه. فالوصول طلبٌ لا عملية شراء: يمكن لكل عميل من عملاء ChatGPT Enterprise الآن طلب Astra for Law عبر برنامج Trusted Access في لوحة تحكم المسؤول، والفرق التي تمتلكه بالفعل تختار gpt-6.2-astra-law داخل ChatGPT، أما الوصول إلى API فيتم عبر نموذج تواصل مع فريق المبيعات بدلًا من مفتاح ذاتي الخدمة.

لأغراض الميزانية، النموذج الأساسي هو السعر المنشور الوحيد: يسعّر GPT-6.2 Astra عند 8 دولارات لكل مليون رمز إدخال و40 دولارًا لكل مليون رمز إخراج، مع الإدخال المخزن مؤقتًا بسعر 0.40 دولار، ونافذة سياق بسعة 1.05 مليون رمز، و128,000 رمز إخراج كحد أقصى، وتاريخ قطع معرفة هو 18 مايو 2026. يحمل سجل Artificial Analysis لتهيئة law نفس الـ8 دولارات والـ40 دولارًا — لكن هذه بطاقة أسعار النموذج الأساسي منقولة، وينبغي التعامل معها كافتراض عملي لدى ذلك المختبر بدلًا من عرض سعر من المورّد. الرقم المشتق أكثر صدقًا بشأن الاستخدام: 7.33 دولارات لكل مهمة LAB-AA عند Max effort، مما يعكس عدد الرموز التي تنفقها التهيئة فعليًا بدلًا من التكلفة الاسمية للرمز.

If you are building the retrieval layer yourself instead of buying the configuration, the base models are reachable on one key through OrcaRouter, which carries GPT-6 Astra and the surrounding Ope​nAI line inside a 215-model catalogue at provider list price with 0% markup and automatic failover when a provider stalls mid-run. Astra for Law is not in that catalogue and there is no public endpoint that reaches it — nothing in this route is a shortcut to the configuration. What the routing layer is good for is the part you can control: a research step that must not silently drop a citation is a reasonable candidate for a second model checking the first, and that composition is a routing-DSL call rather than two vendor integrations.

Ope​nAI published one comparison that answers the question its own headline skips. On Harvey's own Legal Agent Benchmark — a different test from LAB-AA, run by Harvey rather than Artificial Analysis — GPT-6 Astra met every requirement on 4.6% of assignments, GPT-6.2 Astra tripled that to 14.6%, and the legal configuration took it to 16.2%.

اقرأ التسلسل، لا الرقم الأخير. ثلثا الطريق من 4.6% إلى 16.2% هو تقدم النموذج الأساسي: القفزة من GPT-6 Astra إلى GPT-6.2 Astra، والتي يحصل عليها أي عميل للنموذج الأساسي دون طلب الوصول إلى أي شيء. وتسهم التهيئة في آخر 1.6 نقطة، أي تحسّن نسبي بنسبة 11% مقارنة بالأساس. هذا مكسب حقيقي وهو المكسب الذي يُباع لك، لكنه حصة أصغر من الإجمالي مما توحي به تغطية الإطلاق — وهو الجزء الأرجح أن تعيد مختبرات أخرى إنتاجه عبر طبقات الاسترجاع الخاصة بها خلال ربع سنة.

من يجب أن يطلب الوصول، ومن يجب أن ينتظر

إذا كنت داخل مستأجر ChatGPT Enterprise ويجري محاموك الأبحاث فيه بالفعل، فاطلب الوصول هذا الأسبوع. تكلفة الطلب نموذج، وأول شيء مفيد يمكنك فعله به ليس تشغيل معيار Harvey بل معيارك الخاص: عشرون مهمة من ممارستك الخاصة، تُقيَّم بنظام الكل أو لا شيء مع حق نقض للهلوسة، وهو معيار تقييم يمكنك بناؤه في بعد الظهر وسيخبرك عن عملك أكثر مما تخبرك به نسبة 20.8% على معيار شخص آخر.

إذا كنت خارج Enterprise وخارج برنامج API، فلا يوجد شيء يمكن شراؤه بعد — لا قائمة أسعار، ولا مفتاح، ولا توافر عبر الشركاء. الانتظار لا يكلّفك شيئًا لن يصلحه ربع سنة من الوصول، وغياب سعر منشور هو بحد ذاته معلومة: فالبائع لم يقرر بعد قيمة الطبقة القانونية بشكل مستقل عن النموذج الأساسي.

إذا كنت تبني، فإن النتيجة القابلة للنقل ليست موقعك في لوحة الصدارة. بل إن أفضل إعداد من حيث التقييم على LAB-AA استخدم رموز إخراج أقل بنسبة 54% من النموذج الذي يليه في الترتيب. إن اقتصاديات المهمة الواحدة، وليس سعر الرمز الواحد، هي ميدان الفوز في الذكاء الاصطناعي القانوني، وطبقة استرجاع تتيح للنموذج التوقف عن الكلام أبكر أرخص من نموذج أذكى يواصل الكلام.

Three things to watch next. A published price for the configuration, which will say whether Ope​nAI sees this as a premium product or a feature bundled into Enterprise. API availability beyond the request form, which determines whether anyone can reproduce the numbers independently. And a non-U.S. hallucination count: the index now covers the UK, Australia and Canada, but every published figure measures U.S. law, and the failure mode that hurts most in other jurisdictions — citing the right provision while misreading it — is the one no index expansion fixes on its own.

مقارنات في هذه المقالة2

مستخرج من هذه المقالة · المعايير: Artificial Analysis · يُحدَّث يوميًا