כרטיס הירו שנוצר בכותרת "Beam 1.0 מול Clef Flash" וכתובית משנה "אחד כותב קוד, אחד לא מסוגל לכתוב משפט". שני כרטיסים מעוגלים יושבים זה לצד זה: השמאלי מסומן 'Beam 1.0' ובטקסט שלו כתוב '501.3B סה"כ / 23.4B פעילים'; 'קורא טקסט, כותב טקסט'; 'חשיבה מחייבת, חמש רמות מאמץ'; 'Apache 2.0, משקולות יוצאות ב-16 באוקטובר 2026'; הימני מסומן 'Clef Flash' ובטקסט שלו כתוב '9B, אין נתיב פלט טקסט'; 'מחזיר הסתברות עבור כל תשובה מותרת'; 'אין שלב יצירה, ולכן אין שלב פענוח'; '0.038 דולר למיליון טוקנים בקלט, פלט מחויב באפס'. שורת כותרת תחתונה אומרת "צורות פלט שונות, ולכן עבודות שונות באותו צינור עיבוד.". הלוגו של OrcaRouter מורכב ברצועה שמתחת לאיור, בפינה הימנית התחתונה.
Guides & Insights

Beam 1.0 לעומת Clef Flash: האחד כותב קוד, השני אינו מסוגל לכתוב משפט

מחבר

Rowan Sterling

תאריך פרסום

מודלים אחרונים · 20צפו בכל המודלים →
בנצ'מרקים: Artificial Analysis · מתעדכן יומית
חזרה לכל הפוסטים

העמידו Beam 1.0 וClef Flash זה לצד זה וההשוואה נראית אבסורדית עד שמבחינים במה היא באמת עוסקת. Beam 1.0 הוא מודל mixture-of-experts של Reflection עם 501.3 מיליארד פרמטרים, ששוחרר עם משקולות Apache 2.0 ב-16 באוקטובר 2026 ונבנה לקידוד, להסקה ולעבודה סוכנית באופק ארוך; הוא קורא טקסט וכותב טקסט. Clef Flash של Cloudflare הוא מודל עם 9 מיליארד פרמטרים שאין לו כלל נתיב פלט טקסטואלי — לא נתיב ירוד, אלא פשוט אין. הוא מקבל מצב בתוספת סכמה של שאלות עם טיפוסים ומחזיר הסתברות לכל תשובה מותרת. כל עמוד שמדרג את השניים זה מול זה לפי ציוני בנצ'מרק לא הבין את שניהם. השאלה המועילה היא איזו משבצת בצינור כל אחד מהם ממלא, כי במערכת בנויה היטב הם אינם יריבים; הם שלבים סמוכים.

כדאי להבין את הצמידות הזו במדויק, כי היא מסבירה סוג של כשל ייצור שאף בנצ'מרק של מודל בודד לא חושף: המנתח שחיברת למודל צ'אט כי זה היה הדבר היחיד שהיה לך, והתשובה החמישים ואחת מתוך מאה שלא התאימה לסכימה שלך.

מה שכל מודל למעשה מחזיר

התחל מצורת הפלט, כי כל השאר נובע ממנה.

• Beam 1.0 — טקסט חופשי, עם הנמקה מחייבת. רמות המאמץ הנתמכות הן low, medium, high, xhigh ו-max, ו-max היא ברירת המחדל, כך שתצורת ברירת המחדל מנמקת במשך הזמן הארוך ביותר. הנמקה, קריאה לכלים ופלטים מובנים נתמכים כולם, ופלטים מובנים יחד עם סכמת JSON הם הדבר הקרוב ביותר ש-Beam מגיע אליו להחזרה מוגבלת.

• Clef Flash — התפלגות מעל קבוצת תשובות מוצהרת. התיעוד של Cloudflare מתאר מעבר קדמי שמעניק ציון לכל אפשרות מותרת; אין שלב יצירה ולכן אין שלב פענוח. המסגור של הספק עצמו הוא שזהו מודל החלטה, והמוצר השני בהשקה היה פלטפורמת כוונון עדין בלמידת חיזוק לבניית עוד כאלה.

ההבדל המעשי הוא מה קורה כשהקלט מחוץ לתחום. מודל טקסט שנשאל משהו שמחוץ ליכולתו יפיק prose בטוח, והמערכת שלך צריכה לשים לב לכך. Clef Flash יפיק הסתברויות שמסתכמות לאחת על פני האפשרויות שנתת לו, כלומר קלט מחוץ לתחום יופיע כהתפלגות שטוחה ולא כמשפט סביר — בתנאי שבנית סף לכך, דבר שהספק אינו מספק. הטבלה שפרסמה Cloudflare בעצמה מציגה את המקרה הזה כתא החלש ביותר של המודל.

Screenshot of the Hugging Face model card for Cloudflare/clef-flash, showing the apache-2.0 licence badge, the tags ImageTextToText, Transformers, Safetensors, qwen3_5, clef, cloudflare, multimodal, structured-output, classification, custom-code, conversational and Eval Results, 832 likes, the heading linking to the Cloudflare announcement and to the Clef Decision Index leaderboard, and the opening lines describing Clef-Flash as a 9B multimodal model that turns a state and a schema of typed questions into decisions, reading the state as text, JSON, images or video and returning a probability for every allowed option in a single forward pass, with no free-form text generation and no output parsing.

ההערכות אינן חופפות, וזהו הממצא

הציונים של Clef Flash מגיעים מ-Jev Decision Index ומאוסף סוויטות ייעודיות להחלטות, כולן מורצות על ידי Cloudflare, וכמה מהן מורצות מול הבנצ'מרק של מתחרה — Jev מפורסם על ידי TypeSafe, הספק של המודל שמולו נמדד Clef Flash. בסוויטות האלה המספרים חזקים: BFCL case-exact 98.8, ‏API-Bank 93.1, סימולציית מכשירי בית ב-97.7, ‏ContractNLI macro-F1 84.3, ‏RouterBench 79.9. Clef Flash עוקף את Clef 27B הגדול יותר ב-BFCL, ב-API-Bank ובסוויטת מכשירי הבית, באחרונה בארבע עשרה נקודות. שום דבר מזה לא שוחזר באופן עצמאי.

שיטת ההערכה של Beam שונה במהותה. כרטיס המודל של Reflection מדווח על בנצ'מרקים סוכניים והנדסת תוכנה — SWEBench Verified 81.6, Terminal Bench v2.1 80.1, DeepSWE v1.1 43.3, GPQA Diamond 90.6 על נקודת הבדיקה BF16 — כולם מדווחים על ידי הספק. המספר החיצוני היחיד הוא Artificial Analysis, שמציג את Beam 1.0 עם Intelligence Index של 30, במקום ה-19 מתוך 120 מודלים בגרסת המדד v4.3.2, ואינו רושם מחיר או מהירות כי הוא עדיין רואה "אין API זמין לציבור" עבור המודל. אין דבר בעמודה של Clef Flash שמתאים ל-Intelligence Index, ואין דבר בעמודה של Beam שמתאים לציון ראוטר מדויק ברמת המקרה. הם לא על אותו ציר.

מה שאפשר להשוות הוא מבנה העלויות, וכאן השניים נמצאים בקצוות מנוגדים. Cloudflare מארחת את Clef Flash ב-Workers AI במחיר של $0.038 למיליון טוקני קלט, כאשר טוקני פלט מחויבים באפס, כי אין כאלה — בערך שישית מ-$0.24 שאותו מחירון גובה עבור ה-27B Clef הגדול יותר, וממש מתחת ל-$0.042 שאנחנו גובים עבור מודל החלטות שעונה לאותו מבנה בקשה. ל-Beam 1.0 אין בכלל מחיר מפורסם למיליון טוקנים — התיעוד של Reflection כולל עמוד מלא של מגבלות קצב ואין בו מחירון. אירוח עצמי הוא המסלול היחיד עם תמחור, והוא מתחיל בארבעה מעבדים גרפיים מדגם N​VIDIA B300.

Screenshot of OrcaRouter's model page for TypeSafe's Jev 1.13 (typesafe/jev-1.13), showing a 65K-token context window, text input and structured JSON output, the Vision, Tools, JSON and Reasoning capability badges, a pricing figure of $0.04, a public-benchmark date of 24 September 2026, and a p50 time-to-first-token of 194 milliseconds.

היכן כל אחד מהם שייך במערכת אמיתית

התשובה הכנה היא ש-Clef Flash מחליף שלב שאתה כנראה מבצע בצורה גרועה, ו-Beam 1.0 מחליף שלב שאתה כנראה מבצע בעלות גבוהה.

היעד של Clef Flash הוא סיווג, ניתוב, שער וטריאז' בתוך לולאת סוכן — בכל מקום שבו הפלט הנכון הוא אחד מקבוצה ידועה של תוויות והמחיר של תשובה פגומה הוא חריגה במורד הזרימה. פרופיל ההשהיה המפורסם שלו, כ-38.8 ms בחציון ו-122.4 ms ב-p95, הוא החלק שקובע שם, מפני שהוא נמדד במשטר שבו זמן-עד-הטוקן-הראשון של מודל טקסט אינו.

המטרה של Beam 1.0 היא העבודה עצמה: לפתור בעיות ב-GitHub, לפעול ב-CLI, ולהריץ תהליכי עבודה רב-שלביים של כלים. הטיעון ש-Reflection מציג הוא יעילות טוקנים ולא יכולת שיא — כרטיס המודל טוען לאיכות פתרון דומה למודלים פתוחים מובילים בפי שלושה פחות טוקני חשיבה בזמן הסקה, והתמיכה החזקה ביותר לכך היא ש-Artificial Analysis רשמה 79M טוקני פלט עבור Beam ב-Intelligence Index מול חציון של 130M, עשירי מתוך ארבעים ושישה במדד זה. בהרצת סוכן ארוכה שבה כל תור משחזר את השיחה הקודמת, זה הסעיף שמצטבר.

אף אחד מהם אינו בקטלוג שלנו, ואין בכוונתנו לרמוז אחרת. Clef Flash פועל על מעבדי ה-GPU בקצה של Cloudflare עצמה, והמשקולות ברישיון Apache-2.0 הן שלך לאירוח עצמי; המשקולות של Beam 1.0 נמצאות ב-Hugging Face תחת Apache 2.0 עם API צד-ראשון שאין לו מחיר מפורסם.

הסיבה להשאיר את שניהם נגישים

צינור שמשתמש במודל החלטה בשער ומודל הסקה מאחוריו הוא ארכיטקטורה עדיפה באופן מוחלט מזו שמשתמשת במודל צ׳אט יחיד לשניהם, והעלות של בנייתו כך היא העלות התפעולית של תלות שנייה — חוזה שני, סט מפתחות שני, מצב כשל שני. זהו החלק שנתב מסיר, ולא חלק המודל.

אם שלבי השער במערכת שלך הם אלה ש-Clef Flash מתאר, המקבילה הקרובה ביותר שכבר מנותבת היא Jev 1.13 של TypeSafe — המודל ש-Cloudflare בחרה בו כמקבילת הבנצ'מרק שלה, תואם API למבנה הבקשה של Clef Flash, ובקטלוג שלנו במחיר $0.042 למיליון טוקני קלט, כשהפלט מחויב באפס והקשר הוא 65,536 טוקנים.

A generated two-column scoreboard titled "Beam 1.0 vs Clef Flash - the scoreboard". The left column is headed "Beam 1.0" with rows reading 'Output: free-form text with reasoning', 'Parameters: 501.3B total, 23.4B active', 'Context: 1M tokens', 'Price: not published', 'Licence: Apache 2.0, weights out 16 Oct 2026', 'Independent index: 30, 19th of 120'. The right column is headed "Clef Flash" with rows reading 'Output: a probability per allowed answer', 'Parameters: 9B', 'Context: not published', 'Price: 0.038 dollars per million input, output billed at zero', 'Licence: Apache 2.0, weights on Hugging Face', 'Independent index: none, vendor-run decision suites only'. The sourcing footer reads "Beam figures vendor-reported except the index; Clef Flash figures vendor-reported and unreproduced.". The OrcaRouter logo is composited in the strip below the artwork, bottom right.

לשלב ההיסק שמאחורי השער, הקטלוג שלנו כולל את המודלים שמולם Beam נמדדת: GLM-5.2 במחיר $1.40 ו-$4.40 למיליון טוקנים עם חלון של 1,000,000 טוקנים, Kimi K3 במחיר $3.00 ו-$15.00 עם 1,048,576, ו-Qwen3.8-Max במחיר $2.00 ו-$6.00. מפתח אחד תואם OpenAI מכסה את כולם, מחיר המחירון של הספק עובר הלאה ללא כל תוספת, ומעבר אוטומטי לגיבוי אומר ששלב השער לא נכבה כי לספק אחד הייתה דקה רעה.

אפשר גם להשאיר את שני השלבים על מודלים שונים בלי להתחייב לאף אחד מהם: כלל ניתוב ששולח תעבורת סיווג סכמות לנקודת הקצה של ההחלטה ועבודת טקסט חופשי למודל חשיבה הוא המקרה הרגיל של ה-DSL לניתוב, והוא מאפשר לכוונן בנפרד את הדיוק של שלב ההחלטה ואת העלות של שלב החשיבה, במקום להתפשר בתוך מספר הפרמטרים של מודל אחד.

איזה אחד אתה בעצם מחפש לקנות

אם הגעת לכאן כי הסוכן שלך פולט מדי פעם בלוב JSON שהמנתח שלך דוחה, אתה לא רוצה מודל עם 501 מיליארד פרמטרים. אתה רוצה את מודל ההחלטה, והשאלה שצריך לשאול היא אם קבוצת התשובות שלך באמת ניתנת למנייה ומהי מדיניות ההימנעות שלך — כי Clef Flash נותן לך הסתברויות, לא סירוב.

אם הגעת לכאן מפני שהחשבונית של סוכן הקידוד שלך נשלטת על ידי טוקני חשיבה שאינך יכול לראות, אינך רוצה מסווג בעל 9 מיליארד פרמטרים. אתה רוצה את Beam 1.0, או אחד מהמודלים שכנגדם הוא נמדד, והשאלה שכדאי לשאול היא אם אתה יכול לארח אותו או שאתה ממתין למחירון שטרם פורסם.

הדבר היחיד שמסגור ראש־בראש צודק בו הוא ששניהם הימורים על אותה תזה משני קצוות מנוגדים: שהחלק היקר בסוכן אינו התשובה, אלא כל מה שסביב התשובה. התשובה של Cloudflare היא להסיר את היצירה מהשלבים שמעולם לא נזקקו לה. התשובה של Reflection היא להוזיל את היצירה לכל טוקן של חשיבה. כשהן נפרסות יחד, הן עולות פחות מאשר כל אחת מהן כשהיא נפרסת לבדה, וזו תוצאה טובה יותר ממה שטבלת הבנצ'מרק של כל אחד מהספקים תספר לך.

שום דבר מזה אינו היפותטי: כשלי ה-AI המתועדים ותקריות הסוכנים העומדים מאחורי מהדורות כמו זו מרוכזים בארכיון תקריות ה-AI של OrcaRouter, שבו כל רשומה כוללת מקורות משלה, חומרה, דירוג מהימנות וסימון שנוי במחלוקת.