כרטיס כותרת שנוצר עם הכיתוב Gemini 4 Neon לעומת Claude Haiku 5.5, כתובית משנה "קצותיו של סולם אחד", עם שני מגדלי שלבים אנכיים זה מול זה — אחד מתחת לכל שם דגם — והשורה "תשע הגדרות, אינדקס אחד" מתחתיהם.
Engineering & Research

Gemini 4 Neon לעומת Claude Haiku 5.5: הקצוות של סולם אחד

מחבר

jinhao.song

תאריך פרסום

מודלים אחרונים · 20צפו בכל המודלים →
בנצ'מרקים: Artificial Analysis · מתעדכן יומית
חזרה לכל הפוסטים

הציבו את Gemini 4 Neon ואת Claude Haiku 5.5 זה לצד זה בדף מפרט, וההשוואה נראית כמו אי-התאמה: פי שלושים ממחיר הקלט, פי שלושים ממחיר הפלט, ומודל שעולה עשירית סנט לאלף טוקנים לעומת אחד שעולה שלושה סנטים. אז אתם שמים לב ששני המודלים נמכרים כסולמות ולא כנקודות בודדות. ל-Neon יש ארבע רמות חשיבה, וברירת המחדל היא גבוהה; ל-Haiku 5.5 יש חמש, וברירת המחדל היא בינונית. ברגע שמשווים דרגה לדרגה במקום כרטיס לכרטיס, היחס של פי שלושים מפסיק להיות המספר המעניין, וצורתם של שני הסולמות הופכת לדבר ששווה להתווכח עליו.

שני המודלים עדכניים. Claude Haiku 5.5 הגיע לזמינות כללית ב-7 באוקטובר 2026 במחיר של $0.10 למיליון טוקני קלט ו-$0.50 למיליון פלט; Gemini 4 Neon שוחרר ב-18 בנובמבר 2026 במחיר $3.00 ו-$15.00. לשניהם חלון הקשר של 1M טוקנים, שניהם מקבלים טקסט ותמונות, ושניהם גובים $0.01 ו-$0.15 בהתאמה עבור קלט במטמון — אותה הנחה של תשעים וחמישה אחוזים המיושמת על תעריפי בסיס שונים מאוד.

שני סולמות, תשע הגדרות

Artificial Analysis נותנת ציון לכל דרגה בשני המודלים על אותה מערכת הערכה בת תשעה חלקים — AA-Briefcase v1.1, AutomationBench-AA, Terminal-Bench 4.0, FrontierCode-AA 2.0, AA-Omniscience v1.1, GDP.pdf, HLE-Diamond, CritPt v2 ו-Terminal-Bench-Science 0.1 — ומפרסמת עלות לכל משימה עבור כל אחד מהם. זה נותן תשע נקודות ברות-השוואה במקום שתיים, והעלות לכל משימה נמדדת ולא נגזרת מכרטיס התעריפים, כך שהיא כבר מגלמת את מספר הטוקנים שכל מודל בוחר להוציא.

• Neon ברמה נמוכה — 44.1, $0.75 למשימה.

• Neon במצב בינוני — 54.9, $1.90.

• Neon במצב גבוה (ברירת מחדל) — 59.6, $3.74.

• Neon ב-xhigh — 61.4, $6.44.

• H​aiku 5.5 ברמה נמוכה — 18.6, $0.044.

• Haiku 5.5 במצב בינוני (ברירת מחדל) — 24.6, $0.092.

• H​aiku 5.5 ברמה גבוהה — 29.9, $0.159.

• Haiku 5.5 ב-xhigh — 34.6, $0.248.

• Haiku 5.5 במקסימום — 36.5, $0.411.

שני דברים עולים מיד מהרשימה. המדרגה הזולה ביותר של Neon משיגה ציון גבוה ב-7.6 נקודות מהמדרגה היקרה ביותר של H​aiku, והמדרגה היקרה ביותר של Neon עולה פי 15.7 מהמדרגה היקרה ביותר של H​aiku ולא פי 30 כפי שמשתמע מכרטיסי התעריפים. אף אחד מאלה אינו תוצר לוואי של עיגול; שניהם מגיעים מאותו מקום, והוא ששני הדגמים מוציאים טוקנים בצורה שונה מאוד בקצה העליון של הטווחים שלהם.

Artificial Analysis model page for Claude Haiku 5.5 at Max effort, showing an Intelligence Index of 36, $0.10 input and $0.50 output per million tokens, $0.41 per Intelligence Index task, 298 million output tokens on the index against a 90-million median, 282 tokens per second, 180.94 seconds to first answer token, a default effort of medium and a 1M-token context window.

מה המשמעות של 'High' בכל כרטיס

אוצר המילים הוא המלכודת הראשונה. ב-Neon, high היא הדרגה שאיתה הדגם מגיע — זו שמקבלים אם לא מעבירים פרמטר thinking. ב-H​aiku 5.5, high היא השלישית מתוך חמש, וברירת המחדל היא medium. לכן השוואה שנכתבת כ"Neon high לעומת H​aiku high" משווה ברירת מחדל ללא-ברירת מחדל, והיא יוצרת פער של 29.7 נקודות שאף אחד מהספקים לא היה מזהה ככותרת.

השוו את ברירות המחדל בפועל — Neon ברמת high, Haiku ברמת medium — והפער מתרחב ל־35.0 נקודות, מפני שברירת המחדל של Haiku נמצאת דרגה אחת נמוך ממה שהשם שלה מרמז. השוו את ראשי שני הסולמות — xhigh מול max — והוא מצטמצם ל־24.9 נקודות. מדובר בתנודה של עשר נקודות שנובעת כולה מהשאלה איזו צמד הגדרות בחרתם לכנות בשם ההשוואה, והיא רחבה יותר מהפער בין כמה מודלים סמוכים באותו לוח דירוג.

שליבות מותאמות, ומה הפער עושה

כאשר מסדרים את השלבים לפי שם, פער המדד נע בטווח צר, מ־25.5 ל־30.3 נקודות, ללא מגמה לאף כיוון:

• ברמה נמוכה — Neon 44.1 לעומת Haiku 18.6, פער של 25.5 נקודות, עלות גבוהה פי 17.0 לכל משימה.

• ברמה בינונית — 54.9 לעומת 24.6, 30.3 נקודות, 20.8x.

• בגבוה — 59.6 לעומת 29.9, 29.7 נקודות, פי 23.6.

• בראש — 61.4 לעומת 34.6, 26.8 נקודות, פי 25.9.

פער האינטליגנציה יציב. יחס העלויות אינו יציב: הוא מטפס מ־17x ל־26x ככל שמטפסים בסולם, מפני ש־Neon גובה יותר עבור כל נקודת חשיבה נוספת מאשר H​aiku. דחיפת H​aiku מ־high ל־xhigh קונה 4.7 נקודות מדד תמורת 56 אחוז יותר לכל משימה. דחיפת Neon מ־high ל־xhigh קונה 1.8 נקודות תמורת 72 אחוז יותר. בשוליים, המודל הזול יותר הוא זה עם התשואה הטובה יותר — וזה ההפך ממה שיחס מחירון של פי שלושים היה מוביל אותך לצפות.

המדרגה החמישית היא המקום שבו הטענה נשברת

ל-Haiku 5.5 יש דרגה של-Neon אין: max. היא גם הדרגה עם התמורה הגרועה ביותר שכל אחד מהמודלים מציע. מ-xhigh ל-max, ‏Haiku מרוויח 1.85 נקודות מדד והעלות למשימה שלו עולה מ-$0.248 ל-$0.411 — עלייה של 66 אחוזים עבור שיפור של 5 אחוזים. באותו שלב, זמן המדידה עד לאסימון התשובה הראשון שלו מזנק מ-46.2 שניות ל-180.9, בערך פי ארבעה.

זה אינו פגם ייחודי ל-H​aiku. כך נראית שכבת הסקה נוספת כאשר מסגרת ההרצה מיצתה את השיפורים הקלים: המודל ממשיך לחשוב ומפסיק להשתפר. אבל זה כן אומר שכל מי שמצטט את 36.5 של H​aiku 5.5 מצטט את התצורה היחידה של אותו מודל שדורשת פי ארבעה השהיה מזו שמתחתיה, וכל מי שמצטט את 61.4 של Neon מצטט אותו סוג של תקרה מאותו סוג של סיבה. שני מספרי הכותרת הם החוליה העליונה של סולם שהופך תלול בסופו.

Generated nine-bar horizontal chart titled Nine settings, one index, with Neon's four bars at 44.1, 54.9, 59.6 and 61.4 followed by Haiku 5.5's five bars at 18.6, 24.6, 29.9, 34.6 and 36.5 on a 0 to 65 AA Index axis, and a dashed reference line at 54.9 labelled Neon medium clears Haiku's ceiling. The footer reads Intelligence Index and thinking levels per Artificial Analysis v5.0.1, 18 November 2026 release.

טוקני החשיבה הם העמודה הנסתרת

מספרי העלות לכל משימה הגיוניים ברגע שמסתכלים על כמות הטקסט שכל מודל כותב לעצמו. בריצות האינדקס, Neon ב-xhigh מפיק כ-80,500 טוקנים של חשיבה וכ-61,100 טוקנים של תשובה לכל משימה. H​aiku 5.5 ב-max מפיק כ-172,800 טוקנים של חשיבה וכ-53,200 טוקנים של תשובה.

אז המודל עם כרטיס התעריפים של פי שלושים כותב פחות ממחצית כמות החשיבה לעומת המודל עם זה של עשרה סנט, בראש שני הסולמות. H​aiku מפצה על מודל קטן יותר בכך שהוא חושב יותר זמן; Neon מפצה על מחיר גבוה יותר בכך שהוא חושב פחות. זו הסיבה שהיחס לכל משימה של 15.7x נמצא כל כך הרבה מתחת ל-30x שמחירון התעריפים מרמז עליו, ושהיחס הוא הרחב ביותר בשלב הגבוה — המדרגה שבה הרגל הטוקנים של Neon הוא הקרוב ביותר לזה של H​aiku, וכרטיס התעריפים שלו עושה את כל העבודה.

העמודה האחרת באותו פאנל היא בדיה. ב-AA-Omniscience, שיעור ההזיה של Neon בברירת המחדל שלו הוא 13.9 אחוז; זה של H​aiku 5.5 בברירת המחדל הוא 40.4 אחוז, ו-34.2 אחוז במקסימום. זהו הבדל של פי שניים עד שלושה בתדירות שבה המודל טוען משהו שהמקור אינו תומך בו, ובשונה מהמדד, הוא בקושי משתפר כשה-H​aiku מטפס בסולם שלו. אם עומס העבודה שלך הוא מהסוג שבו עובדה שגויה יקרה לתפיסה, פער המדד ממעיט במקרה של Neon במקום להגזים בו.

איפה שהמודל הזול מפסיק להיות זול

ליתרון המחיר של H​aiku 5.5 יש בסיס ממשי, והוא הגדול ביותר כאשר העבודה קצרה. קריאת סיווג, החלטת ניתוב, שכתוב של פסקה, חילוץ מטופס — כל דבר שבו הפלט הוא כמה מאות טוקנים — עולה שברי סנט ב-H​aiku ומשהו קרוב לסנט ב-Neon. בגודל הזה היחס של פי 30 הוא כמעט מילולי ופער האינדקס אינו רלוונטי, מכיוון ששני המודלים עוברים את הרף בקלות.

היתרון מצטמצם ככל שהמשימה מתארכת, והוא מצטמצם משתי סיבות שמצטברות. העלות לכל משימה של Neon נשלטת על ידי קלט, קריאות מטמון וכתיבות מטמון — בריצות האינדקס, חשבונאות הקלט היא 64 אחוז מהחשבון בשיעור גבוה — כך שקידומת ארוכה ויציבה מזיזה את התעריף האפקטיבי של Neon לעבר מחיר המטמון שלו, $0.15. H​aiku מקבל את אותה הנחת מטמון בשיעור 95 אחוז, אבל על תעריף בסיס שכבר זעיר, ולכן יש פחות לחסוך. ובעבודה שדורשת כמה שלבי תכנון, הסולם של H​aiku מגיע לשיא מתחת למקום שבו ברירת המחדל של Neon נמצאת, מה שאומר ששום כמות של טוקנים זולים לא תקנה לך את התשובה.

יש אפקט שלישי שראוי לתת לו שם מפני שקל להחמיץ אותו: ה-Elo הנמדד של briefcase — רתמה אחרת, שנמדדת בנפרד מהאינדקס — למעשה מעדיף את H​aiku בראש בטווח צר יותר מזה של האינדקס. Neon xhigh מקבל 1699 עם רווח בר-סמך של 95 אחוז בין 1688 ל-1710; H​aiku max מקבל 1572. בדרגות ברירת המחדל הפער הוא 1632 לעומת 1441. כך שרתמה שנייה ובלתי תלויה מסכימה על הכיוון וחולקת על הגודל, וזהו מצב הדברים הרגיל וסיבה לבדוק שני לוחות מובילים לפני סטנדרטיזציה.

ויש רביעי, והוא הדבר שכרטיס התעריפים מסתיר לחלוטין. H​aiku 5.5 מתומחר בשתי מדרגות: $0.10 ו-$0.50 למיליון עד לפרומפט של 100,000 טוקנים, ואז $0.50 ו-$2.50 מעליו, כשקריאת המטמון עוברת מ-$0.01 ל-$0.05. הסף סופר את כל הקלט, כולל קריאות וכתיבות מטמון, כך שהקשר ארוך חוצה אותו בקלות. בנקודה הזו מחיר הקלט של H​aiku הוא פי חמישה ממה שהכותרת אומרת, מחיר הפלט הוא פי חמישה, והיחס ל-$3.00 ול-$15.00 הקבועים של Neon — שאינם עולים מדרגה בשום סף — אינו עוד פי שלושים אלא פי שישה, או פי שלושה בפלט. כל מי שמשווה את שני הכרטיסים כפשוטם משווה מחיר דו-מדרגתי למחיר חד-מדרגתי ומתייחס למדרגה הראשונה כאל הסיפור כולו.

כלל החלטה ששורד את שלבי הסולם

ארבעה כללים, לפי סדר החשיבות:

• אם המשימה קצרה והתשובה ניתנת לבדיקה, קחו את H​aiku 5.5 ברמה בינונית או נמוכה והפסיקו לקרוא. פער האינדקס אינו מגביל בגודל כזה ופער המחיר עצום.

• אם המשימה דורשת תכנון רב-שלבי או שינויים בקוד ברמת המאגר, התקרה של H​aiku היא הבעיה, לא המחיר שלה. הרמה הטובה ביותר שלה מקבלת 36.5; ברירת המחדל של Neon מקבלת 59.6. בשלב הזה אתם לא מחליפים עלות באיכות — אתם מחליפים תשובה עובדת בתשובה זולה.

• אם אתם כבר על Neon, אל תגדירו את xhigh כברירת מחדל. המעבר מ-high ל-xhigh עולה 72 אחוז יותר לכל משימה תמורת 1.8 נקודות אינדקס ו-16 שניות תוספת זמן עד לאסימון הראשון. רוב ה-pipelines משרתים טוב יותר על ידי medium, שעומד על 54.9 במחצית המחיר של ברירת המחדל.

• אם אתם ב-H​aiku, אל תניחו ש-max. זהו הערך הרביעי בטיבו בכל אחד מהסולמות, והפער בינו לבין high הוא 6.6 נקודות אינדקס תמורת פי 2.6 מהעלות.

אף אחד מהמודלים אינו נמצא בקטלוג של OrcaRouter היום, כך ששום דבר מזה אינו ניסיון לשכנע להעביר את מי מהם למפתח שלנו. מה שכן מוצע אצלנו, במחיר המחירון של הספק וללא תוספת, הוא Claude Haiku 4.5 במחיר 1.00 ו-5.00 דולר למיליון וGemini 4 Carbon במחיר 2.00 ו-10.00 דולר — קודמיהם בכל צד. אם חשבון המדרגות שלמעלה הוא מסוג הדברים שתרצו לבדוק על התעבורה שלכם ולא על לוח דירוג, המהלך השימושי הוא להריץ את המדרגה הזולה של מודל שאתם כבר יכולים לקרוא לו מול המדרגה היקרה של זה שאתם שוקלים, על מפתח אחד, עם failover מתחת למקרה שהמדרגה הזולה לא תעמוד ברף.

סיכום כן הוא ששני המודלים האלה לא ממש מתחרים. האחד הוא מתכנן ברמת חזית שנמכר במחיר פרימיום, והשני הוא עובד בנפח גבוה שנמכר קרוב לרצפת המחירים, והעובדה שהסולמות שלהם חופפים בשם ולא בטווח היא מה שגורם להשוואה להרגיש קרובה יותר ממה שהיא. השוו את הקצוות — ה-medium של Neon מול ה-max של H​aiku — ותקבלו 54.9 תמורת $1.90 לעומת 36.5 תמורת $0.41. שמונה עשרה נקודות תמורת פי ארבעה וחצי מהכסף היא החלטה לגבי כמה המשימה שווה, ולא החלטה לגבי איזה מודל טוב יותר.

Artificial Analysis model page for Gemini 4 Neon at Xhigh effort, showing an Intelligence Index of 61, $3.00 input and $15.00 output per million tokens, $6.44 per Intelligence Index task, 283 million output tokens on the index against a 65.4-million median, 110 tokens per second, 56.54 seconds to first answer token, a default effort of high and a 1M-token context window.