דיווח: Gemini 4 Argon מקבל ציון 165 במדד היכולות של Epoch AI, בצמרת אבל לא בראש

שבועיים אחרי שגוגל השיקה את Gemini 4 Argon, מדד נוסף מנסה לקבוע איפה בדיוק הוא עומד מול המתחרים. לפי נתונים שפורסמו ברשת, המודל קיבל ציון 165 במדד Epoch Capabilities Index ‏(ECI). זה אותו ציון כמו של Fable 5.1 של אנתרופיק. לפי אותם נתונים, Claude Opus 5.5 של אנתרופיק קיבל 167 ו-GPT-6 Astra של OpenAI קיבל 166.

הסתייגות חשובה: המספרים מבוססים על פוסט ברשת. בזמן כתיבת הכתבה לא הצלחנו לאמת אותם מול הנתונים ש-Epoch AI עצמה מפרסמת, ולכן יש להתייחס אליהם כדיווח שעדיין לא אומת.

מדד שמנסה לסכם הכול במספר אחד

Epoch AI הוא ארגון מחקר שעוקב אחרי התפתחות הבינה המלאכותית. ה-ECI שלו מנסה לאחד את התוצאות של מבחני ביצועים (benchmarks) רבים לסולם יכולות אחד. אם הנתונים נכונים, המשמעות היא ש-Argon נמצא באותה קבוצה עליונה כמו המודלים המובילים של אנתרופיק ו-OpenAI, אבל לא בראשה. הפער של נקודה עד שתיים בין ארבעת המודלים קטן, וככל הנראה מעיד יותר על צמרת צפופה מאשר על פער מהותי.

תמונה מעורבת ממדדים אחרים

הציון ב-ECI משתלב בתמונה שעולה ממדדים אחרים. לפי Wccftech, המודל מוביל ב-14 מתוך 19 המבחנים הנפוצים ביותר להערכת מודלי AI, וגם ב-DeepSWE v1.1 עם 77.9%. חברת ההערכה Artificial Analysis מצאה שבמדד ה-Intelligence Index שלה הוא משתווה ל-GPT-6 Astra עם ציון 53, ועוקף את GPT-6.1 Sol בנקודה אחת.

לעומת זאת, ב-Terminal Bench 4 המודל השיג 57%, ונמצא מאחורי Claude Sonnet 5.5 ‏(64%), Claude Opus 5.5 ‏(60%) ו-GPT-6 Astra ‏(59%). במדד RSI של Vals הוא במקום הרביעי, אחרי Opus 5.5, Fable 5.1 ו-Opus 5.0 של אנתרופיק, ולפני GPT-6 Astra. התמונה הזו דומה למה שמראה ה-ECI: המודל ברמה של Astra, ואנתרופיק עדיין מחזיקה בראש.

בנוסף, Wccftech מפנה לדיווח ב-Bloomberg, שלפיו עובד בגוגל אמר ש"המודל מתקשה להתמודד עם משימות קוד מסוימות".

איפה Argon כן בולט

Artificial Analysis מדווחת ששיעור ההזיות (hallucinations, מקרים שבהם המודל ממציא מידע) של Argon הוא 15%. זה השיעור הנמוך ביותר מבין המודלים המובילים. אצל GPT-6 Astra ו-GPT-6.1 Sol השיעור גבוה מ-50%. גם המחיר בולט: במחיר ההשקה המוזל המודל עולה 2 דולר למיליון טוקנים בקלט ו-10 דולר למיליון טוקנים בפלט. לפי Engadget, המחיר של Astra הוא 10 ו-50 דולר בהתאמה. לפי Artificial Analysis, כשההנחה תסתיים העלות למשימה במדד שלה תעלה מ-1.99 ל-3.98 דולר, כלומר בערך פי 1.2 מ-GPT-6 Astra.

למה זה חשוב

ההשקה של Argon לוותה בשמועות שגוגל הגיעה ל-RSI, כלומר מצב שבו מערכת AI עוזרת לבנות ולאמן את הגרסה הבאה של עצמה. אם נתוני ה-ECI יאומתו, הם יחזקו את ההערכה שגוגל אכן סגרה את הפער מול OpenAI. עם זאת, נראה שהם לא תומכים בטענה שהיא קפצה לראש הטבלה. בינתיים המודל זמין רק במסגרת Fairwind Program של גוגל, שמיועדת לממשלות ולשותפים מהימנים. בהמשך הוא ייפתח ללקוחות API משלמים ולמנויי Google AI Ultra, ורק אז מפתחים יוכלו לבדוק בעצמם עד כמה הוא באמת קרוב למתחרים.