METR: אנתרופיק משפרת ככל הנראה את יכולות המודלים שלה בקצב כפול בערך מזה שנרשם עד אוקטובר 2025
הערכה עצמאית של METR קובעת שאנתרופיק משפרת ככל הנראה את יכולות המודלים שלה במשימות מוגדרות היטב בקצב כפול בערך מזה שבין מרץ 2024 לאוקטובר 2025, ושרוב ההאצה נובע ככל הנראה משימוש ב-AI במחקר ופיתוח עצמו. אי-הוודאות גבוהה: לדברי המחברים, גם האצה של 1.3x או 3x לא הייתה מפתיעה. רוב הראיות החשובות ביותר הושחרו על ידי אנתרופיק.
ארגון המחקר METR פרסם היום (5 בנובמבר) הערכה עצמאית שלפיה נכון לאוקטובר 2026, אנתרופיק משפרת ככל הנראה את יכולות המודלים שלה במשימות מוגדרות היטב בקצב כפול בערך מזה שנרשם בין מרץ 2024 לאוקטובר 2025. המחברים מדגישים שמדובר בהערכה עם אי-ודאות גבוהה: לדבריהם, הם לא היו מופתעים אם ההאצה האמיתית הייתה קרובה יותר ל-1.3x או ל-3x מהקצב ההיסטורי.
ההערכה נערכה בין 12 באוגוסט ל-29 באוקטובר 2026, ובמהלכה קיבלו אנשי METR גישה לנתונים פנימיים על תהליך המחקר והפיתוח של החברה. לפי הדוח, הגישה, שהארגון מתאר כחסרת תקדים, כללה מדדים על pretraining (שלב האימון הראשוני של המודל) ועל reinforcement learning (למידה מחיזוקים), נתוני כוח מחשוב לאימון, ציוני מבחנים של מודלים פנימיים, ניתוחים של ההאצה שמספק AI, תחזיות למדדים של מודל עתידי וראיונות עם עובדים.
מה המספרים מראים
הנתון המרכזי מגיע ממדד AECI, הגרסה של אנתרופיק ל-Epoch Capabilities Index. לפי METR, מאז אוקטובר 2025 ציוני המודלים של החברה במדד עולים בקצב של פי 1.9 בהשוואה לתקופה שקדמה לכך, עם רווח סמך של 95% שנע בין 1.5 ל-2.8. המשמעות, לפי הדוח, היא שאנתרופיק התקדמה בשנה האחרונה בערך כמו בשנתיים של התקדמות היסטורית.
METR מעריך שרוב ההאצה כיום נובע מהשימוש הנרחב של אנתרופיק ב-AI לצורכי מחקר ופיתוח, אף שגם כאן אי-הוודאות משמעותית, וגורמים אחרים מילאו ככל הנראה תפקיד גדול בסוף 2025. הארגון בטוח, לעומת זאת, שההאצה לא נבעה מהאצה בהגדלת כוח המחשוב לאימון.
עובדי החברה דיווחו בראיונות ובסקרים על שיפור דרמטי בעבודתם בזכות מערכות AI, אך METR מציין שקשה לפרש את הדיווחים האלה. לפי מה שנמסר לארגון, ההאצה מגיעה בעיקר מסיוע של AI לחוקרים ולא מתרומות אוטונומיות לחלוטין, אם כי יש סימנים לכך שתרומות כאלה ישחקו בקרוב תפקיד גדול יותר.
למה זה חשוב
החשש שמאחורי הבדיקה מנוסח בדוח במפורש: אם מערכות AI יתחילו להאיץ באופן משמעותי את הפיתוח של עצמן, הדבר עלול להוביל להופעה פתאומית של יכולות קיצוניות ומסוכנות. METR לא מצא ראיות לצווארי בקבוק משמעותיים שימנעו התקדמות נוספת ב-12 החודשים הקרובים, לא באלגוריתמים, לא בכוח מחשוב לאימון או לניסויים ולא בנתונים. לכן, לדבריו, קיים סיכון משמעותי שהתקדמות נוספת תוביל להאצה מהירה עוד יותר. הארגון מסייג שייתכן שהוא מפספס צווארי בקבוק חשובים, ושהבנתו בעניין השתנתה כמה פעמים ככל שקיבל מידע מפורט יותר.
הראיות שהציבור לא יראה
הסתייגות מרכזית נוגעת לשקיפות. לאנתרופיק הייתה זכות להשחיר מידע שאינו פומבי, ו-METR מדווח שהחברה השחירה את רוב הראיות שהארגון מצא כאינפורמטיביות ביותר למסקנותיו. לפי החברה, ההשחרות נועדו להסיר מידע סודי שעלול להאיץ מפתחי AI אחרים. METR מוסיף שלראיות רבות היו כמה פירושים סבירים, ושגם חוקריו וגם חוקרי אנתרופיק אינם בטוחים כיצד לחבר אותן לתמונה אחת.
המשמעות, כפי שהארגון עצמו מנסח אותה, היא שהציבור נאלץ להסתמך על שיקול הדעת של METR הרבה יותר מהרצוי, בהתחשב במשקל השאלות. ככל הנראה זו גם הדרך הנכונה לקרוא את הדוח: כהערכה סובייקטיבית של גוף חיצוני שראה נתונים נדירים, ולא כמדידה שאפשר לאמת מבחוץ.