דוח ממשלתי בסין: מודלי AI כבר מייצרים יותר נתונים בהסקה ממה שנדרש לאימונם

גוף מחקר ממשלתי בסין טוען שהמדינה הגיעה לנקודת ציון בשימוש בבינה מלאכותית. לפי דוח חדש שסוקר ב-South China Morning Post, כמות נתוני ההסקה (inference) שמייצרות מערכות AI בסין עלתה לראשונה על כמות הנתונים ששימשה לאימון המערכות האלה. במילים אחרות: המודלים מייצרים יותר ממה שהוזן אליהם בתהליך הלמידה.

הדוח פורסם בשבת על ידי China Centre for Information Industry Development (CCID), שפועל תחת משרד התעשייה וטכנולוגיית המידע של סין (MIIT). לפי SCMP, הדוח מתבסס על "נתונים רשמיים עדכניים". הגוף שמציג את הנתון הוא חלק מהמנגנון הממשלתי, ולכן נכון להתייחס אליו כטענה של הממשל הסיני ולא כמדידה עצמאית.

אימון מול הסקה: מה ההבדל

כדי להבין למה בייג'ינג מציגה את הנתון כהישג, צריך להכיר שני שלבים בחיים של מודל שפה גדול (LLM). השלב הראשון הוא אימון: המודל "קורא" כמויות עצומות של טקסט ונתונים ולומד מהם דפוסים. השלב השני הוא הסקה: השימוש בפועל במודל. בכל פעם שמישהו שואל צ'טבוט שאלה, מבקש סיכום של מסמך או מפעיל סוכן AI, המודל מייצר תשובה.

את הנתונים בשני השלבים מודדים בדרך כלל ביחידה שנקראת טוקן (token), מקטע קטן של טקסט כמו מילה או חלק ממילה. כשכמות הטוקנים שהמודלים מייצרים בשימוש עוקפת את כמות הטוקנים ששימשו לאימונם, המשמעות היא ככל הנראה שהשימוש בהם כבר לא מוגבל לניסויים ולהדגמות, והפך לחלק משגרה של עסקים ומשתמשים.

למה זה חשוב

לפי SCMP, הדוח ממחיש עד כמה סין מאמצת AI בקנה מידה רחב. הנתון הזה משתלב בדיון רחב יותר בתעשייה: בשנים האחרונות נשמעת יותר ויותר ההערכה שמרכז הכובד הכלכלי של ה-AI עובר מאימון מודלים, שדורש השקעה חד-פעמית גדולה, להפעלתם השוטפת, שבה העלויות וההכנסות מצטברות עם כל שימוש.

אם המגמה שמתאר הדוח מדויקת, יש לה כנראה כמה השלכות. הראשונה היא תשתיתית: הסקה בהיקף גדול דורשת כוח מחשוב זמין כל הזמן, ולא רק לתקופות אימון. השנייה מסחרית: כשהשימוש גדל, חברות כמו עליבאבא, באידו, טנסנט ובייטדאנס, שמפעילות מודלים ושירותי ענן בסין, יכולות למדוד את הצלחתן לפי נפח שימוש ולא רק לפי ביצועי המודל במבחנים.

הסתייגות נדרשת

חומרי המקור לא מפרטים איך בדיוק נמדדו הנתונים, אילו מערכות נכללו בחישוב ומה היחס המספרי בין נתוני ההסקה לנתוני האימון. בלי הפרטים האלה קשה להעריך את היקף התופעה באופן עצמאי, או להשוות אותה למצב בארה"ב ובאירופה.

בנוסף, לממשל הסיני יש אינטרס ברור להציג התקדמות בתחום שבו הוא מתחרה מול ארה"ב. זה לא אומר שהנתון שגוי, אבל כדאי לקרוא אותו כמסר של הממשל על מצב התעשייה, ולא כמדד ניטרלי.