Recursive משיקה את Flint: מודל קוד שלדברי החברה נבנה ברובו בידי AI

הסטארטאפ האמריקאי Recursive השיק את המוצר הראשון שלו, מודל קוד בשם Flint. החברה טוענת שרוב העבודה על המודל נעשתה בידי בינה מלאכותית ולא בידי חוקרים. "כמעט כל היבט של תהליך בניית המודל בוצע ושופר בפועל על ידי AI", אמר המנכ"ל והמייסד השותף ריצ'רד סושר ל-Wired. כתב המגזין בדק את המודל במשך כמה ימים. לדבריו, Flint מרשים, ומרמז ששיפור עצמי רקורסיבי מלא של AI כבר לא רחוק.

מה זה שיפור עצמי רקורסיבי

שיפור עצמי רקורסיבי (RSI, Recursive Self-Improvement) הוא רעיון פשוט אבל שנוי במחלוקת: משתמשים ב-AI כדי לבנות AI טוב יותר. כבר היום מודלים כותבים, בודקים ומשפרים קוד של מודלים אחרים. השלב הבא הוא לולאה סגורה, שבה המערכת עצמה בוחרת אילו שיפורים לעשות, מבצעת אותם ואז מתחילה סבב נוסף. כרגע השיטה מוגבלת. אבל אם AI יוכל לתרום לכל שלבי הפיתוח, התהליך יכול בתיאוריה להמשיך בלי סוף.

ב-Recursive קוראים למערכת שלהם "Eureka Machine". לדברי סושר, היא הגתה כמה חידושים בעצמה: שיטה חדשה לאימון מודל הבסיס, ארכיטקטורות מודל חדשות וקוד שמותאם לשבבים מסוימים. בזכות זה, הוא אומר, צוות של קומץ חוקרים הצליח לבנות מודל ברמה עולמית תוך כמה חודשים. החברה פרסמה תוצאות של מבחני ביצועים (benchmarks). לפיהן Flint עוקף מודלים אחרים בגודל ובארכיטקטורה דומים במשימות קוד. התוצאות האלה מגיעות מהחברה עצמה.

המבחן המעשי

Flint הוא מודל open-weight, כלומר המשקלים שלו פתוחים וכל אחד יכול להוריד ולהריץ אותו. יש לו 40 מיליארד פרמטרים. המודלים הגדולים ביותר כוללים כמה טריליוני פרמטרים ורצים רק על ארונות של שרתים תעשייתיים. כתב Wired הריץ את Flint על מחשב Mac עם 48GB זיכרון. הוא בנה איתו רשימת משימות לשורת הפקודה, תוכנה שסורקת את הרשת ומחפשת מחקרים על RSI, ואתר פשוט שמסביר את הרעיון. לדבריו, מודלים בגודל הזה נוטים לטעויות או לאיטיות בהשוואה ל-Claude או ל-Codex, אבל Flint ביצע נכון כל בקשה שקיבל.

הכסף והאנשים

Recursive גייסה 650 מיליון דולר לפי שווי של 4.65 מיליארד דולר. בין המשקיעים: Google Ventures (קרן ההשקעות של גוגל), Greycroft, אנבידיה ו-AMD Ventures. סושר היה בעבר המדען הראשי של Salesforce. אחד המייסדים השותפים הוא ג'ף קלון, פרופסור באוניברסיטת בריטיש קולומביה, שחוקר דרכים לבנות מערכות AI שממשיכות ללמוד בלי סוף.

הוויכוח על הסיכון

הסיפור הזה מגיע ברגע רגיש. לפי Wired, בספטמבר האחרון התפטר חוקר מאנתרופיק. הוא הזהיר שהתקדמות ב-AI, כולל שיפור עצמי רקורסיבי, עלולה להביא להכחדת האנושות בתוך כמה שנים, ומומחים נוספים הצטרפו לאזהרה. כמה הצעות חוק בקונגרס האמריקאי מבקשות לאסור RSI. המבקרים חוששים ש-AI שמשתפר בלי הגבלה עלול לצאת משליטה אנושית ולראות בבני אדם מכשול.

ב-Recursive רואים בחששות האלה מדע בדיוני יותר מאשר מציאות, ובחקיקה מכשול מיותר להתקדמות. סושר אומר ש-Flint נבנה במערכת שאינה מסוגלת לחמוק משליטה אנושית. המטרה, לדבריו, היא שה-Eureka Machine תגיע לשיפור עצמי רקורסיבי מלא, אבל בפיקוח של בני אדם שיוכלו לעצור את התהליך אם משהו ישתבש.

Recursive גם לא לבד. Wired מציין מחקר של צוות ממיקרוסופט, מאוניברסיטת קרנגי מלון ומאוניברסיטת וירג'יניה. המחקר הראה איך סוכן קוד יכול לשפר את עצמו שוב ושוב, גם בשינוי ה-harness (שכבת התוכנה שהופכת את ההסקה של המודל לפעולות) וגם בשינוי המשקלים של המודל עצמו.

למה זה חשוב

אם הטענות של Recursive יחזיקו מעמד בבדיקות עצמאיות, ככל הנראה מדובר בשינוי בכלכלה של פיתוח AI. עד היום רק חברות עם צבא של חוקרים ותקציבי עתק הצליחו לבנות מודלים מובילים. "זו הדרך היחידה שבה צוות קטן מאוד כמו שלנו יכול לייצר מודל שבאמת טוב יותר מכל מודל אחר בקטגוריה שלו", אמר סושר. מצד שני, הכלי שמאפשר לצוות קטן לזוז מהר הוא אותו כלי שמדאיג את המבקרים ואת המחוקקים. המשמעות היא שהוויכוח על RSI כבר לא תיאורטי: הוא מתנהל סביב מוצר שאפשר להוריד ולהריץ על מחשב ביתי.