Adobe מציגה ניסויי AI: הליכה בתוך תמונות ושיחה עם דמויות
בכנס Max חשפה Adobe סדרת כלים ניסיוניים מבוססי AI. ביניהם: כלי שהופך תמונה שטוחה לסצנה תלת־ממדית שאפשר לנוע בתוכה, כלי שבו מעצבים דמות AI בשיחה איתה, וכלי שמעתיק עריכה מאדם או מאובייקט אחד בתמונה לאחרים. אלה אבות־טיפוס ולא מוצרים, ועדיין לא ברור אם ומתי יגיעו למשתמשים.
בכל שנה Adobe מציגה בכנס Max שלה את ה-"sneaks", הצצה לכלים ניסיוניים שנמצאים בפיתוח. השנה הוצגו כמה ניסויים מבוססי AI. אחד מהם הופך תמונות לסצנות תלת־ממדיות שאפשר לנוע בתוכן. אחר מאפשר לעצב דמות AI על ידי שיחה איתה. שלישי הופך עריכת תמונות לפעולה של העתקה והדבקה.
דמות שעוברת אודישן
הניסוי הראשון, והמוזר ביותר לדברי הכתבת, הוא Project Screen Test. מטרתו להקל על פיתוח דמויות שנוצרו ב-AI ועל השימוש בהן בתוכן וידאו. במקום לתאר בטקסט איך הדמות נשמעת ומתנהגת, המשתמש מדבר איתה ומכוון אותה בסביבה שמזכירה אודישן.
התהליך מתחיל בכמה תכונות אישיות בסיסיות, למשל "חרדה, ביישנית, מגושמת". אחר כך בוחרים לדמות קול: קול מוכן מראש, תיאור טקסטואלי (prompt) של הקול, או הקלטה לדוגמה שהכלי ישתמש בה כמקור. משם ממשיכים לפתח את הדמות בשיחה שנראית כמו שיחת FaceTime, וקובעים את סיפור הרקע שלה, המזג, המטרות, הפגמים, הפחדים ואפילו הרגלי התנועה. לבסוף הכלי מייצר "מבחני מסך" מונפשים: מתארים סביבה או תרחיש, והדמות מופיעה בתוכם. לשונית Personality מאפשרת לשנות ידנית כל תכונה שנוצרה במהלך השיחה.
לפי The Verge, כרגע מדובר בתרגיל יצירתי עצמאי. לא ברור אם הכלי ישולב בכלי הווידאו הקיימים של Adobe, ואם כן, איך. הכתבת ג'ס ות'רבד מציינת שהדמויות שנוצרו בו היו בעלות אישיות עקבית וברורה יותר מדמויות AI רבות אחרות. היא מוסיפה שזו בדיוק הסיבה לקיומו של הכלי: יצירת וידאו ב-AI נותנת הרבה פחות שליטה יצירתית מאנימציה מסורתית.
להסתובב בתוך תמונה
Project Sight Span הופך תמונה שטוחה לסביבה תלת־ממדית שאפשר לנוע בתוכה ולשנות בה את זווית הצילום. המערכת מייצרת אובייקטים ורקעים שלא הופיעו במסגרת המקורית, גם כשמסתובבים לראות מה נמצא "מאחורי" הצלם. בזמן התנועה בסצנה התמונה מפוקסלת ולא חדה, אבל כשבוחרים זווית, הרזולוציה חוזרת.
הכלי עובד עם כל תמונה שטוחה, כולל צילומים, ציורים ואיורים, ושומר על הסגנון האמנותי של המקור. לפי הכתבה, גם קעקועים ותווי פנים נשארים מזוהים ונאמנים למקור אחרי שינוי הזווית. ות'רבד משווה אותו לגרסה מוגברת של Spatial Reframing של אפל: אפשר לשנות את הזווית בצורה קיצונית יותר ואפילו להחליף לגמרי את נקודת הצילום. לדבריה, אחרי שינוי כזה כבר קשה לקרוא לתוצאה "תמונה".
צליל על לוח צבעים
Project Sound Bender הוא כלי AI למיקס אודיו. מעלים קטע וידאו ומתארים בטקסט את הצליל הרצוי, למשל "קולות בעבוע של קדרה מדע־בדיונית". הכלי מייצר אפקטים קוליים ומסנכרן אותם לווידאו באופן אוטומטי. אחר כך אפשר לכוונן את הצליל בזמן אמת על "קנבס" ריבועי שעובד כמו גלגל צבעים. לכל פינה בריבוע מוקצה צליל שנוצר ב-AI, למשל גרגור סמיך או אש חשמלית מפצפצת. כשמזיזים את הסמן בתוך הריבוע, משתנה הצליל הדומיננטי. אפשר גם להחליף את הצליל שבכל פינה.
עריכה שמשכפלת את עצמה
Project Rinse Repeat מאפשר להעתיק עריכה ולהחיל אותה אוטומטית על אובייקטים או אנשים אחרים באותה תמונה. נניח שמישהו טשטש בעבודה קפדנית פגמי עור אצל אדם אחד בתמונה קבוצתית. הכלי יתאים את אותם שינויים לכל מי שזקוק לתיקון דומה. אפשר להשתמש בו גם כדי להוסיף צללים למוצרים בגרפיקה שיווקית, גם כשהמוצרים שונים זה מזה בצורה ובגודל. Rinse Repeat בנוי סביב Photoshop.
למה זה חשוב
חשוב לזכור שה-sneaks הם הדגמות של טכנולוגיה, לא הכרזות על מוצרים. ככל הנראה חלק מהם יגיעו בעתיד לתוכנות של Adobe בצורה כזו או אחרת, וחלק לא יגיעו בכלל. ובכל זאת, הכיוון ברור. Adobe לא מתמקדת רק ביצירת תוכן מאפס. רוב הניסויים עוסקים בהחזרת שליטה ליוצר: לכוון דמות, לבחור זווית, לשלוט במינון של צלילים, להעביר עריכה מדויקת לאובייקטים נוספים. המשמעות היא ככל הנראה ניסיון לענות על הביקורת המרכזית נגד כלי AI יצירתיים, שהם מייצרים תוצאות מרשימות אבל קשים לשליטה.
כל בוקר במייל?סיכום חדשות ה-AI של אתמול, בעברית, בדקות קריאה ספורות. חינם, בלי ספאם.
מעדיפים טלגרם?להצטרפות לערוץ ←
ביטול בקליק אחד, בכל מייל · מדיניות פרטיות