כלי הפקת הווידאו של Keying AI שפותח על ידי חברת הטכנולוגיה הסינית CA הפגין יכולות מרשימות שבחלק מההיבטים עולות על הדגמים המתקדמים ביותר כמו Stable Diffusion.

אחת התכונות המרכזיות היא מנגנון תשומת הלב המרחבית-זמנית בתלת-מימד, המאפשר למודל לתפוס טוב יותר תנועה מרחבית-זמנית מורכבת ולייצר סרטונים עם תנועות גדולות יותר תוך שמירה על חוקי הפיזיקה. זה בא לידי ביטוי בדוגמאות של אדם רוכב על סוס במדבר גובי ואסטרונאוט רץ על פני השטח הירחי, שבהם התנועות של הדמויות והרקע משולבים בצורה חלקה.

היבט מרשים נוסף הוא היכולת של המודל ליצור סרטונים באיכות גבוהה ועקביים באורך של עד 2 דקות בקצב של 30 פריימים לשנייה. זה מדגים את ההבנה החזקה של המערכת בהקשר הסצנה והקוהרנטיות הזמנית, שבדרך כלל מהווה אתגר עבור הפקת וידאו באמצעות בינה מלאכותית.

הדמיית תכונות העולם הפיזי היא גם מרשימה, כפי שמודגם בקליפ של שפיכת חלב בזהירות לתוך כוס. החלב זורם בקביעות וממלא את הכוס בצורה ריאליסטית, המעידה על הבנת המודל בדינמיקת הנוזלים.

אחת הדוגמאות המרשימות ביותר היא הקליפ של אדם סיני אוכל מרק עם מקלות אכילה. הפרטים העדינים, כמו הרוטב סביב השפתיים, נתפסים ברמת ריאליזם שקשה להבחין בינה לבין צילום אמיתי.

המודל מפגין גם יכולת חזקה של שילוב מושגים, מייצר סצנות חדשניות שאינן קיימות בנתוני העולם האמיתי, כמו חתול לבן נוהג במכונית דרך עיר סואנת או דמות לגו המבקרת בגלריית אמנות.

לבסוף, היכולת של המערכת ליצור תמונות באיכות גבוהה ברמת סרט קולנוע היא התקדמות משמעותית, שמתמודדת עם מגבלה נפוצה של מערכות בינה מלאכותית לווידאו. הדוגמה של ארובה תחת שקיעה ממחישה את הדיוק החזותי המרשים שהושג על ידי המודל.

בכללותו, כלי הפקת הווידאו של Keying AI שפותח על ידי חברת הטכנולוגיה הסינית CA הפגין רמת יכולת מרשימה שבחלק מהתחומים עולה על הדגמים המובילים כיום. התפתחות זו מדגישה את הקידמה המהירה בתחום הפקת וידאו באמצעות בינה מלאכותית ואת הפוטנציאל של סין להיות מתחרה חזק בתחום זה.