לאחרונה שחררה חברת Luma AI את כלי הווידאו החדש שלה, Dream Machine, אשר מתיימר להתחרות בפלטפורמות אחרות להפקת וידאו באמצעות בינה מלאכותית כמו Soar, Veo, Cling, Pika ו-Runway. למרות שהכלי מראה הבטחה בתרחישים מסוימים, עדיין יש לו מספר מגבלות שמשתמשים צריכים להיות מודעים להן.

אחד הנושאים העיקריים עם Dream Machine הוא זמני ההמתנה הארוכים להפקת הווידאו, במיוחד בתקופות של ביקוש גבוה. בימים הראשונים, חלק מהבקשות לקחו עד 7 שעות להתחיל לעבד, מה שיכול להיות מאוד מתסכל למשתמשים. Luma הגדילה מאז את התשתית שלה, אך זמני ההמתנה עדיין יכולים להיות משמעותיים.

מבחינת איכות הווידאו המופק, Dream Machine מתקשה בהפקת וידאו מטקסט. הדוגמאות שמוצגות בתמליל מראות שהכלי מתקשה להציג בדיוק אלמנטים כמו זאב מיילל לירח או קוף על גלגיליות. הווידאו המופק לעתים קרובות מציג אי-עקביות, כמו איברים חסרים או מיקום לא נכון של עצמים. 然, במקום שבו Dream Machine נראה להצטיין הוא בתכונת המרת תמונה לווידאו. התמליל מציג מספר דוגמאות לכך, כולל עיר עתידנית צבעונית, בית זאב פיקסלי מתוך משחק וידאו, וצריף ביער. המרות אלה של תמונה לווידאו נראות יותר מציאותיות ועקביות מאשר הניסיונות להפקת וידאו מטקסט.

חשוב לציין שDream Machine נמצא כרגע בשלב של תצוגת מחקר, וכמשתמשים ניתן להפיק עד 30 סרטונים בחודש בחינם. לאחר מכן, המודל התמחור הוא בערך 0.25 דולר לסרטון. ככל שהכלי ימשיך להתפתח, יהיה מעניין לראות אם Luma תוכל להתמודד עם המגבלות הנוכחיות ולשפר את האיכות והעקביות הכוללת של הווידאו המופק.

באופן כללי, Dream Machine מראה הבטחה, אך על המשתמשים להתקרב אליו עם ציפיות ריאליות, במיוחד כשמדובר בהפקת וידאו מטקסט. תכונת המרת התמונה לווידאו נראית להיות ההיבט החזק יותר של הכלי כרגע.

Stable Diffusion 3, הגרסה האחרונה של דגם הבינה המלאכותית להפקת תמונות בקוד פתוח הפופולרי, סוף סוף הופך להיות זמין לציבור. בואו נבחן מקרוב מה יש בגרסה החדשה הזו.

שיפור ביכולות המרת טקסט לתמונה

אחד השיפורים המרכזיים בStable Diffusion 3 הוא היכולת המשופרת שלו לשלב טקסט בתמונות המופקות. הדגם נראה עכשיו טוב יותר בתרגום פקודות טקסטואליות לייצוגים ויזואליים עקביים ומפורטים. ניתן לראות זאת בדוגמאות שסופקו, שבהן הפקודות מבוססות טקסט מניבות תמונות מדויקות ויפות יותר.

עדיין נדרשת הנדסת פקודות

עם זאת, חשוב לציין שStable Diffusion 3 עדיין דורש מידה מסוימת של הנדסת פקודות כדי להשיג את התוצאות הטובות ביותר. בעוד שהדגם השתפר, ייתכן שמשתמשים יצטרכו לספק פקודות מפורטות וספציפיות יותר כדי להשיג את התוצאות הרצויות, במיוחד עבור תמונות מורכבות או מפורטות. זה בניגוד למודלי הפקת תמונות באמצעות בינה מלאכותית אחרים שיכולים להפיק תוצאות באיכות גבוהה עם פקודות פשוטות יותר.

איכות לא עקבית

איכות התמונות המופקות יכולה להיות גם לא עקבית במידת מה. בעוד שהדגם מסוגל להפיק תוצאות מרשימות בתרחישים מסוימים, כמו הדוגמה של "אסטרונאוט ביער", הוא עדיין מתקשה עם פקודות פשוטות יותר כמו "קוף על גלגיליות". זה מרמז שStable Diffusion 3 עדיין לא בדיוק ברמה של חלק מהמתחרים שלו מבחינת איכות התמונה הכוללת והעקביות.

נדרשים שיפורים נוספים

באופן כללי, Stable Diffusion 3 מייצג צעד קדימה בהפקת תמונות באמצעות בינה מלאכותית, אך עדיין יש מקום לשיפור. ככל שהטכנולוגיה תמשיך להתפתח, אנו יכולים לצפות לראות התקדמויות נוספות ביכולת של הדגם לתרגם טקסט לתמונות באיכות גבוהה ועקביות ללא הצורך בהנדסת פקודות נרחבת. המאמצים המתמשכים של הקהילה לשפר ולהעצים את Stable Diffusion יהיו קריטיים להנעת שיפורים אלה.

לגילוי מלא, אני יועץ של Leonardo, אך אין להם שום שליטה על מה שאני אומר. אם יש משהו לא תקין בזה, אני אצביע עליו. היותי יועץ שלהם לא משפיע על מה שאני אומר עליהם בפועל.

זאת ועוד, Leonardo זה עתה שחררה דגם מותאם אישית חדש בשם Leonardo Phoenix. זהו הדגם היסודי שלהם, ולא גרסה של Stable Diffusion. התכונות העיקריות של דגם חדש זה הן:

• הקפדה משופרת על פקודות - הוא יכול להבין ולהקפיד על הפקודות שאתה מספק בצורה טובה יותר.
• טקסט עקבי בתמונות - הוא יכול לשלב טקסט בתמונות בצורה טבעית ועקבית יותר.
• איכות תמונה עליונה - התמונות המופקות הן באיכות גבוהה יותר בהשוואה לדגמים קודמים.
• שליטה יצירתית רבה יותר - יש לך שליטה רבה יותר על הכיוון היצירתי של התמונות. 然, חלק מהתכונות כמו הכוונת תמונה, אלמנטים וגרסאות ריאליסטיות עדיין לא זמינות. הם עדיין עובדים על יישום התכונות הנוספות האלה.

בואו נבחן מקרוב את הדגם בפעולה. אני אעבור לאתר של Leonardo, אבחר את הקבע של Leonardo Phoenix, ואנסה פקודה פשוטה - "זאב מיילל לירח".

הנה התמונות שהוא הפיק:

[תמונה 1] [תמונה 2] [תמונה 3] [תמונה 4]

אני לא יודע לגביכם, אבל אלה הרבה יותר מרשימות מאשר מה שראיתי זה עתה מStable Diffusion 3. הדגם נראה שעשה עבודה מצוינת בהבנת הפקודה וביצירת תמונות עקביות ואיכותיות.

בואו נסה דוגמה נוספת - "פינגווין מחזיק שלט שעליו כתוב מר אאו".

[תמונה 1] [תמונה 2] [תמונה 3] [תמונה 4]

הטקסט מאויר נכון בכל התמונות, והפינגווין שמחזיק את השלט נראה די טוב. הדגם טיפל בשילוב הטקסט מצוין.

באופן כללי, דגם Leonardo Phoenix מרגיש כצעד קדימה מStable Diffusion 3. אני ממליץ בחום לנסות את שניהם ולראות איזה מהם עובד הכי טוב עבור הצרכים שלך. היכולת המשופרת להקפיד על פקודות והשילוב של טקסט בדגם Leonardo Phoenix הן מרשימות במיוחד.

Sonno, הפלטפורמה להפקת מוזיקה באמצעות בינה מלאכותית, חשפה לאחרונה תכונה מהפכנית המאפשרת למשתמשים להפוך את ההקלטות האודיו שלהם לשירים מלאים. יכולת חדשנית זו, הזמינה למנויי Sonno Premium, מעצימה את היוצרים לנצל את כוחה של הבינה המלאכותית כדי להעלות את הרעיונות המוזיקליים שלהם.

הנה כיצד זה עובד:

1. הקלט או העלאת אודיו: המשתמשים יכולים להקליט אודיו ישירות בתוך הפלטפורמה Sonno או להעלות קובץ אודיו קיים. זה יכול להיות ריף גיטרה פשוט, מלודיה וקאלית, או כל קטע מוזיקלי אחר.

2. הרחבה ושיפור: לאחר שהאודיו הועלה, המשתמשים יכולים לבחור באפשרות "הרחב". אלגוריתמי הבינה המלאכותית של Sonno אז מנתחים את הקלט ומפיקים אוטומטית שיר מורחב ומפותח במלואו, כולל תווים נוספים, הרמוניות וטקסטים.

3. אפשרויות התאמה אישית: למשתמשים יש את היכולת לשפר את השיר המופק עוד על ידי התאמת פרמטרים כמו הז'אנר (למשל, פופ אקוסטי, אלקטרוני וכו'), הכללת קצב, והפקת טקסטים אקראיים.

התוצאות לעתים קרובות מרשימות מאוד, כאשר הבינה המלאכותית של Sonno משלבת בחלקות את האודיו המקורי של המשתמש עם הלחנים המוזיקליים שלה. השירים המופקים שומרים על מהות הקלט המקורי של המשתמש תוך הרמת הרמה לרמה של הפקה מקצועית.

תכונה זו פותחת אפשרויות יצירתיות חדשות למוזיקאים, יוצרי שירים וחובבים כאחד. המשתמשים יכולים לנסות רעיונות שונים, להפוך במהירות סקיצות לפרטיטורות מלאות, ואפילו לשתף פעולה עם הבינה המלאכותית כדי להגשים את החזונות המוזיקליים שלהם.

כשSonno ימשיך לשפר ולהרחיב את היכולות שלה, תכונת הרחבת האודיו הזו צפויה להפוך לכלי בלתי נפרד בארסנל של יוצרי המוזיקה המודרנית. על ידי העצמת המשתמשים להפוך את הרעיונות הגולמיים שלהם ל