המשימה של Open AI היא להפוך את הבינה הכללית המלאכותית (AGI) ואת ערכה לרלוונטיים ונגישים לכולם. הם מאמינים שחשוב להיות להם מוצר שניתן להפיץ באופן חופשי ונרחב.

הנקודות המרכזיות הן:

• Open AI מתמקדת בשיפור האינטליגנציה של הדגמים שלהם ובהפיכתם ליותר מסוגלים בטקסט, ראייה וצליל.
• הם רוצים להפוך את האינטראקציה בין בני אדם לבין AI הרבה יותר טבעית וקלה יותר, תוך מעבר לפרדיגמה של חוויות יותר שיתופיות וחלקות.
• עם הדגם Omni החדש של GPT-4, הם מסוגלים להביא את האינטליגנציה של GPT-4 לשימוש של המשתמשים החינמיים שלהם, מה שהופך את היכולות המתקדמות של AI נגישות יותר.
• הדגם החדש מהיר פי 2, זול ב-50% בממשק API, ויש לו מגבלות קצב פי 5 גבוהות יותר למשתמשים בתשלום בהשוואה ל-GPT-4 Turbo.
• Open AI מאמינים שהפיכת AGI לנגישה באופן רחב היא הליבה של המשימה שלהם, והם ממשיכים לעבוד לעבר מטרה זו.

Open AI הודיעו על מספר עדכונים למוצרים שלהם, כולל אפליקציה לשולחן העבודה ומראה משתמש (UI) מרעננת עבור Chat GPT.

הנקודות המרכזיות הן:

• הם מביאים את האפליקציה לשולחן העבודה ל-Chat GPT, מה שמאפשר למשתמשים לגשת לעוזר ה-AI מהמחשבים שלהם. זה מספק גמישות ושילוב טוב יותר לזרימת העבודה של המשתמשים.

• ה-UI עודכן, אם כי השינויים נראים קלים על פי התיאור. הדגש הוא על הפיכת האינטראקציה לטבעית יותר ואינטואיטיבית, מה שמאפשר למשתמשים להתמקד בשיתוף הפעולה עם ה-AI במקום ב-UI.

• המטרה היא להפוך את החוויה של האינטראקציה עם הדגמים המתקדמים האלה לטבעית ושלמה יותר. זה כולל הפחתת עיכובים והפעלת תכונות כמו הפסקת ה-AI במהלך שיחה.

• עדכונים אלה הם חלק ממאמצים רחבים יותר של Open AI להפוך את טכנולוגיית ה-AI שלהם לנגישה ונוחה יותר למשתמש, בעת שהם עובדים להשגת המשימה של פיתוח בינה כללית מלאכותית (AGI) שתהיה זמינה בהיקף רחב.

Open AI הודיעו על שחרור הדגם הדגל החדש שלהם, GPT-4O. דגם Omni זה מייצג קפיצת מדרגה משמעותית ביכולות ה-AI, המשלב טקסט, ראייה וצליל לתוך מערכת אחת, מסוגלת מאוד.

כמה נקודות עיקריות של GPT-4O:

• מהיר ויעיל יותר: GPT-4O מהיר פי 2 מהדגמים הקודמים ו-50% זול יותר בממשק API, עם מגבלות קצב פי 5 גבוהות יותר למשתמשים בתשלום.
• יכולות מולטימודליות: הדגם יכול לטפל בקלות בקלט של טקסט, ראייה וצליל, מה שמאפשר אינטראקציה טבעית ושיחתית יותר.
• אינטליגנציה רגשית: GPT-4O יכול לזהות ולהגיב לרגשות אנושיים, מה שהופך את האינטראקציה לרגישה יותר ומותאמת אישית.
• הפסקה ושיתוף פעולה: המשתמשים יכולים להפסיק את הדגם ולהיכנס לשיחות דו-כיווניות, במקום לאינטראקציה המסורתית מבוססת תורים.
• זמינות למשתמשים חינמיים: Open AI מחויבים להפוך את רמת האינטליגנציה של GPT-4O זמינה למשתמשים החינמיים שלהם, צעד משמעותי בהדמוקרטיזציה של הגישה ליכולות AI מתקדמות.

הדגמים הציגו את יכולת הדגם להבין ולהגיב להוראות קוליות, לפתור בעיות מתמטיות, ואפילו לספר סיפורי שינה עם ביטוי רגשי דינמי. התקדמויות אלה באינטראקציה טבעית של שפה ובהבנה מולטימודלית מייצגות אבן דרך משמעותית בפיתוח עוזרי AI שיכולים באמת לשתף פעולה עם בני אדם באופן חלק ואינטואיטיבי.

כפי שOpen AI ממשיכים להרחיב את גבולות האפשרי עם ה-AI, העתיד של האינטראקציה בין אדם למכונה נראה הולך ונעשה טבעי ומותאם אישית יותר. GPT-4O הוא עדות לקצב המהיר של ההתקדמות בתחום הזה, ולהצצה לפוטנציאל המהפכני של טכנולוגיות אלה.

היכולות המרכזיות שOpen AI הדגימו בהודעה זו היו תכונות השיח בזמן אמת של GPT-4. כמה נקודות עיקריות:

• GPT-4 יכול כעת להיכנס לשיחות טבעיות ודו-כיווניות, מה שמאפשר למשתמש להפסיק ולהתערב בכל נקודה, במקום להמתין עד שה-AI יסיים לדבר.

• התגובות הקוליות של ה-AI מכילות יותר אישיות ורגש, עם היכולת לווסת את הטון, המהירות והביטוי בהתאם להקשר של השיחה.

• המערכת יכולה לזהות את המצב הרגשי של המשתמש מהקול שלו ולהתאים את התגובות בהתאם, יוצרת אינטראקציה אמפתית ונטורלית יותר.

• העיכוב בין קלט הדיבור של המשתמש לפלט הקולי של ה-AI מצומצם מאוד, מה שהופך את השיחה לרציפה ומיידית יותר.

• GPT-4 יכול כעת לטפל בקלטים מולטימודליים, מבין ומגיב הן למידע קולי והן לחזותי בו-זמנית.

באופן כללי, התקדמויות אלה ביכולות השיחתיות מייצגות צעד משמעותי קדימה בהפיכת עוזרי ה-AI לרגישים יותר לאנושי ומשולבים בזרימות העבודה הטבעיות. היכולת להפסיק בחופשיות, להביע רגשות ולקלוט הקשר היא מפתח לגרום לה-AI להרגיש כשותף שיתופי אמיתי במקום מערכת קשיחה ומבוססת תורים.

הנקודות המרכזיות של החלק הזה הן:

• ChatGPT יש כעת את היכולת לזהות רגשות מהקול של המשתמש ולהגיב בביטוי רגשי מתאים בקולו שלו.
• זה מאפשר אינטראקציה הרבה יותר טבעית ושיחתית, כאשר ה-AI יכול לזהות את המצב הרגשי של המשתמש ולהתאים את הטון והניסוח בהתאם.
• ההדגמה הראתה ש-ChatGPT מסוגל לזהות כאשר המשתמש מרגיש מתוח, ואז לספק משוב מרגיע ומעודד כדי לעזור למשתמש להירגע.
• ChatGPT יכול גם ליצור את התגובות שלו בסגנונות רגשיים שונים, כמו טון יותר דרמטי או רובוטי, בהתאם לבקשות המשתמש.
• זה מייצג התקדמות משמעותית בהפיכת האינטראקציה עם ה-AI לרגישה יותר לאנושי ואינטואיטיבית, עובר מעבר לשאלה-תשובה בלבד לכיוון של דיאלוג רציף ודו-כיווני.
• היכולת להפסיק את ChatGPT ולקבל תגובה בזמן אמת, ללא עיכובים ארוכים, תורמת גם היא לזרימה שיחתית טבעית יותר.
• בכללות, יכולות הקול והרגש החדשות האלה מקרבות את ChatGPT לחזון של עוזר AI שיכול באמת להבין ולהזדהות עם המשתמש, כמו עוזר ה-AI המתואר בסרט "Her".

הנקודות המרכזיות של היכולות להבנה וקשר חזותיים שהוצגו בהכרזה על GPT-4 הן:

• הדגם יכול לתפוס ולהבין חזותית את התוכן המוצג על המסך, כמו קוד או משוואות מתמטיות. כאשר המציג שיתף את הקוד על המסך, GPT-4 היה מסוגל לתאר מה הקוד עושה.

• GPT-4 יכול לספק הנחיה שלב-אחר-שלב לפתרון המשוואה המתמטית המוצגת על המסך, מבלי לחשוף ישירות את הפתרון. הוא מנחה את המשתמש דרך תהליך פתרון הבעיה.

• הדגם יכול לזהות ולהגיב לרמזים חזותיים, כמו כאשר המציג הראה תחילה את חלקו האחורי של מצלמת הטלפון במקום את הפנים שלו. GPT-4 זיהה נכונה שהוא מסתכל על משטח השולחן לפני שהמציג הפך את המצלמה.

• היכולות להבנה חזותית מאפשרות ל-GPT-4 לתפוס ולהתקשר עם העולם החזותי, ולא רק לעבד טקסט. זה מאפשר אינטראקציה מולטימודלית יותר טבעית בין המשתמש לעוזר ה-AI.

• בכללות, תכונות ההבנה והאינטראקציה החזותית שהוצגו מייצגות התקדמות משמעותית בהפיכת עוזרי ה-AI ליותר תפיסתיים, רגישים ומסוגלים לאינטראקציות חלקות ודומות לאנושיות בין מודליויות שונות.

הנקודות המרכזיות של יכולות התרגום הרב-לשוני שהוצגו בסרטון הן:

• Open AI הציגו את היכולת של GPT-4 לתרגם בין אנגלית לאיטלקית בזמן אמת במהלך שיחה בין שני אנשים.

• כאשר התבקש לתרגם בין השפות, GPT-4 השיב בצורה מקורית "Perfetto", מדגים אישיות ואינטראקציה טבעית.

• התרגום התרחש בחלקות, כאשר GPT-4 תרגם מאנגלית לאיטלקית ולהפך ללא עיכוב או שגיאות ניכ