לפי המידע שנמסר, נראה שOpenAI מתכננת לשחרר מודל חדש בשם "GPT Next" בנובמבר 2024, זמן קצר לאחר הבחירות לנשיאות ארה"ב ב-2024. כמה נקודות עיקריות:

• צפוי שמודל ה-GPT Next יייצג שיפור משמעותי של "פונקציית צעד" ביכולות ההיסקה לעומת המודלים הנוכחיים כמו GPT-3 ו-GPT-4. זה מרמז על קפיצה משמעותית ביכולת של הבינה המלאכותית להבין, לעבד ולייצר צורות חשיבה מורכבות, מופשטות וגיוניות יותר.

• שיפור זה בהיסקה צפוי לאפשר למודל ה-GPT Next להתמודד עם בעיות מורכבות יותר הדורשות היסקה רב-שלבית וגיונית, מה שיוביל לשיפור ביכולות קבלת ההחלטות ופתרון הבעיות.

• תאריך השחרור של נובמבר 2024 נבחר במכוון על ידי OpenAI כדי להימנע מכל PR שלילי אפשרי או חששות בנוגע להשפעת המודל על הבחירות לנשיאות ארה"ב ב-2024. מנהל הטכנולוגיה הראשי של OpenAI אישר שהבחירות היו גורם מרכזי בעיתוי השחרור של המודל.

• יש סימנים שOpenAI עשויה שלא להמשיך עם קונבנציית השמות המסורתית של GPT-5, והכינוי "GPT Next" מרמז שהם עשויים לתכנן משהו משמעותי יותר מעדכון הדרגתי רגיל.

• הגידול המשמעותי בכוח החישוב ובמשאבים המוקדשים להכשרת מודלים מהדור הבא מרמז שהיכולות של מודל ה-GPT Next עשויות להיות אמנם מהפכניות, ועשויות להפוך את המודלים הנוכחיים "בלתי מוכרים" תוך 1-2 שנים.

לפי המידע שנמסר, נראה שOpenAI מתכננת לשחרר מודל חדש בשם "GPT Next" בנובמבר 2024, שצפוי להציג קפיצה משמעותית ביכולות ההיסקה ובחכמה הכוללת של המודל.

כמה נקודות עיקריות:

• התרשים מראה עלייה של "פונקציית צעד" בחכמת המודל מ-GPT-4 ל-GPT Next, מה שמצביע על שיפור משמעותי, ולא הדרגתי, ביכולות ההיסקה.

• שיפור זה בהיסקה צפוי לאפשר למודלי ה-GPT Next להתמודד עם בעיות מורכבות יותר הדורשות היסקה רב-שלבית וגיונית, עם הבנה טובה יותר של ההקשר והעדינויות.

• מנהל הטכנולוגיה הראשי של OpenAI ציין שתוך 1-2 שנים, המודלים יהיו "בלתי מוכרים" מהמצב הנוכחי שלהם, מה שמרמז על התקדמות מהירה ומהפכנית בעתיד הקרוב.

• שחרור ה-GPT Next נראה שתוזמן באופן אסטרטגי כדי להימנע מרגישויות פוליטיות אפשריות סביב הבחירות לנשיאות ארה"ב ב-2024, כפי שOpenAI הביעה חששות לגבי ההשפעה שהמודלים המתקדמים שלהם עשויים להיות.

• הקנה של כוח החישוב המשמש להכשרת מודלים אלה מהדור הבא, המתואר כ"מחשב על גודל של לווייתן", מצביע גם על המשאבים והיכולות המשמעותיים שOpenAI משקיעה בדחיפת גבולות החכמה של מודלי השפה.

אחת הנקודות המרכזיות שנדונו בפרוטוקול היא תאריך השחרור והעיתוי של מודלי OpenAI הקרובים, בייחוד בהקשר של הבחירות לנשיאות ארה"ב ב-2024.

הפרוטוקול חושף שמנהל הטכנולוגיה הראשי של OpenAI, מירה מוראטי, אישר שהבחירות הן גורם מרכזי בלוח הזמנים לשחרור המודל הבא שלהם, המכונה "GPT Next" במקום GPT 5.

בפרט:

• התמונה מראה לוח זמנים עם "GPT Next" מתוכנן לשחרור בנובמבר 2024, זמן קצר לאחר הבחירות לנשיאות ב-5 בנובמבר 2024.
• מוראטי הצהירה שOpenAI לא תשחרר דבר שהם אינם בטוחים לגבי ההשפעה שלו על בחירות גלובליות או נושאים אחרים.
• זה מרמז שOpenAI נוקטת משנה זהירות בשחרור מודל בינה מלאכותית עוצמתי מדי סמוך לבחירות, כדי להימנע מדאגות לגבי שימוש לרעה או השפעה אפשרית.
• הפרוטוקול מעלה השערה שזה עשוי להיות בשל רצון להימנע מבעיות תדמית שליליות סביב יכולות המודל ועיתוי השחרור.

באופן כללי, הפרוטוקול מצביע על כך שOpenAI שוקלת בקפידה את ההשלכות החברתיות והפוליטיות של שחרור המודלים שלה, והיא מוכנה לדחות את השקת המודל מהדור הבא כדי להימנע מפוטנציאל למחלוקות סביב שלמות הבחירות. זה מדגיש את האחריות המשמעותית והראייה לעתיד הנדרשת בעת פיתוח טכנולוגיות בינה מלאכותית מהפכניות.

Openai הגדירה ארבעה תחומי השקעה עיקריים שהם מתמקדים בהם:

1. חכמה טקסטואלית: Openai מאמינה שעל ידי הגברת החכמה הטקסטואלית, הם יוכלו לשחרר ערך טרנספורמטיבי בבינה מלאכותית. כרגע הם מציעים שני מודלים עיקריים - GPT-4 (המודל הטוב ביותר שלהם עם רב-מודליות מולדת) ו-GPT-3.5 Turbo (מודל זול יותר למשימות פשוטות). Openai צופה שהפוטנציאל להגברת חכמת ה-LLM יישאר עצום, והם מאמינים שהמודלים יהפכו בלתי מוכרים ממה שהם היום תוך 1-2 שנים, עם "פונקציית צעד בשיפורי ההיסקה" במודל הגבול הבא שלהם.

2. מודלים זולים ומהירים יותר: Openai רוצה להבטיח שהמודלים שלהם יהיו זולים ומהירים יותר עם הזמן, מכיוון שלא כל מקרה שימוש דורש את הרמה הגבוהה ביותר של חכמה. הם כבר ראו ירידה של 80% במחיר ה-GPT-4 בתוך שנה אחת, שהם רואים כקריטית לאפשר אימוץ נרחב וחדשנות עם מוצרים מבוססי-AI.

3. מודלים מותאמים אישית: Openai משקיעה ביכולת לבנות מודלים מותאמים אישית המותאמים לשימושים ויישומים ספציפיים, מעבר למודלי השפה הכלליים שלהם.

4. סוכנים רב-מודליים: Openai עובדת על פיתוח סוכנים רב-מודליים שיכולים לנצל טקסט, גישה להקשר וכלים, ומודליות אחרות כדי לספק דרך טבעית ויכולה יותר למשתמשים לאפשר אינטראקציה עם תוכנה. דוגמאות כוללות סוכן מהנדס תוכנה AI וסוכן מבוסס קול להזמנות בתחנות מכירה.

Openai דוחפת בברור את גבולות היכולות של מודלי השפה, עם תכניות לשחרר מודלים משמעותית מתקדמים יותר בעתיד הקרוב. הדגש על חכמה טקסטואלית, עלות-יעילות, התאמה אישית ואינטראקציה רב-מודלית מרמז שOpenAI מכוונת להפוך את הטכנולוגיה שלהם לנגישה יותר, גמישה ובעלת השפעה רחבה יותר על פני מגוון יישומים וענפים.

הדובר דן בעוצמת החישוב העצומה שOpenAI מנצלת כדי להכשיר את מודלי השפה מהדור הבא שלהם. הוא משתמש במטאפורה חזותית של בעלי חיים ימיים שונים כדי להמחיש את הקנה של החישוב המשמש:

• ב-2020, המערכת שהכשירה את GPT-3 הייתה בגודל של "כריש".
• המערכת שהכשירה את GPT-4 ב-2022 הייתה בגודל של "אורקה".
• המערכת שזה עתה הוצבה היא בגודל של "לווייתן" בהשוואה.

הדובר מדגיש שעם מחשב על גודל של "לווייתן" הזה, OpenAI יכולה "לבנות הרבה מאוד בינה מלאכותית". זה מצביע על כך שהערכות העתידיות שהם עובדים עליהן יהיו אמנם מהפכניות, תוך ניצול עוצמת החישוב העצומה הזו.

הדובר מציין גם שהתקדמות האקספוננציאלית בכוח החישוב קשורה ישירות להתקדמות האקספוננציאלית ביכולות המודלים. הוא אומר שהקשר בין הקנה של החישוב לבין היכולות המתקבלות של הפלטפורמה הוא "באמת יפה".

זה מספק הקשר חשוב להבנת ההתקדמות המהירה הצפויה במודלי ה"גבול הבא" של OpenAI, כמו מודל ה-"GPT Next" שצוין קודם. המשאבים החישוביים העצומים המושקעים מרמזים שמודלים עתידיים אלה יייצגו קפיצה משמעותית קדימה ביכולות ההיסקה ובחכמה הכוללת.

אחד מתחומי ההשקעה המרכזיים של OpenAI הוא פיתוח זרימות עבודה אגנטיות וחוויות עוזרות. התקדמויות אלה נועדו לשחרר ערך טרנספורמטיבי בבינה מלאכותית על ידי שיפור החכמה הטקסטואלית והיכולות ההיסקתיות.

הדובר מדגיש שמודלי השפה הנוכחיים, על אף רשמיותם, עדיין מוגבלים ביכולותיהם, בדומה ל"תלמידי כיתה א' או ב'". עם זאת, הוא מדגיש שמודלים אלה יהפכו בלתי מוכרים תוך 1-2 השנים הקרובות, מה שמרמז על שיפור של "פונקציית צעד