إن السر وراء القدرات المذهلة لـ Gemini 1.5 Pro هو نافذة السياق الطويلة التي تسمح له بتذكر كميات هائلة من المعلومات. وهذا يعني أنه يمكنه قراءة وفهم الكتب بأكملها والقواعد البرمجية وحتى الأفلام، ثم المشاركة في مناقشات مفصلة حول محتوياتها.

يستخدم الزملاء الأكاديميون بالفعل Gemini 1.5 Pro بطرق مذهلة، مثل تلخيص جلسات رفع الأثقال الخاصة بهم، بما في ذلك عدد المجموعات والتكرارات، أو إنشاء ملاحظات محاضرة من محاضرات مسجلة. كما يمكن للذكاء الاصطناعي أيضًا فهرسة محتويات رف الكتب الشخصي بسرعة والإجابة على أسئلة معمقة حول الوثائق القانونية الطويلة.

تشير الورقة البحثية حول Gemini 1.5 Pro إلى أنه يمكنه التعامل مع ما يصل إلى 10 ملايين رمز، وهو ما يعادل 10 أفلام، بدقة 99.7% - وهو إنجاز مذهل لا يمكن لـ GPT-4 Turbo أن يضاهيه. بالإضافة إلى ذلك، أظهر النموذج القدرة على تعلم ترجمة لغة كالامانج المهددة بالانقراض، مما يساعد على الحفاظ على المعرفة الثقافية.

ومع ذلك، فإن القدرات المذهلة للنموذج تأتي مع عيب كبير - التعقيد الحسابي والذاكرة الربعي لهيكل المحول. وهذا يعني أنه مع زيادة حجم نافذة السياق، تنمو مدة المعالجة بشكل أسي، مما قد يستغرق ما يصل إلى 1.5 ساعة لاستعلام مكون من 10 أفلام. هذا القيد متأصل في تصميم المحول ويشكل تحديًا أمام التطبيق العملي.