تخطط شركة آبل لدمج روبوت الدردشة الذكي ChatGPT في مساعدها الشخصي سيري، مما سيتيح للمستخدمين مجموعة من الإمكانيات الجديدة. ومن أبرز هذه الإمكانيات هي القدرة على طلب تفاصيل حول المحتوى الظاهر على الشاشة باستخدام سيري.
تشبه هذه الميزة، التي تهدف إلى التعرف على محتوى الشاشة، خدمة مماثلة قدّمتها جوجل، حيث يمكن للمستخدمين رسم دائرة حول أي عنصر أو تحديده أو تظليله على شاشة الهاتف للتعرف عليه والبحث عنه عبر محرك البحث جوجل. وقد قامت جوجل بإتاحة هذه الميزة لعدة أجهزة تعمل بنظام أندرويد على مدار الأشهر الماضية، مع إضافة تحسينات مثل دعم الترجمة، والتعرف على المقاطع الصوتية، ومسح رموز QR والباركود.
مساعد سيري سيكون قادرًا على استخدام ChatGPT للإجابة عن أسئلة معقدة، بالإضافة إلى قراءة المحتوى الموجود على شاشات هواتف آيفون أو أجهزة آيباد أو حواسيب ماك. على سبيل المثال، يمكن للمستخدمين توجيه أسئلة إلى ChatGPT عبر سيري حول ما يتم عرضه على الشاشة أثناء مشاهدة مقطع فيديو أو عرض صورة أو تصفح الإنترنت.
عند تلقي سيري سؤالًا، تُرسل لقطة شاشة إلى ChatGPT، الذي يستطيع فهم السياق والإجابة على استفسارات المستخدمين. ولضمان حماية الخصوصية، يطلب مساعد سيري إذن المستخدم قبل التقاط لقطة الشاشة وإرسالها إلى ChatGPT.
تتميز هذه الميزة بأنها تختلف عن ميزة الذكاء البصري Visual Intelligence، التي تمكن المستخدمين من استخدام الكاميرا للحصول على إجابات لقضايا رياضية أو معلومات حول العناصر المحيطة، وهي ميزة حصرية تقريبًا في هواتف آيفون 16.
يجدر بالذكر أن آبل تعمل أيضًا على تطوير ميزة لفهم محتوى الشاشة باستخدام نماذج الذكاء الاصطناعي الخاصة بها، وهو ما يُتوقع أن يتم إصداره في تحديثات مستقبلية لنظام iOS 18 العام المقبل. ستمكن هذه التقنية سيري من فهم السياق واتخاذ قرارات بناءً على محتوى الشاشة مع ضمان معالجة جميع البيانات داخل الجهاز لحماية الخصوصية.
من المهم الإشارة إلى أن آبل تختبر حاليًا مجموعة من المزايا القائمة على الذكاء الاصطناعي، مثل ميزة توليد الصور Image Playground، وميزة توليد الرموز التعبيرية Genmoji، بالإضافة إلى ميزات البحث البصري في هواتف آيفون 16 وغيرها من الميزات الأخرى.
