نموذج ذكاء اصطناعي مبتكر Ferret-UI يعزز فهم واجهة المستخدم المحمولة

قفزة مذهلة في الذكاء الاصطناعي حيث ارتفع المجال بشكل حاد مع تقديم Ferret-UI، وهو نموذج MLMM (نموذج تمثيل مستوى الميكروجينيسيتي) من نوع الخيط الشبيه بـ fp-8. يسعى MLMM (مصطلح شامل للتعلم الآلي متعدد الوسائط) إلى التكامل مع واجهة المستخدم المحمولة (UI).

كما هو موضح في المقال على موقع Apple Insider، ستتركز المهام الرئيسية لهذا المشروع على تحسين كفاءة الذكاء الاصطناعي وإنجازه، وتشجيع الخوارزميات على الاقتراب من أنماط وبنية الدماغ البشري. وأخيراً، يمكن لهذه السيناريوهات المحاكية أيضاً أن تثير فروقاً كبيرة في كيفية تواصل سيري بشكل مكثف مع الهواتف المحمولة قريباً.

فهم محسّن لواجهة المستخدم المحمولة مع Ferret-UI

يُظهر نموذج Fret-UI، الذي يتكون من لوحات صغيرة وأجهزة استشعار مثبتة عبر الدوائر المرنة، قدرته على معالجة البيانات بكفاءة من خلال مشاركة الكميات الهائلة من البيانات التي يوفرها، وقد أضاف ميزات جديدة مثل استخدام الأسلاك وتنزيل التطبيقات لمنح المستخدمين تفاعلاً حقيقياً ومثيراً مع واجهة UX. 

بالإضافة إلى ذلك، يتكون Ferret-UI أيضاً من أحدث جزء خادع وقليوي يتضمن ذكاءه باستمرار في واجهة تطبيقات المستخدم ونظام تشغيل iOS الداخلي (التحكم وإدراك جميع الأنظمة [التقنية] لواجهة المستخدم). علاوة على ذلك، فإن الميزة الرئيسية للتكبير والتصغير، من بين أمور أخرى، هي برنامج المكبرة الذي يعيد تكبير الصور الكبيرة المفقودة على الشاشة. وبالتالي، بهذه الطريقة، تسهل الواجهة المحمولة رحلة المستخدم، مما يجعلها أسهل.

وفقاً لأبحاث CU، من خلال فهم تعقيدات نماذج الهواتف المختلفة والتعرف على مكونات واجهة المستخدم، يمكن لـ Ferret-UI التعرف على مكونات الهاتف، مثل الأيقونات والنصوص، وأسمائها. سيكون النموذج قابلاً للتكيف مع النوع المعطى ليعمل بشكل صحيح لأي إدخال يتم لمسه أو تحديده أو خدشه لتوفير بيانات أكثر دقة. 

علاوة على ذلك، من المذهل أن هذا التطبيق يمكنه مشاركة وجمع وفرز بيانات بكسل الشاشة بدقة دون أدوات خفية أو كاشفات أو تقنيات استخدام ملفات عدوانية. تنتقل تجربة الشاشة الواحدة إلى آفاق جديدة مع كل هذه المزايا.

تكامل محتمل مع سيري وخدمات أبل

يبدو نموذج Fret-UI المقترح غامضاً بعض الشيء فيما يتعلق بالقيمة التي قد يجنيها من سيري (Siri) أو أجهزة iPhone أو أي منتج آخر من منتجات أبل؛ ومع ذلك، فإن مزاياه عديدة. تتيح واجهة المستخدم الجديدة تحكماً أسرع في الواجهة أثناء محادثة المستخدمين مع سيري ومساعد الصوت صوتياً. وفي الوقت نفسه، تجعلها أيضاً مريحة للمستخدمين لفهم واجهة المستخدم المحمولة.

هناك احتمالات عالية بأن يجعل ذلك من الممكن لسيري محاولة اكتشاف أهداف المستخدم البشري والحصول على تفسير للسؤال باستخدام المنتجات في سياقات متجمعة معاً. أحد المجالات التي يؤثر فيها أتمتة الذكاء الاصطناعي هو تحسين تجربة المستخدم. يجب جعل Pandora أكثر ودية للذكاء الاصطناعي للتفاعل مع سيري لفتح مهام معقدة مثل التصفية أو تبديل التطبيقات.

من المثير للاهتمام، أن النوع الجديد من البرامج الذكية المسمى Ferret-AI يمثل علامة فارقة أخرى مسجلة فيما يتعلق بنمو الذكاء الاصطناعي بسبب أفضل الميزات المقترنة بعدة تطبيقات صوتية اصطناعية مثل سيري. بفضل هذه النهج الرائعة حيث تُستخدم واجهة الهاتف المحمول وحدها لجمع البيانات، وهذا هو السبب في أن النظام مصمم للعمل كنقطة انطلاق لتطبيقات الهواتف الذكية التي يمكن استخدامها كأدوات اتصال للمستخدمين. على الرغم من أننا نتوقع النجاح مع كل من الذكاء الاصطناعي الاتجاهي والأتمتة، إلا أنه من السهل جداً التنبؤ بدقة بكيفية إعادة بناء التقنيات المتطورة العالم من حولنا.

القصة الأصلية من: https://www.phonearena.com/news/apples-ai-model-understand-apps-and-iphone-screen-could-it-unlock-siris-full-potential_id157186