تقدم شركة Nvidia حلول Cosmos WFMs للنهوض بالروبوتات والذكاء الاصطناعي الفيزيائي

كشفت شركة إنفيديا عن منصة Cosmos ، المدعومة بنماذج عالمية سيستخدمها مطورو الذكاء الاصطناعي الفيزيائي لتدريب وكلاء الذكاء الاصطناعي لتحليل الفيديو، والمركبات ذاتية القيادة، والروبوتات. وتزعم الشركة أن نماذج Cosmos العالمية تستخدم استدلالًا منظمًا على الصور ومقاطع الفيديو "لفهم العالم المادي كما يفهمه البشر"   

أعلنت شركة التكنولوجيا أنها تساعد المطورين في بناء نماذج أساسية. وأوضحت أن Cosmos تتيح للمطورين تخصيص نماذج جاهزة مُدرَّبة مسبقًا لتناسب نماذج الذكاء الاصطناعي الفيزيائية المتخصصة. وتفتخر Nvidia بأن Cosmos تستخدم "فهمًا مكانيًا وزمانيًا" للعالم المادي لتنظيم البيانات التي تُدرِّب عملية اتخاذ القرار في مجال الروبوتات والسيارات ذاتية القيادة. منصة

وأضافت الشركة أن إطار عمل Cosmos Curator يمكّن المطورين من تصفية كميات هائلة من بيانات المستشعرات، وإضافة التعليقات التوضيحية إليها، وإزالة البيانات المكررة. ويستخدم المطورون هذه البيانات لإنشاء مجموعات بيانات مُخصصة تلبي احتياجات الذكاء الاصطناعي الفيزيائية المحددة. كما يمكن لنماذج Cosmos الأساسية توليد بيانات لخطوط المعالجة اللاحقة في تطوير أنظمة الرؤية الصناعية.

يأتي Cosmos مزودًا بنماذج أساسية للتنبؤ والنقل والاستدلال 

بحسب فريق Nvidia، تحتوي منصة Cosmos على نموذج التنبؤ Predict، مما يسمح للمطورين بإنشاء مقاطع فيديو متواصلة تصل مدتها إلى 30 ثانية. تُنشأ مقاطع الفيديو من مدخلات متعددة الوسائط مع الالتزام التام بالتعليمات.

يُعدّ Transfer نموذج تحكم متعدد يسمح للمطورين بمحاكاة بيئات وظروف إضاءة مختلفة. كما ذكرت الشركة التقنية أن Transfer يُمكنه تسريع مدخلات ثلاثية الأبعاد من إطاري محاكاة الذكاء الاصطناعي الفيزيائي CARLA وNvidia Isaac Sim لتمكين "زيادة البيانات القابلة للتحكم"   

أعلنت شركة إنفيديا أن برنامج Cosmos Reason يستخدم نموذج لغة الرؤية (VLM) القابل للتخصيص بالكامل، والذي يفهم العالم المادي الحقيقي كما يفهمه البشر. ويُشغّل برنامج Reason وكلاء تحليل الفيديو الذين يفهمون العمليات في المساحات الصناعية والحضرية، كما يقوم بتنظيم بيانات التدريب المستخدمة في اتخاذ القرارات.

كشفت الشركة التقنية أن المطورين يمكنهم الاستفادة من النماذج الأساسية لتوليد البيانات اللازمة لتدريب نماذج الذكاء الاصطناعي في التطبيقات الصناعية والروبوتية، مثل روبوتات المصانع والمستودعات الآلية والمركبات ذاتية القيادة على الطرق السريعة أو التضاريس الوعرة.

أوضحت شركة Nvidia أن هذه النماذج الأساسية دُرّبت باستخدام مجموعات بيانات غير مصنفة لتوليد بيانات جديدة بناءً على مدخلات المستخدم. وأضافت أن المطورين يمكنهم الاستفادة من هذه الخاصية لتعميم النماذج المدربة مسبقًا وضبطها بدقة باستخدام مجموعات بيانات أصغر لبناء نماذج مخصصة. كما يمكن للمطورين تدريب آلات ذاتية التشغيل مختلفة لاستشعار البيئات المحيطة والتفاعل معها.

شركة إنفيديا تدعم "التوائم الرقمية"

أعلنت شركة التكنولوجيا عن إطلاق مكتبات Omniverse في 11 أغسطس. وأضافت Nvidia أن هذه المكتبات مدعومة بخوادم RTX PRO وDGX Cloud، مما يتيح للمطورين بناء توائم رقمية دقيقة فيزيائيًا. ويمكن توليد بيانات اصطناعية من خلال التقاط وإعادة بناء العالم الحقيقي في بيئة محاكاة لبناء وكلاء ذكاء اصطناعي وتدريب نماذج ذكاء اصطناعي فيزيائية. 

قال القس ليباريديان، نائبdent أومنيفيرس وتقنيات المحاكاة في شركة إنفيديا، إن شركته ملتزمة بتمكين المطورين من بناء روبوتات ومركبات ذاتية القيادة للمستقبل. وأوضح أن الذكاء الاصطناعي ورسومات الحاسوب يتقاربان لإحداث نقلة نوعية في المبادئ الأساسية لعلم الروبوتات. ويعتقد ليباريديان أن هذه التقنيات ستُحدث تحولاً جذرياً في قطاعات صناعية تُقدر قيمتها بتريليونات الدولارات 

شركة Nvidia عن إتاحة مكتبات Omniverse ومجموعات تطوير البرمجيات (SDKs) للمطورين لبناء ونشر تطبيقات محاكاة الروبوتات وتطبيقات الذكاء الاصطناعي الصناعية. تُمكّن مجموعات تطوير البرمجيات من تبادل البيانات بين OpenUSD (وصف المشهد العالمي) وMJCF (MuJoCo) لمحاكاة الروبوتات عبر مختلف المنصات. كما تتيح تقنية "RTX ray-trac3D Gaussian splatting" للمطورين التقاط وإعادة بناء ومحاكاة البيئات المادية في العالم الحقيقي ثلاثية الأبعاد باستخدام بيانات المستشعرات. 

أعلنت شركة إنفيديا أن شركات Figure AI وSkild AI وBoston Dynamics وRAI Institute وHexagon وLightwheel اعتمدت Omniverse وIsaac Suite (Sim and Lab) لتسريع مشاريعها في مجال الروبوتات المدعومة بالذكاء الاصطناعي. كما استخدمت Amazon Devices & Services أنظمة إنفيديا هذه لتشغيل أحدث حلولها التصنيعية.