باستخدام تعليمات باللغة الطبيعية، اجعل الروبوت يطوي المناشف ويغلق الأدراج ويعلّق سماعات الأذن — تمامًا كما يسأل المرء ChatGPT، يمكن للمطورين الآن عبر واجهة برمجية مفتوحة جعل الروبوتات تنفذ مهام في العالم الحقيقي.
في 20 أكتوبر، أطلقت Dream Labs، التي أسسها فريق من الأعضاء الأساسيين السابقين في GR00T لدى NVIDIA، أول واجهة برمجية عامة لنموذج أساسي للروبوتات موجّهة للجمهور — Dream API. وتقدم Mifeng Technology لنموذج العالم والحركة Dream-1 الكامن خلفها خدمات تشمل الدورة الكاملة من البيانات غير المجسدة وبيانات الروبوت الحقيقي واختبار وتقييم الروبوت الحقيقي، لدعم تطوير النموذج والتحقق من جدوى التعميم بدون تدريب مسبق (Zero-shot).
مع استمرار انخفاض تكاليف عتاد الروبوتات، تحتاج الصناعة بشكل عاجل إلى "دماغ عام" قابل لإعادة الاستخدام عبر المهام والأجساد المختلفة، لتقليل تكلفة إعادة التدريب والتكيّف مع كل روبوت جديد وكل مهمة جديدة. وتفتح Dream API قدرات نموذج الروبوت للجمهور في صورة واجهة برمجية، بحيث يمكن للمطورين، دون الحاجة إلى خلفية في تعلم الآلة، ربط روبوتاتهم ودفعها لتنفيذ المهام عبر تعليمات باللغة الطبيعية. سعر استخدام Dream-1 هو 3 دولارات في الساعة. وقد انضمت أكثر من 20 شركة مصنّعة للعتاد إلى التعاون حتى الآن.
تحمل Dream API في جوهرها نموذج العالم والحركة (WAM) Dream-1، الذي يتعلم بشكل مشترك التنبؤ بالفيديو وتوليد الحركة، ويستطيع التحكم في الروبوت في الزمن الحقيقي وبشكل مغلق الحلقة. ووفقًا لما كشفه الفريق، في تقييم محاكاة على 27 روبوتًا لم يُرَ من قبل، حقق 24 منها أكثر من نصف أداء الجسد الأصلي YAM في التدريب؛ وعلى الروبوتات الحقيقية، يستطيع Dream-1 دون استخدام بيانات خاصة بالروبوت المستهدف لتدريب إضافي إنجاز مهام مثل طي المناشف وإغلاق الأدراج وتعليق سماعات الأذن. حاليًا، تستهدف قدرته على التعميم بدون تدريب مسبق عبر الأجساد المختلفة بشكل أساسي الروبوتات ذات الكابلات المتوازية ثنائية الذراع.
إن جعل الروبوت "يتقن العمل بدون تدريب مسبق" على جسد جديد لا ينفصل عن تراكم بيانات التدريب والتحقق عبر التنفيذ الحقيقي.
في هذا التعاون، توفر Mifeng Technology البيانات غير المجسدة المستخدمة في التدريب المسبق لنموذج العالم والحركة Dream-1، وذلك عبر إثراء معلومات التفاعل بين الإنسان والأجسام لدعم تعلم النموذج لعمليات تنفيذ مهام مختلفة؛ كما توفر بيانات الروبوت الحقيقي لتكملة خبرات الحركة والتشغيل والتلامس أثناء التنفيذ الفعلي للروبوت. ويكمل كل نوع من البيانات الآخر، مما يدعم تعلم قدرات النموذج وتحسينه التكراري.
من توفير البيانات إلى التحقق على الروبوت الحقيقي، تقدم Mifeng additionally خدمات الاختبار والتقييم لمساعدة الفريق على التحقق من جدوى التعميم بدون تدريب مسبق لـ Dream-1 على أجساد جديدة. ومن خلال مراقبة فهم الروبوت للتعليمات وعملية تنفيذ المهام ومدى إنجازها، يتم تقييم ما إذا كانت قدرات النموذج الحالية قابلة للانتقال إلى روبوت جديد، وتحديد المشكلات أثناء التنفيذ، لتوفير أساس لاستكمال البيانات لاحقًا وتحسين النموذج وتكييف الجسد.
بصفتها منصة خدمات بيانات متكاملة للذكاء الاصطناعي الفيزيائي، بنت Mifeng نظامًا لخدمات البيانات يغطي البيانات غير المجسدة والتشغيل الحقيقي عن بُعد والمحاكاة. ومن خلال دعم Dream-1 هذه المرة، تربط توفير البيانات بالتحقق من التنفيذ، مما يوسع بشكل أكبر ممارسة Mifeng في خدمة تطوير النماذج الأساسية.
في المستقبل، ستواصل Mifeng توسيع توفير البيانات عالية الجودة، وتحسين قدرات حوكمة البيانات والتسليم المعياري والتقييم على الروبوت الحقيقي، لتقديم خدمات متكاملة لفرق تطوير النماذج وشركات تصنيع الروبوتات والمؤسسات البحثية، ودفع نماذج الروبوتات نحو مزيد من السيناريوهات الواقعية.
