يبدو أن عام 2024 هو عام التقدم في مجالين الذكاء الاصطناعي والروبوتات سيكون الأمر مثيرًا ومن التعلم إلى تصميم المنتج هناك الكثير من الإثارة حول إمكانات التطبيقات المتنوعة لهاتين التقنيتين. يعد باحثو DeepMind Robotics من جوجل أحد الفرق القليلة التي تبحث في إمكانات هذا المجال وفي منشور جديد، أشاروا إلى أبحاثهم في مجال تعليم الروبوتات لفهم الأوامر بشكل أفضل.
ذكر باحثو جوجل التطورات المختلفة في مجال الروبوتات في هذا المنشور بعنوان "تشكيل مستقبل الروبوتات المتقدمة". يعد AutoRT أحد هذه الأنظمة التي يتم تقديمها باستخدام نموذج اللغة المرئية (VLM) لتحسين الوعي بالموقف. يستطيع AutoRT إدارة مجموعة من الروبوتات المجهزة بكاميرات للحصول على خريطة للبيئة والأشياء الموجودة بداخلها.
وفي الوقت نفسه وبمساعدة نموذج اللغة الكبير يمكن إسناد المهام إلى الروبوت والتي يتم تنفيذها بواسطة الأجهزة. وفقًا للعلماء، فإن ماجستير إدارة الأعمال يجعل الروبوتات أكثر قدرة على فهم أوامر اللغة الطبيعية بشكل فعال مما يقلل في الواقع من الحاجة إلى مهارات البرمجة.
قام باحثو جوجل باختبار هذا النظام خلال الأشهر الماضية ويستطيع AutoRT إدارة ما يصل إلى 20 روبوتًا وما مجموعه 52 جهازًا مختلفًا. في المجمل أجرت DeepMind حوالي 77000 تجربة تتضمن أكثر من 6000 مهمة.
تدريب الروبوت بالفيديو
نظام آخر من فريق جوجل يسمى RT-Trajectory، والذي يقوم بتدريب الروبوت باستخدام مدخلات الفيديو. حاليًا تستكشف العديد من الفرق استخدام مقاطع فيديو يوتيوب لتدريب الروبوتات ولكن RT-Trajectory يقدم مستوى جديدًا لهذه المهمة.
وفقًا لشركة ديب مايند(DeepMind) كان أداء هذا النظام ضعيفًا في التدريب مقارنةً بنموذج الذكاء الاصطناعي RT-2 الذي تم طرحه مؤخرًا للتحدث مع الروبوتات؛ أي 63% مقابل 29%.