أعلنت شركة Stereolabs، التابعة لشركة Outer Unit، عن شراكتها مع شركة Trossen Robotics لدمج كاميرات ZED X Mini وZED X Nano من Stereolabs في مجموعة أجهزة الذكاء الاصطناعي الفيزيائية الجديدة من Trossen لتعلم الروبوتات
Ouster, Inc. OUST | 0.00 |
تتصدر مجموعة البرامج كل من Trossen Workbench وRivet، وهما منصتان ثابتتان ومتحركتان للتحكم الثنائي باليدين. تعتمد جودة نماذج الذكاء الاصطناعي الفيزيائية على جودة بيانات العرض التي تُدرَّب عليها، ومعظم هذه البيانات مرئية. في الوقت الحالي، تقوم الفرق عادةً بتجميع أجهزتها الخاصة من أذرع روبوتية وكاميرات USB عادية، معتمدةً على برامج تشغيل مخصصة لتوصيلها. والنتيجة هي مجموعات بيانات ذات صور منخفضة الدقة، ومعايرة غير متناسقة، وضبابية في الحركة، وانحراف في التوقيت بين المشاهد وتدفقات البيانات.
تُعدّ منصتا Trossen Workbench وRivet منصات تطوير موحدة، تتميزان بذراعين مزدوجتين من نوع WidowX Pro بست درجات حرية، بمدى يتراوح من 700 مم إلى 1000 مم، وقدرة حمولة تتراوح من 4 إلى 6 كجم، ودقة تكرار تصل إلى 1 مم. تعمل كل منصة بمعالج NVIDIA Jetson AGX مدمج بسعة 64 جيجابايت، وتدعم التشغيل عن بُعد عبر الشبكات المحلية والإنترنت. كما تتضمن كل منصة نظام رؤية ثلاثي الكاميرات مُعايرًا من المصنع، ومُصنّع بالكامل باستخدام أجهزة Stereolabs.
يعكس تصميم الرؤية المشتركة بين Stereolabs وTrossen كيفية تدريب أحدث سياسات التلاعب. يوفر جهاز Stereolabs ZED X Mini المثبت في المنتصف رؤية شاملة للمشهد وسياق العمق المجسم لمساحة العمل بأكملها، بينما يوفر كل جهاز ZED X Nano مثبت على المعصم رؤية قريبة المدى للملقط والجسم الذي تعتمد عليه سياسات التعلم بالتقليد للتلاعب الدقيق.
صُممت كاميرا ZED X Nano خصيصًا لهذا التطبيق. تلتقط مستشعراتها المزدوجة بدقة 2.3 ميجابكسل (1920×1200) ذات الغالق العالمي صورًا بمعدل يصل إلى 60 إطارًا في الثانية دون تشويش الحركة الذي تُسببه كاميرات USB ذات الغالق الدوار، كما يُحلل مُحرك العمق العصبي فيها الهندسة من مسافة قريبة تصل إلى 3 سم، وهي المسافة التي يحدث عندها الإمساك فعليًا. يضمن اتصال GMSL2 مع كابلات مقاومة للتداخل الكهرومغناطيسي تزامنًا دقيقًا بين الكاميرات الثلاث على Jetson عبر مسار بيانات لا يتطلب نسخ البيانات، مما يُتيح للفرق التسجيل والترميز وتشغيل الاستدلال في وقت واحد دون انقطاع الإطارات أثناء التصوير. كما تُحافظ وحدة IMU المدمجة المقاومة للاهتزاز على وضوح الرؤية من المعصم حتى مع حركة الذراعين السريعة.
كل حلقة يتم تشغيلها عن بعد يتم جمعها على Workbench و Rivet هي عينة تدريب نظيفة ومتزامنة ومتعددة العرض و RGB بالإضافة إلى العمق، جاهزة للتعلم بالتقليد والتعلم المعزز وسير العمل من المحاكاة إلى الواقع من خلال الدعم الأصلي لـ ROS 2 و NVIDIA Isaac Sim / Isaac Lab.