Outer Unit Stereolabs Bekerjasama Dengan Trossen Robotics Untuk Mengintegrasikan Kamera ZED X Mini Dan ZED X Nano Stereolabs Ke Suite Perkakasan AI Fizikal Baru Trossen Untuk Pembelajaran Robot

Suite ini diketuai oleh Trossen Workbench dan Rivet, platform manipulasi bimanual pegun dan bergerak. Model AI fizikal hanya sebaik data demonstrasi yang mereka dilatih dan kebanyakan data itu adalah visual. Hari ini, pasukan biasanya memasang rig mereka sendiri dari senjata robot sumber individu dan kamera USB gred pengguna, bergantung pada kod pemandu tersuai untuk menyambungkannya. Hasilnya ialah set data dengan imejan resolusi rendah, penentukuran yang tidak konsisten, kabur gerakan, dan hanyut masa merentasi pandangan dan aliran data.

Trossen Workbench dan Rivet adalah platform pembangunan bersatu yang menampilkan dwi lengan WidowX Pro 6-DoF dengan jangkauan dari 700 mm hingga 1000 mm, kapasiti muatan muatan 4 hingga 6 kg, dan kebolehulangan 1 mm. Setiap platform dikuasakan oleh pengiraan NVIDIA Jetson AGX Orin 64 GB onboard dan menyokong teleoperasi melalui rangkaian tempatan dan internet. Masing-masing juga termasuk sistem penglihatan tiga kamera yang dikalibrasi kilang yang dibina sepenuhnya dengan perkakasan Stereolabs.

Seni bina visi bersama Stereolabs dan Trossen mencerminkan bagaimana dasar manipulasi canggih dilatih. Stereolabs ZED X Mini yang dipasang di tengah menyediakan pandangan pemandangan global dan konteks kedalaman stereo ruang kerja penuh, manakala setiap ZED X Nano yang dipasang di pergelangan tangan memberikan pandangan jarak dekat dari pengecam dan objek yang bergantung pada dasar pembelajaran tiruan untuk manipulasi halus.

ZED X Nano direka khusus untuk aplikasi ini. Sensor pengatup global dwi 2.3 MP (1920 × 1200) menangkap hingga 60 fps tanpa kabur gerakan kamera USB pengatup gulung, dan enjin kedalaman sarafnya menyelesaikan geometri dari sedekat 3 cm, jarak di mana pegangan sebenarnya berlaku. Sambungan GMSL2 dengan pengunci, kabel tahan EMI memastikan ketiga-tiga kamera disegerakkan secara deterministik pada Jetson dengan saluran paip salinan sifar, sehingga pasukan dapat merakam, mengekod, dan menjalankan kesimpulan secara serentak tanpa bingkai secara senyap jatuh di tengah-tengah episod. IMU di atas kapal tahan getaran memastikan pandangan pergelangan tangan boleh digunakan walaupun lengan bergerak dengan kelajuan.

Setiap episod teleoperasi yang dikumpulkan di Workbench dan Rivet adalah sampel latihan kedalaman RGB-plus yang bersih, disegerakkan, pelbagai pandangan, siap untuk pembelajaran tiruan, pembelajaran pengukuhan, dan aliran kerja sim-to-real melalui sokongan asli untuk ROS 2 dan NVIDIA Isaac Sim/Isaac Lab.