录制示教
中文译本 · 原文 录制示教
把遥操作示教录成 MCAP。跑在连着 G1 的 Jetson AGX Thor 上。
开始前另开一个终端,第一个终端里保持遥操作栈继续跑。
提示
录的时候对照 遥操作数据采集指南。只留干净回合,动作慢而平滑,身体固定,抓法有变化。苹果到盘子至少录 200 条成功示教。
警告
建议至少两人:一人遥操作,一人盯安全。
准备工位
- 按安全课把物理工位重新摆好。
- 整份数据集里,桌子、物体外观、骨盆位置和头姿态保持一致。
- 在 Thor 主机、容器外确认内核能从 USB 看到 RealSense。
lsusb | grep -i intel
isaac-ros activate rs-enumerate-devices
输出里应有已连接的 RealSense,带序列号和固件版本。
rviz2
Add → By topic → /realsense_d435_rgb/color/image_raw/Image → OK,开录之前先确认工位在画面里。
启动录制
isaac-ros activate
ros2 run isaac_ros_unitree_g1_recorder record -- \
task_description:="move the apple to the plate"
确认相机在出数据:用 RViz 看相机话题,或在另一个已 source ROS 的终端里 ros2 topic list。没录到相机时,停掉录制、拔插 RealSense,再重启 ROS 应用。
终端界面:
- 空格:开始一条 episode。
- 再按空格:保存。
c:丢弃。
文件在 ${ISAAC_ROS_WS}/recordings/。
录制质量
- 动作放慢,身体保持不动。
- 任务完成后,把左手移出画面,静止 2 到 3 秒再保存。
- 苹果到盘子只用左手做。优先侧面抓,手型接近握瓶子,让第一人称相机看清手和苹果。
- 各条之间可以改变苹果和盘子的位置与朝向,但机器人站着不动时都要够得到。基线数据集里苹果种类、盘子、桌高、灯光和相机保持固定。
- 右臂尽量留在视野外。右手手指偶尔入画可以接受,因为部署时右手也可能进画面。
- 基线以干净的成功回合为主。失败后的补救只在你有意要更宽的数据集时再加,而且不能多到盖过训练信号。至少 200 条成功 episode。