面向数据采集、视觉布置与训练参数的选型参考。
| 项目 | 内容 |
|---|
| 适用场景 | 机械臂教学训练、抓取 / 搬运演示、数据集采集与模型训练方案评审 |
| 核心结论 | 优先采用双视角;默认相机分辨率 480p、采集帧率 60 fps(对应为:高);按任务难度分级规划采集回合与训练步数。 |
| 推荐优先级 | 先保证相机视野完整和数据稳定,再提高分辨率或增加复杂场景。 |
| 输出用途 | 可作为采购配置、训练计划和现场部署检查清单的基础版本。 |
基础训练优先使用“俯视 + 夹爪”方案;需要判断高度、遮挡或目标姿态时使用“俯视 + 侧视”方案。
采集分辨率建议从 480p 起步,帧率建议 60 fps(采集帧率对应:高);若出现掉帧,先关闭采集右侧预览,再评估是否降低分辨率或升级电脑性能。训练质量首先取决于数据稳定性和场景覆盖,其次才是更高分辨率或更复杂的相机数量。
- 相机布置:俯视相机建议放在目标物 45° 方向,画面应覆盖目标物、机械臂末端以及关键运动区域。
- 分辨率:默认建议 480p,兼顾清晰度、传输压力和视频文件体积;电脑性能充足时可再提升分辨率。
- 采集帧率:默认建议 60 fps(采集帧率对应:高),可满足大多数机械臂动作的流畅采集;帧率过高可能引发性能瓶颈、掉帧或数据集异常。
- 性能排查:如果 60 fps 仍有掉帧,优先关闭采集右侧预览,并检查相机带宽、USB 接口、磁盘写入和后台程序。
| 方案 | 适用任务 | 安装要点 | 注意事项 |
|---|
| 俯视 + 夹爪 | 固定点搬运、抓取放置、基础教学训练;适合观察夹取接触过程。 | 俯视相机放在目标物约 45° 方向,尽量拍到完整目标物和机械臂;夹爪相机对准末端执行器与抓取区域。 | 夹爪视角容易抖动或遮挡,需要固定线缆并校验画面稳定性。 |
| 俯视 + 侧视 | 随机位置抓取、姿态变化、存在遮挡或需要判断高度的任务。 | 俯视相机覆盖全局;侧视相机应能清楚看到目标物轮廓、夹爪接近过程和放置位置。 | 侧视相机应避开机械臂运动干涉区,避免被夹具或工件长期遮挡。 |
| 电脑 | 推荐组合 | 补充说明 |
|---|
| Mac | 2 个海康威视 USB 摄像头 | 建议机械臂帧率不超过 60 帧;120 帧无法采集,部分情况下也会有兼容问题。 |
| Mac | 1 个海康威视 USB 摄像头 + 1 个 Logitech C270 HD Webcam | 目前最稳定的组合,也可以使用机械臂 120 帧采集。 |
| Mac | 2 个 Logitech C270 HD Webcam | 同样是稳定组合,可支持机械臂所有帧率采集。 |
| Windows | 上述组合都可用 | Windows 目前都能用,建议相机直连 USB 口,不要转 hub。 |
参考型号:
| 参数 | 推荐值 | 选择理由 | 调整建议 |
|---|
| 视频分辨率 | 480p | 能看清目标物和动作过程,同时文件体积与传输压力可控。 | 若电脑、相机和存储性能充足,可提高分辨率;若掉帧,优先回退到 480p。 |
| 采集帧率 | 60 fps(对应 SenseCraft 软件上“高”) | 机械臂动作记录足够流畅,通常不会明显遗漏关键动作。 | 帧率过高会增加性能压力;如 60 fps 仍掉帧,先关闭右侧预览。 |
| 预览窗口 | 默认开启,掉帧时关闭 | 预览便于现场检查,但会消耗计算资源。 | 采集稳定性优先级高于预览体验,正式采集时可关闭非必要预览。 |
| 数据完整性 | 每轮采集后抽查 | 能及时发现视野缺失、掉帧、光照突变或动作失败。 | 建议按日期、任务、难度和回合编号统一命名,方便追溯。 |
| 难度 | 任务描述 | 采集回合 | 训练步数建议 | 验收关注点 |
|---|
| 初级 | 从固定 A 位置移动到 B 位置 | 20 回合 | 1 万-1.5 万步 | 动作路径稳定,终点误差可控,重复执行无明显失败。 |
| 中级 | 从随机位置夹取,并移动到指定 B 位置 | 50 回合 | 3 万-4 万步 | 能覆盖不同初始位置,夹取成功率稳定,放置位置一致。 |
| 高级 | 长时段、多步骤或连续任务 | 100 回合 | 8 万-10 万步 | 关注长时段稳定性、异常恢复、累积误差和数据分布覆盖。 |
- 视野覆盖:画面中能同时看到目标物、夹爪关键动作和放置区域;目标不应长期处在画面边缘。
- 目标清晰:侧视相机需能拍清目标物轮廓;俯视相机需能看清目标物和机械臂相对位置。
- 帧率稳定:正式采集前做短时测试,确认 60 fps 下没有持续掉帧。
- 环境一致:保持光照稳定、背景简洁、目标物摆放范围明确,减少无关变量。
- 数据留痕:每次采集记录任务难度、相机方案、分辨率、帧率、回合数和异常情况。
- 先用初级任务验证相机视野和采集稳定性,确认 480p、60 fps 能连续采集。
- 再进入中级任务,增加随机初始位置,重点观察夹取成功率和掉帧情况。
- 最后扩展到高级长时段任务,补充更多回合数,并记录异常样本用于后续优化。
- 每次升级任务难度前,先固定相机位置和参数,避免同时改变过多变量导致问题难以定位。