物理AI实验室 // 第 1.3 集 // 一页纸
传感器:看、量、摸
相机、深度、力与触觉
三个要点
- 相机(RGB)看颜色和形状、认得出物体,但平面照片分不清远近(一款深度相机上的彩色相机 1200 万像素,O)。
- 深度相机给每个像素一个距离(同一台设备的深度这一路约 100 万像素,比彩色粗,O),双目视差或发光计时都能测距;力/触觉管接触之后——碰到没、多用力、滑没滑(一款力控臂每个关节都有力矩传感器,O)。
- 本体感觉:靠关节编码器知道自己转到哪了;多种传感器合起来,才拼出完整一幕,且都要校准、互相印证。
证据:O 官方一手 · R 学术文献 · M 媒体二手
| O | 1200 万 | 像素:一款深度相机上的彩色相机(微软 Azure Kinect DK) |
| O | 100 万 | 像素左右:同一台设备的深度相机(飞行时间原理,比彩色那一路粗) |
| O | 每个关节 | 一款力控机械臂在每个关节都内置力矩传感器,用来估计外部接触力、感知碰撞 |
延伸阅读
- Microsoft · Azure Kinect DK hardware specifications
https://learn.microsoft.com/en-us/azure/kinect-dk/hardware-specification - Franka Research 3(每个关节内置力矩传感器)
https://franka.de/franka-research-3 - DIGIT:低成本高分辨率视觉触觉传感器(arXiv 2005.14679)
https://arxiv.org/abs/2005.14679