Nvidia Jetson/RK3588+AI双目立体相机,适合各种割草机器人、扫地机器人、AGV等应用
在快速发展的机器人和AI领域,为机器赋予“视觉”能力是实现自主性和智能化的关键。Sienovo(思诺沃)致力于提供领先的边缘AI和工业计算解决方案,我们深知3D视觉技术在各类智能应用中的核心作用。本文将深入探讨我们专为Nvidia Jetson和RK3588等平台设计的双目立体相机模组,揭示其如何通过先进的结构光技术,为割草机器人、扫地机器人、AGV、AMR及无人机等应用提供高精度、远距离的3D感知能力。
双目立体视觉:机器感知三维世界的基石
双目立体视觉是模仿人类双眼感知深度的方式,其核心原理是视差。它通过两个在空间上分离的成像设备(即双目相机)从不同位置获取被测物体的图像。由于观察角度的差异,物体在两幅图像中的投影位置会产生微小偏移,这种偏移即为视差。
系统通过复杂的算法,精确匹配两幅图像中的对应点,计算出这些点的视差数据。基于三角测量原理,结合相机的内参(焦距、主点)和外参(基线距离、相对姿态),即可从视差数据中精确计算出物体的空间三维信息,包括深度、位置和尺寸。
对于机器人而言,获取准确的3D空间信息至关重要。它不仅能帮助机器人识别障碍物、规划路径,还能进行目标抓取、环境建模和自主导航。与传统的2D视觉相比,双目立体视觉提供了不可或缺的深度信息,使机器人能够真正理解其所处的物理环境。
主动双目结构光技术:提升3D感知的鲁棒性与精度
传统的被动双目立体视觉在纹理缺失、弱光或反光等复杂场景下,由于难以找到足够的对应点进行匹配,其深度计算的精度和鲁棒性会受到影响。为了克服这些挑战,Sienovo的双目立体相机模组采用了先进的主动双目结构光技术进行3D成像。
该技术的核心在于引入了一个红外散斑投射器。这个投射器会主动向场景中投射出预设的、具有独特编码模式的红外散斑(或点阵)。这些散斑在物体表面形成人眼不可见的纹理,即使在本身缺乏纹理的墙壁、地板或光线不足的环境中,也能为红外图像传感器提供丰富的特征点。
通过两个红外图像传感器捕捉这些被投射到场景中的散斑图案,系统能够更可靠、更密集地进行特征匹配,从而计算出高精度、高密度的深度图。这种主动补光的方式极大地增强了相机在各种复杂环境下的适应性和性能,确保了深度数据的稳定输出。
核心组件解析:构建全方位感知能力
Sienovo的双目立体相机模组是一个高度集成的解决方案,由多个关键组件协同工作,提供全面的感知能力:
- 2 个 IR图像传感器: 这两个红外传感器是实现主动双目立体视觉的关键。它们负责捕捉红外散斑投射器在场景中形成的图案,并提供原始数据用于深度计算。红外光的使用使其在环境光照变化大或完全黑暗的环境中也能稳定工作。
- 1 个 RGB图像传感器: 除了深度信息,机器还需要理解物体的颜色和语义信息。RGB传感器提供高分辨率的彩色图像,用于目标识别、场景理解、颜色导航以及人机交互等应用。深度图与彩色图的融合,可以生成带有颜色信息的点云,为更高级的AI算法提供丰富的数据输入。
- 1 个 红外散斑投射器: 这是实现主动结构光技术的关键部件。它投射出不可见的红外散斑,为深度计算提供丰富的纹理信息,尤其是在低纹理或弱光环境下,显著提升了深度测量的鲁棒性和精度。
- 1 个 IMU(惯性测量单元): 集成的6轴IMU(包括三轴加速度计和三轴陀螺仪)为相机模组提供了实时的姿态和运动信息。这对于机器人应用至关重要,例如:
- 3D定位数据: 结合视觉信息,IMU数据可以用于更精确的相机姿态估计和机器人自身定位。
- SLAM(同步定位与地图构建): IMU数据有助于提高SLAM算法的鲁棒性,尤其是在视觉特征稀疏或运动模糊的情况下。
- 运动补偿: 补偿机器人自身的运动对深度测量和图像采集的影响,确保数据的准确性。
- 震动抑制: 帮助算法滤除因机器人运动或环境震动引起的噪声。
产品规格与特性:专为工业与AI应用设计
Sienovo的双目立体相机模组在设计上充分考虑了工业级应用的需求,具备一系列卓越的性能指标和功能特点:
- 分辨率: 1280H*800V
- 提供高分辨率的图像和深度数据,确保细节的捕捉和深度图的精细度,这对于精确避障和目标识别至关重要。
- 帧率: Up to 1280*800@30fps
- 在全分辨率下达到30帧/秒的帧率,满足大多数实时应用对数据更新速度的要求,确保机器人能够快速响应环境变化。
- 工作温度: -20-50℃
- 宽泛的工作温度范围使其能够适应各种严苛的工业和户外环境,保证设备在极端条件下的稳定运行。
- 尺寸: 90.75mm*25mm*30mm
- 紧凑的尺寸设计便于集成到空间受限的机器人、无人机或AGV等设备中,提供了极大的设计灵活性。
- FOV(视场角): H84°*V59°±3°
- 宽广的视场角确保相机能够捕捉到大范围的场景信息,减少盲区,提高环境感知的全面性。
- 产品特点:
- 基于结构光进行3D成像: 核心技术优势,确保在复杂环境下的高精度深度测量。
- 最远25m范围的深度测量: 卓越的远距离感知能力,使其适用于大型AGV、无人机避障以及户外机器人等需要远距离探测的应用。
- 最大输出1280x800@30fps图像数据: 高质量的图像和深度数据输出,为下游AI算法提供丰富可靠的输入。
- 6轴IMU支持3D定位数据: 集成IMU提供姿态和运动信息,增强了定位精度和SLAM的鲁棒性。
- 支持硬件帧同步: 确保双目相机在同一时刻曝光,这是高精度立体匹配的基础,有效避免因不同步导致的深度误差。
- USB3.0 Type-C 接口: 提供高带宽数据传输能力,满足高分辨率、高帧率图像和深度数据的实时传输需求;Type-C接口设计方便插拔,提升用户体验。
广泛的应用场景:赋能智能未来
这款高性能的双目立体相机模组凭借其卓越的性能和鲁棒性,适用于多种前沿的AI和机器人应用:
- 机器人: 无论是工业机器人、服务机器人还是协作机器人,都需要精确的3D感知能力进行环境建模、目标识别、抓取定位和人机交互。该模组能提供机器人所需的深度和彩色信息,使其能够更智能地执行任务。
- AGV(自动导引车)/ AMR(自主移动机器人): 在仓储、物流和工厂自动化领域,AGV和AMR需要精确的避障、路径规划和导航能力。该模组的远距离深度测量和宽视场角,使其能够有效探测障碍物、识别货架和托盘,实现高效安全的自主运行。
- 无人机避障/导航: 无人机在复杂环境中飞行时,避障是其安全飞行的关键。该模组能够提供实时的3D深度图,帮助无人机在树木、建筑物或其他障碍物之间进行精确避障,并辅助其进行自主导航、地形跟踪和精确降落。
- 割草机器人、扫地机器人: 在智能家居和园艺领域,这些机器人需要识别地面障碍物、边界和地形变化。该模组能帮助它们构建精确的环境地图,规划高效的清洁或割草路径,并避免碰撞。
Sienovo的双目立体相机模组,凭借其创新的主动结构光技术、高集成度设计和卓越的性能指标,为Nvidia Jetson和RK3588等边缘AI平台提供了强大的3D视觉感知能力。我们相信,这一解决方案将极大地推动各类智能机器人和AI应用的发展,助力客户在各自领域取得成功。