双目结构光技术原理

核心要点

  • 主动投影增强匹配: 双目结构光通过向场景投射已知编码图案,显著提升低纹理和无特征区域的特征匹配稳定性,解决传统双目视觉的纹理依赖问题。
  • 高精度近距离感知: 该技术结合双目三角测量与结构光编码,在 0.3~3 米范围内可实现亚毫米级深度精度,特别适合具身智能机器人的精细操作任务。
  • 抗环境光干扰: 通过采用近红外波段和时序调制技术,结构光系统在复杂光照环境下仍能保持较高深度质量,相比纯被动双目具备更强鲁棒性。

技术定义

双目结构光技术是一种结合了主动式结构光投影与被动式双目视觉的混合深度感知方法。系统由一个或多个结构光投影器、双目相机(左右两个相机)和配套的图像处理算法组成。
结构光投影器向场景投射特定的编码图案(如条纹、网格、散斑或格雷码),这些图案在物体表面形成变形的纹理。双目相机同步采集包含投影图案的图像,并通过计算左右图像中对应点的视差来重建深度信息。
核心定义: 双目结构光通过主动增加场景纹理,从根本上克服了低纹理区域(如白墙、光滑表面)特征匹配困难的问题,在 3D 扫描、工业检测和具身智能机器人等领域得到广泛应用。
与传统被动双目视觉相比,该技术的关键优势在于不依赖场景的自然纹理,而是通过主动投影创造可控的纹理特征,从而实现稳定可靠的深度重建。

工作原理

双目结构光系统的工作流程包含四个关键阶段:图案投影、双图采集、特征匹配和深度重建。

图案投影与编码

系统通过投影器向场景投射预先设计的编码图案。常见编码方式包括:
  • 正弦条纹光栅: 通过相移法(Phase-Shifting)计算相位,适合高精度测量
  • 二进制格雷码: 通过空间编码实现唯一标识,适合快速测量
  • 随机散斑: 通过散斑图案的统计特性进行匹配,适合实时应用
  • 蓝绿线激光: 通过多条平行激光线进行截面扫描,适合轮廓测量
投影图案的波长通常选择近红外(NIR,如 850nm 或 940nm),以减少对可见光的干扰并提高抗环境光能力。

双目同步采集

左右相机在严格同步的时序下采集包含投影图案的图像。同步精度对于深度计算至关重要,通常需要达到微秒级。相机的曝光时间和增益需根据环境光强度和投影亮度进行联合优化,以确保图案清晰可见且不过曝。

特征匹配与解码

系统在左右图像中寻找对应点。由于结构光提供了丰富的纹理信息,匹配算法可基于:
  • 相位信息: 对于条纹光栅,通过计算局部相位差进行匹配
  • 空间编码: 对于格雷码,通过解码空间唯一标识进行匹配
  • 特征点: 对于散斑图案,通过特征描述符(如 SIFT、SURF)进行匹配
相比传统双目视觉依赖自然纹理,结构光提供的主动纹理大大提高了匹配成功率和准确性。

深度计算与后处理

基于三角测量原理,深度 Z 计算公式为:
数学基础: Z = (f · B) / d,其中 f 为相机焦距,B 为基线距离(左右相机光心间距),d 为视差(左右图像中对应点的像素位移)。
系统还需进行以下后处理:
  • 畸变校正: 消除镜头径向和切向畸变
  • 去噪滤波: 应用双边滤波或引导滤波降低噪声
  • 空洞填充: 补全遮挡区域和匹配失败区域
  • 点云生成: 将深度图转换为 3D 点云数据

技术价值

双目结构光技术解决了传统被动双目视觉在低纹理环境下失效的核心痛点,同时保持了双目系统的高分辨率和成本优势。
关键优势: 在具身智能(Embodied AI)领域,机器人需要在非结构化环境中执行精细操作,如抓取物体、穿针引线、零件装配等。双目结构光能够在近距离范围内提供亚毫米级深度精度,满足精细操作的需求。
相比单目结构光,双目结构光通过两个视角的信息冗余,能够更好地处理遮挡和反射问题,提高深度数据的完整性。相比纯 ToF 技术,双目结构光在近距离下具备更高的空间分辨率,适合纹理丰富的场景理解。
此外,该技术的硬件成本相对可控,可通过标准工业相机和定制的投影模组实现量产,适合大规模商业化部署。

应用场景

具身智能机器人

双目结构光广泛应用于机器人的视觉感知系统,特别是需要精细操作的任务,如机械臂抓取、物体识别、3D 物体重建和空间定位。在机器人导航中,该技术可用于高精度 SLAM(同步定位与建图)和动态障碍物检测。

工业检测与计量

生产线采用双目结构光进行非接触式 3D 轮廓测量、零件尺寸检测、焊接质量评估和表面缺陷分析。其高精度特性适合汽车制造、航空航天和精密加工领域。

3D 扫描与逆向工程

便携式 3D 扫描仪利用双目结构光技术对实物进行数字化建模,应用于文物保护、医疗器械、人体扫描和数字孪生。

智能医疗

医疗影像设备采用该技术进行面部扫描、口腔扫描和肢体测量,辅助手术规划和义肢定制。其非接触式特性避免了传统测量方法的不适感。

人机交互

AR/VR 设备和手势识别系统利用双目结构光进行高精度手部追踪和空间映射,实现更自然的交互体验。

SGI 解决方案

苏州观视智能科技有限公司(SGI)提供基于双目结构光技术的端到端视觉解决方案,涵盖光学设计、硬件集成、算法开发和系统标定全流程。
我们的全栈能力: 从定制光学模组设计和传感器驱动开发,到大规模生产校准,SGI 掌控整个价值链以确保最佳性能。
核心技术专长包括:
  • 定制化光学模组设计: 根据应用场景需求,设计合适的投影器焦距、视场角(FOV)和编码图案,确保在目标工作距离内达到最佳深度质量。
  • 双目相机选型与集成: 提供多种工业级相机模组选择,包括高分辨率 CMOS 传感器和全局快门(Global Shutter)方案,满足动态场景需求。
  • 算法开发与优化: SGI 开发了高效的特征匹配算法和深度滤波算法,在保持精度的同时降低计算负载,支持实时处理(30-60 FPS)。
  • 系统标定与校正: 提供完整的标定流程,包括相机内参标定、外参标定、投影器标定和立体校正,确保深度输出的线性度和一致性。
  • 嵌入式部署支持: 针对边缘计算平台(如 NVIDIA Jetson、瑞芯微、树莓派)进行算法移植和性能优化,平衡功耗、散热和实时性。
SGI 可根据客户的具体需求,提供从原型设计到量产交付的全流程支持,确保双目结构光系统在实际应用中的稳定性和可靠性。

相关主题