浅谈3D结构光原理

视觉/图像重磅干货,第一时间送达

新机器视觉

最前沿的机器视觉与计算机视觉技术
206篇原创内容
公众号
来源 | 光照人生

3D结构光

3D结构光的整个系统包含结构光投影设备、摄像机、图像采集和处理系统。其过程就是投影设备发射光线到被测物体上,摄像机拍摄在被测物体上形成的三维光图形,拍摄图像经采集处理系统处理后获得被测物体表面数据。在这个系统中,当相机和投影设备相对位置一定时,投射在被测物体上的光线畸变程度取决于物体表面的深度,所以在拍摄图像中可以得到一张拥有深度的光线图像。

3D结构光的根本就是通过光学手段获取被拍摄物体的三维结构,再通过这一信息进行更深度的应用。

1 红外发射器

红外光发射部分是整个3D视觉重要的组件之一,用于发射经过特殊调制的不可见红外光至拍摄物体,其发射图像的质量对整个识别效果至关重要。
采用结构光方案的 3D 视觉相比于 TOF 方案要复杂得多,主要是结构光方案需要采用 pattern 图像(如激光散斑等)进行空间标识,因此需要定制的DOE(衍射光栅)和 WLO(晶圆级光学透镜,包括扩束元件、准直元件、投射透镜等)。但实际上WLO要视情况而定,在我从事的VCSEL项目中,就只有准直Lens,没有扩束元件和投射透镜。

整个不可见光红外线(IR)发射模组的工作流程主要为:

1)不可见红外光发射源(激光器或者LED)发射出不可见红外光;2)不可见红外光通过准直镜头进行校准;3)校准后的不可见红外光通过光学衍射元件(DOE)进行散射,进而得到所需的散斑图案。因为散斑图案发射角度有限,所以需要光栅将散斑图案进行衍射“复制”后,扩大其投射角度。因此IR发射模组主要部件包括:不可见红外光发射源(激光器或者LED)、准直镜头(WLO)、光学衍射元件(DOE)。
1.1 近红外光源选择,VCSEL是最佳方案
目前,可以提供 800-1000nm 波段的近红外光源主要有三种:红外LED、红外LD-EEL(边发射激光二极管)和VCSEL(垂直腔面发射激光器)。
VCSEL 可以说是红外激光LD的一种,全名为垂直共振腔表面放射激光器,顾名思义,它采用垂直发射模式,与其他红外LD的边发射模式不同。
VCSEL的垂直结构更加适合进行晶圆级制造和封测,规模量产之后的成本相比于边发射LD有优势,可靠性高,没有传统的激光器结构如暗线缺陷的失效模式。相比于LED,VCSEL的光谱质量高,中心波长温漂小,响应速度快,优势明显。

边发射EEL激光二极管LD结构图

垂直发射模式VCSEL结构图

三种主流近红外光发射光源优劣对比:

综合分析三种方案,LED 虽然成本低,但是发射光角度大,必须输出更多的功率以克服损失。此外,LED 不能快速调制,限制了分辨率,需要增加闪光持续时间;边发射LD 也是手势识别的可选方案(如DFB),但是输出功率固定,边缘发射的模式在制造工艺方面兼容性不好;VCSEL 比 LD-EEL 的优势在于所需的驱动电压和电流小,功耗低,光源可调变频率更高(可达数 GHz),与化合物半导体工艺兼容,适合大规模集成制造。尤其是 VCSEL 功耗低、可调频率高、垂直发射的优点,使其比 LD-EEL 更加适合消费电子智能终端。

1.2 晶圆级光学元件WLO是核心组件

WLO 晶圆级光学器件,是指晶元级镜头制造技术和工艺。与传统光学器件的加工技术不同,WLO 工艺在整片玻璃晶元上,用半导体工艺批量复制加工镜头,多个镜头晶元压合在一起,然后切割成单颗镜头,具有尺寸小、高度低、一致性好等特点。光学透镜间的位置精度达到 nm 级。传统光学镜头与晶圆级镜头对比

在 3D 视觉发射端结构复杂的情况下,光学器件采用 WLO 工艺,可以有效缩减体积空间,同时器件的一致性好,光束质量高,采用半导体工艺在大规模量产之后具有成本优势,是未来标准化的光学透镜组合的最佳选择。

由于WLO 工艺由于是采用半导体工艺和设计思路进行光学器件的制造,因此整个流程更加复杂,无论是设计流程还是加工环节,都需要更加先进的设计思路和更加精细的加工处理。
1.3 DOE对于结构光方案至关重要
在3D视觉结构光方案中,经过准直镜头校准后的激光束并没有特征信息,必须采用特定的 pattern 光学图案(如激光散斑等)实现深度信息的测量,因此下一步需要对激光束进行调制,使其具备特征结构,光学衍射元件(DOE)就是用来完成这一任务的。
VCSEL射出的激光束经准直后,通过DOE进行散射,即可得到所需的散斑图案。由于DOE对于光束进行散射的角度(FOV)有限,所以需要光栅将散斑图案进行衍射“复制”后,扩大其投射角度。

DOE 衍射光学元件(Diffractive Optical Elements)是基于光的衍射原理,利用计算机辅助设计,并通过半导体芯片制造工艺,在基片上(或传统光学器件表面)刻蚀产生台阶型或连续浮雕结构(一般为光栅结构),形成同轴再现、且具有极高衍射效率的一类光学元件。通过不同的设计来控制光束的发散角和形成光斑的形貌,实现光束形成特定图案的功能。


2 不可见光红外线(IR)接收模组
在3D结构光方案中,RX红外接收部分主要为一颗红外摄像头,用于接收被物体反射的红外光,采集空间信息。该红外摄像头主要包括三部分:红外CMOS传感器、光学镜头、红外窄带干涉滤色片。在基本结构上与目前主流的可见光摄像头类似,但是在具体的零部件方面存在差异:
1)可见光CMOS传感器需要识别RGB三色,对分辨率的要求高,红外CMOS只需要识别近红外光,分辨率要求不高;
2)可见光摄像头需要红外截止滤色片将红外光截止掉,只通过可见光,而红外摄像头只通过特定波段的近红外光,而将可见光截止掉,因此需要窄带滤色片;
3)由于可见光摄像头对图像分辨率要求高,因此光学镜头的设计非常复杂,红外摄像头对光学镜头的要求不高。
红外摄像头主要结构

典型可见光摄像头基本构成

2.1 特制红外CMOS

在 3D 视觉方案中,红外 CMOS的要求是其能接受被拍摄物体发射回来的红外散斑图案,不需要对其他波长的光线进行成像。


2.2窄带滤光片
在IR发送端,VCSEL发射的是940nm波长的红外光,因此在接受端需要将940nm以外的环境光剔除,让接受端的特制红外CMOS只接收到940nm的红外光。为达到这一目的,需要用到窄带滤光片。
所谓窄带滤光片,就是在特定的波段允许光信号通过,而偏离这个波段以外的两侧光信号被阻止。窄带滤光片主要采用干涉原理,需要几十层光学镀膜构成,相比普通的RGB吸收型滤光片具有更高的技术难度和产品价格。这个镜片在国内,很大部分由水晶光电提供。

2.3 接收端镜头(Lens)


接收端镜头为普通镜头,业内方案成熟,各个厂商都能提供。
总体而言,接收端除窄带滤波片较特殊,制造难度较高外,特制红外CMOS和镜头都是成熟产品,不存在制造难度。


3 可见光摄像头

可见光镜头模组,采用普通镜头模组,用于2D彩色图片拍摄,非新增业务。
在 3D 视觉体系中,无论是结构光方案,还是 TOF 方案,红外光线的作用都是采集深度 Z 轴信息,从而确定物体的景深信息,而物体的平面 XY 轴信息需要借助普通可见光摄像头进行采集。

4 图像处理芯片


图像处理芯片,将普通镜头模组拍摄的2D彩色图片和IR接收模组获取的3D信息集合,通过复杂的算法将IR接收端采集的空间信息和镜头成像端采集的色彩信息相结合,生成具备空间信息的三维图像。

该芯片设计壁垒高,尤其是算法层面的要求较高,需要根据3D视觉方案处理深度信息,目前仅有少数几家公司拥有该技术。

好了,3D成像技术的硬件构成我们全部拆解清楚了,总结成下图,有了这个基础,再找其供应商就是对号入座的事情了。

(0)

相关推荐

  • iPhone 12真正大杀器止5G,还有…………

    最近,iPhone的消息特别多,华叔每天都说,但也说不完.明年iPhone 12除了支持5G网络,甚至加入超声波屏幕指纹,还有一个亮点别忽略掉,可能会搭载一枚3D ToF镜头. ToF镜头到底是什么? ...

  • 苹果申请三项生物识别传感器专利

    EETOP编译自allaboutcircuits 苹果似乎正在进一步进军健康市场,新专利针对各种健康指标,包括AR/VR.血糖监测和临床睡眠分析. 虽然苹果公司对其即将推出的设计向来保持沉默(出于知识 ...

  • 联创电子

    最新款的iPad Pro已经搭载了LiDAR 激光雷达扫描仪后,iPhone也将承继这功能,国产手机大张旗鼓的弄三摄.四摄,甚至是五摄时,苹果走不一样的道路. 苹果CEO库克曾明确提出:"未 ...

  • 产业图解:摄像头(上)

    查看PDF全文 相关股票: 一.行业概况 本篇主要聚焦于消费电子等领域采用的紧凑型相机模块(Compact Camera Module, CCM)以及3D成像和传感领域. 摄像头行业中的概念汗牛充栋, ...

  • 单老师教大家玩转光固化,浅谈3D打印SLA和DLP的差别

    在前两辑中,单老师一直在得瑟自家的Pegasus Touch,也就是一款桌面级的SLA设备.但是,光固化可不仅仅只有SLA技术哦,目前很流行的面投影技术,也就是DLP在桌面级市场大有与SLA争锋的势头 ...

  • 浅谈古瓷釉光鉴定的辨伪

    冬青釉最早从青瓷上演变过来,到乾隆时期烧制已经非常成熟,冬青釉青中偏黄,釉面肥厚如脂.乾隆冬青釉印泥盒的光泽微厚有莹润感,光泽密度比较紧,点的反射光有深度,点与点之间的反射光有不规则的变化,极小点聚光 ...

  • 苹果又落后了!屏下3D结构光手机即将发布,iPhone明年才上打孔屏

    4月15日,老牌手机劲旅中兴发布了新款骁龙888旗舰机-Axon30 Pro和Axon30 Ultra,但这两款手机并未采用Axon 20上启用的屏下摄像头,还是比较普通的打孔屏设计.原因可能是屏下摄 ...

  • 太 极 反 归 论 ——浅谈太极拳之道原理篇

    有一幅漫画,画的是愚公移山,旁边是这样题词的:"愚公是个不会搬家的倔老头!"其与众不同的意境,迥异于常规的思维,令人若有所思.它意味着对常规观念的挑战.对于具有惯性思维的人们,展示 ...

  • 苹果侧目!屏下3D结构光面部识别来了:国产新旗舰或全球首发

    一直以来苹果的iPhone都是手机行业的领袖,其无论是在外观功能或配置方面的升级更新都会带动其它手机的跟进,成为新的标杆.然而这些年iPhone也被批过于保守,在很多新技术上束手束脚,不如国产手机的大 ...

  • 真正黑科技,中兴屏下3D结构光手机要来了,苹果三星也不能比!

    从第一款手机推出至今,手机各个方面都已经发生了翻天覆地的变化,其中最直观的当属外观,从刚开始前脸只有一小块屏幕,到如今已经逐渐向全面屏方向发展,终极追求当然是前脸没有任何遮挡,屏占比100%形态,前些 ...

  • 浅谈C# Dictionary实现原理

    使用C#已经有好多年头了,然后突然有一天被问到C#Dictionary的基本实现,这让我反思到我一直处于拿来主义,能用就好,根本没有去考虑和学习一些底层架构,想想令人头皮发麻.下面开始学习一些我平时用 ...

  • 中兴黑科技+屏下3D结构光技术= 中国再次领先!

    以前的手机产品,其屏幕的上下留有空白区域,所以摄像头.听筒.话筒都放置在这里.而现在的手机为了追求更多的显示面积,都在朝着全面屏的方向发展.所以就出现了刘海屏.水滴屏等类型的手机屏幕. 刘海屏顾名思义 ...

  • 浅谈美国剪羊毛原理!

    今天咱来简单的介绍一下美国是怎么剪全世界羊毛的. 美国金融操作的技巧非常细致和巧妙,属于专业行为. 笔者虽然不是金融专业,但是这种金融理论并不深奥,原理和规则都非常简单,属于一看就懂,笔者在此简单扼要 ...