首页 » 智能 » 一文看懂TOF_技巧_摄像头

一文看懂TOF_技巧_摄像头

admin 2024-08-30 03:25:25 0

扫一扫用手机浏览

文章目录 [+]

3D sensing是智能手机创新的趋势之一,当前正加速向中低端手机渗透。
目前实现3D sensing共有三种技能,分别为双目立体成像、构造光和ToF,目前已经比较成熟的方案是构造光和TOF。
个中构造光方案最为成熟,已经大规模运用于工业3D视觉,TOF则凭借自身上风成为在移动端较被看好的方案。

3D构造光最早运用于苹果旗舰iPhone X,构造光事理为通过近红外激光器向物体投射具有一定构造特色的光芒,再由专门的红外摄像头进行采集获取物体的三维构造,再通过运算对信息进行深入处理成像。
该技能目前共有编码构造光和散斑构造光两种实现种别。
构造光技能仅需一次成像就可得到深度信息,具备低能耗、高成像分辨率的上风,能够在安全性上实现较高担保,因此被广泛运用于人脸识别和人脸支付等场景。
但构造光技能识别间隔较短,大约在0.2米到1.2米之间,这将其运用局限在了手机前置摄像,紧张用于3D人脸识别屏幕解锁、人脸支付及3D建模等。

一文看懂TOF_技巧_摄像头 一文看懂TOF_技巧_摄像头 智能

ToF(Time of Flight)技能是2018年才被运用到手机摄像头的3D成像技能,其通过向目标发射连续的特定波长的红外光芒脉冲,再由特定传感器吸收待测物体传回的光旗子暗记,打算光芒来回的翱翔韶光或相位差,从而获取目标物体的深度信息。
ToF镜头紧张由发光单元、光学镜片及图像传感器构成。
其识别间隔可达到0.4米到5米,因此已有品牌,如OPPO、华为等,将其运用于手机后置摄像。
ToF技能具备抗滋扰性强、FPS刷新率更高的特性,因此在动态场景中能有较好表现。
其余ToF技能深度信息打算量小,对应的CPU/ASIC打算量也低,因此对算法的哀求更低。
但相对付构造光技能,ToF技能的缺陷在于其3D成像精度和深度图分辨率相对较低,功耗较高。

一文看懂TOF_技巧_摄像头 一文看懂TOF_技巧_摄像头 智能
(图片来自网络侵删)

双目立体成像事理较为大略,即利用双摄像头拍摄物体,再通过三角形事理打算物体间隔,合成立体图像。
其具有高3D成像分辨率、高精度、高抗强光滋扰的上风,同时能保持较低本钱水平。
但由于须要通过大量的CPU/ASIC演算取得它的深度和幅度信息,其算法极为繁芜较难实现,同时该技能易受环境成分滋扰,对环境光照强度比较敏感,且比较依赖图像本身的特色,因而拍摄暗光场景时表现差。
由于以上缘故原由,双目立体成像技能在手机上较少运用。

构造光技能和ToF各有上风,在移动真个运用上具有互补的特性,但不可否认的是,ToF的多场景运用呈现出了更为广阔的发展前景。
iPhone X对3D构造光的运用带动了这项技能的发展和渗透,目前相较于ToF,构造光技能在运用上更为成熟,出货量上明显占优。
而且构造光的扫描效果更为真实,具备更强的3D还原能力。
但遗憾的是,浸染间隔的劣势限定了其运用。
ToF技能填补了间隔上的毛病,由于能够支持更远的浸染间隔,ToF技能可以被运用于包含3D人脸识别、3D建模以及手势识别、体感游戏、AR/VR在内的更多场景中,从而为智能手机更娱乐性和实用性的体验。
此外,比较构造光技能,ToF的模组繁芜度低,堆叠大略,可以做到非常小巧且坚固耐用,在屏占比不断提高的外不雅观趋势下,更得到手机厂商的青睐。

ToF让3D建模“飞向平凡百姓家”

我们生活在一个三维的空间,对周围物体及环境的大部分履历来自于对深度信息的感知。
对付人们来说,立体化的3D视觉比2D图片的形式要生动、沉浸许多,这也是人们所追求的直不雅观体验。
为办理这一需求痛点,3D建模技能应运而生并迅速发展。
3D建模即通过相机等设备对物体进行采集照片,获取周围环境物体三维尺寸和深度信息,经打算机进行图形图像处理以及三维打算,从而全自动天生被拍摄物体的三维模型的技能。
曾经主流的3D建模实现都十分昂贵,而当3D镜头技能和传统的镜头结合起来,意味着在移动端即可实现3D建模,ToF技能正推动着3D建模运用 “飞入平凡百姓家”。

随着体感交互、3D识别与感知、环境感知以及AR舆图构建等技能与运用的发展,市场对 3D视觉与识别技能的兴趣日益浓厚,ToF的利用进一步丰富了3D建模技能的运用处景。

拍照虚化。
ToF具备更好的景深采集功能,加入智能手机后摄模组后,能够实现快速、远间隔获取更高精度的景笃信息,从而完成较构造光更大范围的3D建模,而且由于自带红外光源,其在暗光环境下得到的景笃信息同样准确。
因此,有TOF摄像头参与的成像在虚化效果上会更加真实,富有层次,从而能够带来更年夜大好人像模式体验。

体感游戏。
通过TOF技能能够采集到被拍摄人的身体深度信息,捕捉和采集身体的动作,进行手势剖断,掌握预制的3D建模人偶的形象和动作,实现真人和3D虚拟形象跟随,,用身体、动作和手势做游戏交互。

ToF助力消费级AR遍及。
ToF技能的运用亦是AR、VR时期的催化剂。
考虑到ToF的两个独特的优点——浸染间隔长、刷新率高,存在远间隔3D 测距需求的AR/VR是最能表示 TOF 上风的功能之一。
3D摄像头技能供应的手势识别功能将成为未来AR/VR领域的核心交互手段。
目前各大厂商推出的VR设备大都须要掌握器,游戏掌握器的上风在于掌握反馈及时、组合状态多。

3D摄像头技能供应的手势识别功能将成为未来AR/VR领域的核心交互手段。
目前各大厂商推出的VR设备大都须要掌握器,游戏掌握器的上风在于掌握反馈及时、组合状态多。
以HoloLens为例,就拥有一组四个环境感知摄像头和一个深度摄像头,环境感知摄像头用于人脑追踪,深度摄像头用于赞助手势识别并进行环境的三维重构。

HoloLens比较以往任何设备的强大之处,在于其能够实现对现实天下的深度感知并进行三维建模。
HoloLens 拥有拥有一组四个环境感知摄像头和一个深度摄像头,环境摄像头得到周围图像RBG信息,深度摄像头则利用TOF技能得到视觉空间深度图(Depth Map)并以此重修三维场景、实现手势识别。

下一波创新性革命,AR运用前景巨大。
外不雅观系列创新之后,下一波移动终端创新将环绕AR进行革命性创新。
光学领域TOF有望接力构造光,从生物感知到虚拟现实,从人脸识别到3D建模,带来家当端升级和用户体验优化,前置人脸识别+后置虚拟现实功能可能成为手机的下一个形态。
手机实现虚拟现实同样须要利用3D摄像头模组,进一步推动光学家当链的升级。

下一波创新性革命,TOF市场空间巨大

下一波移动终端创新将环绕AR进行革命性创新。
随着增强现实内容市场的发达发展,内容厂商不断推动AR/VR开拓平台的发展,一定会推动TOF家当的发展。
TOF有望接力构造光,从生物感知到虚拟现实,从人脸识别到3D建模,带来家当端升级和用户体验优化,前置人脸识别+后置虚拟现实功能可能成为手机的下一个形态。
伴随AR/VR的发展,ToF有望成为智能手机摄像头的下一个风口。

我们看到2019年3D感测手机大多集中在高端机等旗舰机型,构造光以苹果为代表,自iPhoneX后的机型都已经搭载构造光功能,而华为搭载TOF的机型数量最多。
根据Yole的预测数据也显示,环球3D成像和传感器的市场规模在2016–2022年的CAGR为38%,2017年市场规模18.3亿美元,2022年将超过90亿美元。
个中,消费电子是增速最快的运用处,2016–2022年的CAGR高达160%,到2022年消费电子市场规模将超过60亿美元。

从出货量上来看,我们预测智能手机3D感测需求将从2017年的4000万部增加至2019年的2亿部以上,个中2019年的ToF机型还紧张集中在几款高端旗舰机,从2020年开始TOF的出货量将进一步爆发,在整体3D感应中占比有望达到40%。

我们预测2019/2020年TOF的出货量为7760万/2.1亿部,同频年夜幅增长747%/166%。

BOM比较:TOF或更具本钱上风

我们估量ToF和构造光的BOM本钱大约为12~15美元和20美元,比较之下TOF更具有本钱上风。
以iPhone X为例,构造光技能的办理方案包括三个子模块(点投影仪,近红外摄像机和泛光照明器+靠近传感器),而ToF办理方案则将三个集成到一个模块中,可以将包装本钱降落。

我们估量在这个TOF模组中,芯片的本钱仍占紧张的部分,大约占到整体BOM的28%~30%。

深度解析3D Sensing摄像头家当链

目前TOF或构造光的3D感知技能均为主动感知,因此3D摄像头家当链与传统摄像头家当链比较紧张新增加红外光源、红外传感器和光学组件等部分。
通过对已经上市的主流3D摄像头产品进行拆剖解析,3D摄像头家当链可以被分为:

1、上游:红外传感器、红外光源、光学组件、光学镜头以及CMOS图像传感器;

2、中游:传感器模组、摄像头模组、光源代工、光源检测以及图像算法;

3、下贱:终端厂商以及运用。

TOF和构造光二者虽然事理不同,但其所须要的核心部件基本相同,TOF中的核心部件包括发射真个VCSEL光源、Diffuser等,吸收真个镜头、窄带滤光片、近红外CMOS等。

1.VCSEL:垂直发射光源,海内厂商逐步打破

VCSEL(Vertical-Cavity Surface-Emitting Laser,垂直腔表面发射激光器)是一种垂直于衬底面射出激光的半导体激光器。
由高下两个DBR反射镜和有源区这三部分组成。
VCSEL单价贵于LED、LD,可通过大规模量产降落本钱。
VCSEL的垂直构造更适宜利用晶圆级制造和封测,并且规模量产之后具有本钱上风。

VCSEL具有效率高、功耗低、传输速率快、制造本钱低等优秀特点,逐渐替代了LED成为主流选择。
发射光源包括两种,一种是边发射的(如LD),一种是垂直的(如VCSEL),前者一样平常波长较长,用于信息传输;后者可以通过压缩垂直腔体的容积用于体积较小的运用中,更适宜作为3D感知的发光源。
早期3D感知常常利用LED作为光源,但红外LED的相应速率较差,扫描结果不足精准。
VCSEL在3D感知领域性能优于LED,逐渐替代了LED成为主流选择。

VCSEL紧张进入壁垒在于资质认证和量产能力,海内厂商逐步打破。
目前VCSEL领域紧张厂商为光通讯芯片领域的国外大厂,包括Lumentum、Finisar、II-VI、Philips Photonics等,个中Lumentum是VCSEL环球领先的供应商,供应国际大客户新机型3D感知模组的激光源。

TOF 的 VCSEL 并不像构造光那样对编码图案有一定哀求,常规的规则排列即可,因此可供选择的 VCSEL 供应商也会更多。
未来VCSEL需求量激增,但VCSEL家当链过去被美国和日本少数厂商把控。
去年苹果推出iPhone X后,VCSEL需求持续加大,因此留给海内VCSEL公司很大的成长空间和市场空间。
海内的供应商如纵慧、睿熙、华芯等均取得了不小的打破。

2. Diffuser:将光调制成均匀的面光源

Diffuser的紧张功能为显示器供应一个均匀的面光源,材料需选择光透过率高的材料,将化学颗粒作为散射粒子,光芒在经由扩散层时会不断的穿过,在此同光阴线就会发生许多折射、反射与散射的征象,进而形成光学扩散的效果。
未来手机3D成像的Diffuser将会更加繁芜化与定制化,运用处景更加细分,同时随着TOF的爆发,产品设计也将持续创新,规模上风日益凸显。

3.窄带滤光片:只许可通过特定波长

窄带滤光片是带通滤光片的一种,是光谱特性曲线透射带两侧毗邻截止带的滤光片,即在特定的波段许可光旗子暗记通过,在其他波段则阻挡光旗子暗记,窄带滤光片的通带较窄,一样平常小于中央波长的5%。
目前环球紧张的窄带滤光片紧张有两家,美国的VIAVI和中国的水晶光电。

窄带滤光片在3D传感领域需求大,是3D视觉系统中红外光接管模组的组成部分,位于镜头和近红外图像传感器之间。
在3D视觉系统中,红外光源是实现深度丈量的关键,红外光源包括红外LED和激光器(紧张是VCSEL(红外激光发射器),在运作过程中,若VCSEL发射940nm波长的近红外光,为了吸收真个图像传感器只吸收到这一波长近红外光,须要通过窄带滤光片,将别的的环境光剔除。

水晶光电是海内光学精密薄膜镀膜龙头,在窄带滤光片上具有技能和先发上风。
目前大客户的窄带滤光片方案因此水晶与VIAVI互助的办法供应。
公司的强项在于镀膜工艺,估量新的竞争对手须要较长的韶光才能切入,护城河较高。
水晶有望捉住下贱3D sensing需求的放量,凭借技能和先发上风将充分受益。

4.3D图像处理芯片:难度较高

3D成像所需的图像处理芯片的技能难度更高,与一样平常的图像处理芯片有所差异,通过算法将IR吸收端采集的空间信息和镜头成像端采集的色彩信息相结合,进而天生三维图像。
由于芯片的技能壁垒较高,目前供应商仅为几个芯片巨子,包括STM、TI、NXP等。

5.成像镜头端:家当链较为成熟

手机摄像头对应的家当链企业包括图像传感器制造商、模组封装厂商、镜头厂商、马达供应商、滤光片供应商等。
由于行业技能壁垒和集中度高,家当链的龙头多为日本、韩国、中国台湾所垄断,大陆的厂商紧张集中在红外滤光片和镜头模组封装上,包括舜宇光学、欧菲科技、水晶光电、立讯精密(立景)、丘钛科技等。

在CIS市场份额上面,索尼一家独大,市场份额高达42%,三星居第二位,市场份额达到了18%,豪威排第三,市场份额为12%,随着手机、汽车、工业等下贱运用领域对CIS的需求不断增加,市场空间有望进一步扩大。
Yole Development数据显示,2016年CMOS图像传感器市场规模达到115亿美元,相较2015年同比增长约13%,估量2016至2022年环球CMOS图像传感器市场复合年均增长率将保持在10.50%旁边,2022年将达到约210亿美元。
出货量方面,2017年环球CIS出货量超40亿颗,估量2021年环球出货量将达70亿颗。

在摄像头模组上面,根据TSR的数据2016和2017年欧菲科技的市场份额为9%和13.3%,舜宇光学的市占率为7.9%和9.5%,丘钛科技的市占率为5.3%和6.5%。
2017年,环球TOP摄像头模组厂商霸占了环球超过50%的市场份额,比2016年增长了13个百分点,集中化趋势愈加明显。
一方面,家当集中度不断提高,其余一方面,以光学领域的双摄、3D摄像头和柔性显示为代表的功能性和差异化的创新层出不穷,持续利好自主创新能力强和具有家当整合及规模上风的龙头企业。

2018年,品牌集中度进一步加剧,环球TOP摄像头模组厂商与二、三线摄像头模组的出货量呈现两极分解,常日情形下,环球TOP摄像头模组厂商的月出货量可达35KK,而二、三线摄像头模组厂商最赶过货量不超过15KK。
前三大模组厂商也不断扩产,以知足下贱需求。

在镜头市场,中国台湾的大立光霸占绝对的龙头地位,在iPhone中供应了超过50%的镜头份额。
在中国手机厂商方面,舜宇光学镜头的市占率在不断增加。
目前大立光的年产能约为1.5亿,遥遥领先于其他厂商。

免责声明:本文由作者原创。
文章内容系作者个人不雅观点,半导体行业不雅观察转载仅为了传达一种不同的不雅观点,不代表半导体行业不雅观察对该不雅观点赞许或支持,如果有任何异议,欢迎联系半导体行业不雅观察。

本日是《半导体行业不雅观察》为您分享的第2131期内容,欢迎关注

半导体行业不雅观察

『半导体第一垂直媒体』

实时 专业 原创 深度

相关文章

数字化时代,探索最佳网站建设的奥秘

随着互联网技术的飞速发展,网站已经成为企业、个人展示形象、拓展业务的重要平台。在数字化时代,如何打造一个最佳网站,成为众多企业和个...

智能 2025-01-07 阅读0 评论0

数字化浪潮下,文字代码的革新与未来

随着科技的飞速发展,人类社会正迎来一场前所未有的数字化革命。在这场革命中,文字代码作为信息传递和存储的核心载体,正经历着一场深刻的...

智能 2025-01-07 阅读0 评论0