3D成像技术大PK,未来谁是王者

2020-08-28来源: EEWORLD关键字:3D成像  TOF  3D结构光  双目立体视觉

近年来,3D成像在工业和消费者应用中变得重要,具有3D成像功能的机器视觉系统可以更快,更准确地检查生产现场的组件。在消费者领域,3D成像为媒体提供更大的图像深度。3D成像技术的成熟拉开了二维向三维升级的帷幕,有望带动光学创新的新一轮革命。

 

如今,3D结构光、双目立体视觉和TOF是当今3D成像三大主流技术。它们各有特色,下面就为大家详细介绍三种技术的微妙之处。

 

首先科普一下什么叫做3D 成像?

 

3D成像受到最复杂成像物体——眼睛的启发。由于眼睛是分开的,每个人都从不同的角度看世界。快速覆盖一只眼睛,然后另一只眼睛,每次都表现出微妙但明显的角度差异。人类在视觉中感知的维度来自大脑将不同的图像组合成一个整体成为视差现象。基于此,3D成像在二维的基础上,实现了像素景深的叠加,拍照的同时记录下对象的立体信息,推动人脸识别、虹膜识别、手势控制、机器视觉等变为现实,是开启AI和AR时代的感知钥匙。

 

一、3D结构光

 

用过iPhoneX的都知道,它开启了光学成像的新大陆,3D结构光和TOF就应用在这款手机上。其中Face ID人脸识别系统就采用3D结构光。

 

 

结构光是通过近红外激光器向物体投射具有一定结构特征的光线,再由专门的红外摄像头进行采集获取物体的三维结构,再通过运算对信息进行深度处理成像。该技术目前有编码结构光和散斑结构光两种实现类别。

 

结构光技术仅需一次成像就可得到深度信息,具备低能耗、高成像分辨率的优势,能够在安全性上实现较高保证,因此被广泛应用于人脸识别和人脸支付等场景。但结构光技术识别距离较短,大约在0。2米到1。2米之间,这将其应用局限在了手机前置摄像,主要用于3D人脸识别屏幕解锁、人脸支付及3D建模等。iPhoneX上的Truedepth相机,用的是以色列PrimeSense公司的Light Coding技术。这种结构光方案,通过投射人眼不可见的伪随机散斑红外光点到物体上,每个伪随机散斑光点和它周围一定范围内的点集在空间分布中的每个位置都是唯一的,并将预先进行了存储。只要在空间中打上这样的结构光,整个空间就都被做了标记,把一个物体放进这个空间,只要看看物体上面的散斑图案,就可以知道这个物体在什么位置了。当然,在这之前要把整个空间的散斑图案都记录下来,所以要先做一次光源基准标定(pattern)。

 

 

如果你没有概念,就想象一下手电筒,几万个点投射在你手上,和投射在10米远处的物体上,每个点覆盖的面积是不是放大了很多倍­精度就会自然降低很多。

 

 

当然,结构光的缺点也比较明显:由于投射经过编码的图像或散斑光点,在室外容易被强自然光淹没,所以结构光方案在室外并不好用。当物体距离相机较远时,物体上投射到的图像或光点越大,精度也越差;它也容易受光滑平面的反光影响,比如投到镜子上。

 

需要说明的是,结构光法按投射方式可分为点、线、面三种方式。这些技术皆为提高编码图案的解调抗干扰性,以及更快获取深度点云而采取的不同技术手段,目前,在移动终端领域,结构光编码以静态编码为主。

 

 

3D结构光技术解决了双目匹配算法的复杂度问题,分辨率能达到1080p级别,测量精度高,算法复杂程度适中,但其精度随着距离增加将会下降,适合近距离使用。

 

但结构光的实现也有一定难度:

 

1)首先是经济成本,深度摄像头远高于一般的摄像头;

2)摄像头需要的空间和功率限制,手机摄像头已经可以做到很小的体积和很小的功率,但是深度摄像头还很难,特别是如果希望能达到比较高的精度;

3)很多深度摄像头是需要额外光源的,因此还要专门的散热设备。

4)后端的软件匹配。

 

3D结构光技术这么强悍,那能用在什么地方呢?

 

现在很多产品和行业已经开始大量使用3D结构光技术了, iPhone手机Face ID功能凭借着出色的体验已经得到了消费者们的广泛认可;OPPO Find X手机搭载的便是奥比中光3D摄像头,此外,还有其他场景也会用到:

 

1、智能手机

3D人脸解锁和支付、社交(根据捕捉人的面部表情生成专属3D形象和表情包)、视频直播、3D个性美颜、AR游戏级购物、室内导航等;

2、新零售领域

刷脸支付;商家则可以对客流进行智能分析,快速对商品进行识别和整理,并对货架进行实时监控等;

3、房地产和装修行业

通过3D空间扫描可以快速帮助设计师完成量房、设计等工作,大大提升工作效率;

4、安检和监控

如今新推出的智能门禁、闸机、智能门锁也都采用了人脸识别技术,这样可以让安检的效率更高,对于用户而言体验也会更好;

5、驾驶辅助安全

通过3D视觉自主核心算法可以将3D图像识别准确率提高到99.9%,并做到毫秒级响应,同时能全天候工作,监督预警保障驾驶安全;

6、智能机器人应用

提升智能机器人的感知能力,让它们做到更多的事情;

7、智能家居

可以让家电产品加入手势操控、智能开关机等创新功能,大大提高便捷度;

 

二、双目立体视觉

 

双目立体视觉(Binocular Stereo Vision)这项技术可有些年头了,它始于上世纪的60年代中期,是机器视觉的一种重要形式,基本原理是从两个视点观察同一景物,以获取在不同视角下的感知图像,然后通过三角测量原理计算图像像素间的位置偏差(视差)来获取景物的三维信息。这一过程与人类视觉感知过程是类似的。

 

 

经过几十年来的发展,立体视觉在机器人视觉、航空测绘、反求工程、军事运用、医学成像和工业检测等领域中的运用越来越广。

 

由于双目立体成像系统在场景缺乏特征时,经常会受到性能下降的困扰,因此在未被应用在智能手机成像中。举个例子,在面对墙壁平坦光滑的表面的情况下,立体成像系统捕获的 3D 信息通常不完整或不准确。

 

双目体视目前主要应用于四个领域:机器人导航、微操作系统的参数检测、三维测量和虚拟现实。

 

技术发展方向

 

就双目立体视觉技术的发展现状而言,要构造出类似于人眼的通用双目立体视觉系统,还有很长的路要走,进一步的研究方向比如:

 

1、如何建立更有效的双目立体视觉模型,能更充分地反映立体视觉不去确定性的本质属性,为匹配提供更多的约束信息,降低立体匹配的难度。

2、探索新的适用于全面立体视觉的计算理论和匹配择有效的匹配准则和算法结构,以解决存在灰度失真,几何畸变(透视,旋转,缩放等),噪声干扰,特殊结构(平坦区域,重复相似结构等),及遮掩景物的匹配问题;

3、算法向并行化发展,提高速度,减少运算量,增强系统的实用性;

4、强调场景与任务的约束,针对不同的应用目的,建立有目的的面向任务的双目立体视觉系统。

 

三、TOF让3D建模更简单

 

2018年iPhoneX 的问市把TOF技术推向了舞台,它通过向目标发射连续的特定波长的红外光线脉冲,再由特定传感器接收待测物体传回的光信号,计算光线往返的飞行时间或相位差,从而获取目标物体的深度信息。

 

 

现实中,立体化的3D视觉比2D图片的形式要生动、沉浸许多,这是人们所追求的直观体验。但曾经主流的3D建模实现都十分昂贵,而当3D镜头技术和传统镜头结合起来,意味着在移动端即可实现3D建模,ToF技术正推动着3D建模应用 “飞入寻常百姓家”,它的使用进一步丰富了3D建模技术的应用场景。

 

如今各大手机厂商都会将TOF考虑进去,因为有TOF摄像头参与的成像在虚化效果上会更加真实,富有层次,从而能够带来更好人像模式体验。

 

四、三大技术谁将称王

 

双目立体视觉、结构光和ToF 这三种3D 成像技术各有优缺点。

 

从软件复杂度角度而言:双目立体视觉主要依靠算法,软件复杂度高,计算量大。

从功耗角度而:ToF 方案功耗高、发热量大。

从测量准确性角度而言:结构光在室内弱光环境准确性高,但在室外强光干扰下准确度差。

从结构紧凑型角度而言:结构光方面紧凑型高。

 

 

上述来看,结构光和ToF各有优势,在移动端的应用上具有互补的特性,但不可否认,ToF的多场景应用呈现出了更为广阔的发展前景。iPhone X对3D结构光的应用带动了这项技术的发展和渗透,目前相较于ToF,结构光技术在应用上更为成熟,出货量上明显占优。而且结构光的扫描效果更为真实,具备更强的3D还原能力。但遗憾的是,作用距离的劣势限制了其应用。

 

ToF技术弥补了距离上的缺陷,由于能够支持更远的作用距离,ToF技术可以被应用于包含3D人脸识别、3D建模以及手势识别、体感游戏、AR/VR在内的更多场景中,从而为智能手机更娱乐性和实用性的体验。此外,相比结构光技术,ToF的模组复杂度低,堆叠简单,可以做到非常小巧且坚固耐用,在屏占比不断提高的外观趋势下,更得到手机厂商的青睐。

 

 

TOF市场空间更广阔

 

下一波移动终端创新将围绕AR进行革命性创新。内容厂商不断推动AR/VR开发平台的发展,必然会推动TOF产业的发展。TOF有望接力结构光,从生物感知到虚拟现实,从人脸识别到3D建模,带来产业端升级和用户体验优化,前置人脸识别+后置虚拟现实功能可能成为手机的下一个形态。

 

 

据估计,2019/2020年TOF的出货量为7760万/2.1亿部,同比大幅增长747%/166%。

 

BOM比较:TOF更便宜

 

预计ToF和结构光的BOM成本大约为12~15美元和20美元,相比之下TOF更具有成本优势。以iPhone X为例,结构光技术的解决方案包括三个子模块(点投影仪,近红外摄像机和泛光照明器+接近传感器),而ToF解决方案则将三个集成到一个模块中,可以将包装成本降低。

 

 

在这个TOF模组中,芯片的成本仍占主要的部分,大约占到整体BOM的28%~30%。

 

目前整体来看,三种主流的3D视觉成像技术各有所长,未来也许将会逐渐融合。比如远距离应用采用TOF,而近距离(如手机)则会采用3D结构光技术。现阶段这两种技术都得到了不少知名企业的支持,其中苹果、Intel、微软、奥比中光等企业都在3D结构光方面投入了诸多研发力量。

 



关键字:3D成像  TOF  3D结构光  双目立体视觉 编辑:muyan 引用地址:http://news.2689mr.com/MEMS/ic508142.html 本网站转载的所有的文章、图片、音频视频文件等资料的版权归版权所有人所有,本站采用的非本站原创文章及图片等内容无法一一联系确认版权者。如果本网所选内容的文章作者及编辑认为其作品不宜公开自由传播,或不应无偿使用,请及时通过电子邮件或电话通知我们,以迅速采取适当措施,避免给双方造成不必要的经济损失。

上一篇:Avnet开发专用在树莓派应用的空气质量传感器
下一篇:TI IWR6x毫米波传感器贸泽开售

关注eeworld公众号 快捷获取更多信息
关注eeworld公众号
快捷获取更多信息
关注eeworld服务号 享受更多官方福利
关注eeworld服务号
享受更多官方福利

推荐阅读

全面解析机器视觉成像系统
;机器人视觉三维成像方法3D 视觉成像可分为光学和非光学成像方法。目前应用最多的还是光学方法,其包括:飞行时间法、激光扫描法、激光投影成像、立体视觉成像等。 飞行时间 3D 成像飞行时间(TOF)相机每个像素利用光飞行的时间差来获取物体的深度。目前已经有飞行时间面阵相机商业化产品,如 Mesa Imaging AG SR-4000, PMD Technologies Cam Cube 3.0,微软 Kinect V2 等。 TOF 成像可用于大视野、远距离、低精度、低成本的 3D 图像采集,其特点是:检测速度快、视野范围较大、工作距离远、价格便宜,但精度低,易受环境光的干扰。例如 Camcueb3.0 具有可靠
发表于 2020-09-11
全面解析机器视觉<font color='red'>成像</font>系统
Elmos推出新的3D ToF成像仪 可进行物体探测和手势识别
据外媒报道,半导体与传感器解决方案供应商Elmos推出了新的适用于汽车内外饰应用的3D ToF(飞行时间)CMOS成像仪E527.31。该3D成像仪通过了汽车标准AEC-Q 100认证,具有优化功耗的特性。除了正常的工作模式外,还具有睡眠模式,在睡眠模式下,功耗会降到最低。(图片来源:Elmos官网)E527.313成像仪是专为人机界面(HMI)应用而设计,可以实现车辆近场目标检测和车内外手势检测。E527.313的典型内饰应用场景包括可手势控制的车内信息娱乐系统,或车内人数监控。也有望用于后备箱和车门手势控制。如果将该成像仪集成到B柱中,还可以避免与移动和静止的障碍物(如骑行者、路沿或标记桩等)发生碰撞。此外,该成像仪还可
发表于 2020-03-16
Elmos推出新的<font color='red'>3D</font> ToF<font color='red'>成像</font>仪 可进行物体探测和手势识别
松下展示新的雷达成像和V2X技术 推进互联和自动交通发展
据外媒报道,近期,日本松下公司(Panasonic Corporation)在新加坡举行的世界智能交通大会(ITS World Congress)上展示了其广泛的交通技术,涵盖汽车终端、交通基础设施,以及智慧城镇。(图片来源:松下官网)松下的创新技术包括新的无线和成像技术,以防止交通事故,推进互联和自动交通的发展。同时,旨在提供服务和解决方案,实现更舒适的移动出行。该公司推出了一种新的移动电池共享服务(Battery Sharing Service),目前正在印度尼西亚进行实证研究,通过用户之间共享可拆卸和便携式电池,从而解决续航里程和充电时间的问题。松下的新型79GHz波段3D成像雷达即使在夜间或恶劣天气情况下,也能识别车辆
发表于 2019-10-23
松下展示新的雷达<font color='red'>成像</font>和V2X技术 推进互联和自动交通发展
车内3D显示器新技术 实现摆脱3D眼镜也能成像
德国汽车工业巨头博世公司正在开发一项新技术,该技术将在其未来版本的车内显示器中应用——无需眼镜就能成像的3D显示技术。这些3D显示器的应用,意味着用户在驾驶途中不需要带上眼镜也能看到3D效果,而且还直接跳过了眼球追踪这一步,而眼球追踪技术是现在绝大多数高质量裸眼3D显示器的关键技术步骤。也就是说,该公司现在正在研发一种不需要戴眼镜也不需要观众从特定位置观看的3D成像技术,而这些都将会成为成功将3D显示技术引入汽车的关键。原因很简单,驾驶员需要专心驾驶,而当前所有的车内显示器的基本指导原则就是,提供驾驶者短时间内简单易掌握的信息,不分散驾驶员的注意力。那为什么还会想要在仪表盘或者车内显示器上显示3D视觉效果呢?博世表示,很大
发表于 2019-08-13
车内<font color='red'>3D</font>显示器新技术 实现摆脱<font color='red'>3D</font>眼镜也能<font color='red'>成像</font>
苹果新专利:可生成3D地图或物体轮廓的光学投影和成像设备
据外媒报道,近日,美国专利商标局授予苹果59新专利。在这份获得授权的专利报告中,有一项专利涉及生成3D地图或物体轮廓的光学投影和成像设备。更重要的是,它旨在控制未来的3D用户界面。  在上面的专利图中,苹果注意到3D地图可以由诸如iMac之类的主计算机用作3D用户界面的一部分,这使得用户能够与在计算机上运行的游戏和其他应用程序以及元素进行交互。 专利中说明了其中的投影装置,包括:照明源,其被配置为产生包括亮点和暗点的照明图案;以及透镜阵列,被定位成使得阵列中的透镜投射不同的光的图案的相应部分场景中的暗点和暗点;其中透镜被配置为将图案的各个部分投影到场景的不同的相应区域上。 这是类似的技术
发表于 2019-07-15
苹果新专利:可生成<font color='red'>3D</font>地图或物体轮廓的光学投影和<font color='red'>成像</font>设备
核芯达—致力于自动驾驶中的电脑视觉技术
的机器视觉方面,结构光、TOF、双目立体视觉三大主流技术:  TOF:简单来讲,通过光的飞行时间来计算距离。 结构光:通过红外激光器,将具有一定结构特征的光线投射到被拍摄物体上,再由专门的红外摄像头进行采集反射的结构光图案,根据三角测量原理进行深度信息的计算。 双目立体视觉:原理类似于莱卡相机,对近距离和远距离有一些视差的补偿。核芯达对这个技术很是看好,原因就在于不容易受到强光干扰,成本较低也没有什么专利困扰。李慎威解释,人对亮到全黑环境会有一个适应过程,人在这方面的过程非常慢,如果从暗到亮,这个适应是比较快的。对于TOF和结构光则会有一些短板,近期特斯拉与一辆侧躺的白色卡车相撞事件就是一个很好
发表于 2020-08-17
核芯达—致力于自动驾驶中的电脑视觉技术
小广播
换一换 更多 相关热搜器件

About Us 关于我们 客户服务 联系方式 器件索引 网站地图 最新更新 手机版

站点相关: 光学传感器 麦克风 压力传感器 加速计/陀螺仪 消费电子 汽车电子 通信电子 综合资讯 温度传感器 其他技术

词云: 1 2 3 4 5 6 7 8 9 10

北京市海淀区知春路23号集成电路设计园量子银座1305 电话:(010)82350740 邮编:100191

电子工程世界版权所有 京ICP证060456号 京ICP备10001474号 电信业务审批[2006]字第258号函 京公海网安备110108001534 Copyright © 2005-2020 2689mr.com, Inc. All rights reserved
无需充值送彩金的彩票平台 易信机器人 绑定手机送彩金的网站 彩票大赢家投注 充值1元送彩金 送彩金的娱乐棋牌游戏 送彩金的娱乐网 2019最新白菜网送彩金论坛 足球投注注册送彩金 澳门银河官网送彩金