设为首页 - 加入收藏 ASP站长网(Aspzz.Cn)- 科技、建站、经验、云计算、5G、大数据,站长网!
热搜: 创业者 数据 手机
当前位置: 首页 > 站长资讯 > 评论 > 正文

dToF传感器的产业化之路该怎么走?(2)

发布时间:2021-01-21 07:18 所属栏目:17 来源:未知
导读:AR室内设计。2020款iPad Pro使用了dToF LiDAR技术,通过这一技术可以获得3D空间的深度信息,建立详细的室内环境空间数据,模拟出摆放了新家具后的情况。宜家的IKEA Place应用,利用AR让家居产品的外观和在家中的摆

AR室内设计。2020款iPad Pro使用了dToF LiDAR技术,通过这一技术可以获得3D空间的深度信息,建立详细的室内环境空间数据,模拟出摆放了新家具后的情况。宜家的IKEA Place应用,利用AR让家居产品的外观和在家中的摆放效果直接呈现在用户眼前。

医疗学习。Complete Anatomy是一款教医学院学生通过虚拟技术了解心脏、实时肌肉运动、神经系统等人体结构的软件,在2020款iPad Pro上可以使用这一软件,它将帮助专业人士更准确的评估病人的身体运动情况,为未来医学发展带来更多可能性。

3D摄像头技术提供的手势识别功能将成为未来AR/VR领域的核心交互手段。目前各大厂商推出的VR设备大都需要控制器,游戏控制器的优势在于控制反馈及时、组合状态多。以HoloLens为例,就拥有一组四个环境感知摄像头和一个深度摄像头,环境感知摄像头用于人脑追踪,深度摄像头用于辅助手势识别并进行环境的三维重构。

拍照虚化。ToF具备更好的景深信息采集功能,加入智能手机后摄模组后,能够实现快速、远距离获取更高精度的深度图(depth map),从而完成较结构光范围更大的3D建模,而且由于自带红外光源,其在暗光环境下获得的景深信息同样准确。因此,有TOF摄像头参与的成像在虚化效果上会更加真实,富有层次。华为2019年发布的旗舰机P30 Pro在后臵3D成像与感知模组中加入ToF镜头辅助,ToF镜头获取的更多景深信息加强背景虚化功能,相比双目视觉更加精准,使得得到的图像虚化边缘更加清晰、更具表现力。

手势识别。目前不少手机具备的悬浮手势识别功能,不用直接接触手机屏幕,仅借由前臵ToF的对手势的3D感知,通过如在手机前挥挥手这样简单的操作来实现翻页、滚屏等普通操作。体感游戏相比前者更具交互性,通过TOF技术能够采集到被拍摄人的身体深度信息,捕捉和采集身体的动作,进行手势判定,控制预制的3D建模人偶的形象和动作,实现真人和3D虚拟形象跟随,用身体、动作和手势做游戏交互。

ToF技术的应用是AR、VR时代的催化剂。考虑到ToF的两个独特的优点——作用距离长、刷新率高,存在远距离3D测距需求的AR/VR是最能体现TOF优势的功能之一。3D摄像头技术提供的手势识别功能将成为未来AR/VR领域的核心交互手段。

dTOF技术的应用有望推动AR内容的完善,加速消费级AR普及。苹果2017年便针对开发者们发布了用于iOS设备上AR应用开发的ARKit开发工具,2020年发布的iPad Pro为消费电子设备首次搭载dToF模组,可视为苹果针对5G时代AR领域的进一步布局。iPad Pro搭载的LiDAR(激光雷达扫描仪),采用Sony 3万像素10μm dTOF图像传感器,SPAD阵列的探测器,并集成了Lumentum的VCSEL芯片和TI的VCSEL驱动芯片,能达到ps级时间分辨率,可实现5米范围内的3D感知与成像,具备更快的AR建模速度、更高的测量精度和更少的抖动、错位。

Sony的dTOF方案首次采用3D堆叠工艺,像素内连接通过混合键合互连技术将探测器晶圆和逻辑电路晶圆键合实现,同时,深沟槽隔离(Deep trench isolation)也被应用,充满金属的沟槽完全隔离了像素。从而有效控制了dTOF传感器的尺寸,使其成功的应用在iPad这类小型消费电子设备中。

目前iPad Pro的LiDAR共呈现出三种典型场景的应用。AR测量、AR游戏和AR装修设计。

AR测量:LiDAR可以快速计算人的身高,并展现垂直和边缘引导线。通过开发者开发的app可实现对物体尺寸、建筑物更精细的测量。

AR游戏:LiDAR通过对周围真实环境的扫描和快速获得深度信息能力,为AR游戏开辟了更广阔的设计空间。如官网展示的《炽热熔岩(Hot Lava)》电子游戏,可以把客厅变成一个虚拟的熔岩环境,游戏中的玩家可以跳到家具上以此来避开模拟中的地板熔岩。iPad Pro上市后带动开发者不断丰富iOS平台上AR游戏内容,也使一些原有的AR游戏因为玩法升级而更具有生命力。

AR装修:iOS上的Shapr3D app,借助LiDAR对房间进行扫描创建3D模型,用户可以对该模型展开编辑或添加新对象,使用AR可以查看实际房间在编辑后的虚拟效果,帮助用户在装修动工前更真切体验设计效果。宜家Place应用同样可以通过扫描一个房间获得与之匹配的家具推荐,然后使用AR查看家具摆放效果。

dTOF在iPad Pro上的应用,可以视为苹果打通AR生态硬件基础的第一步。未来苹果通过技术改进和突破,有望将dTOF引入手机端以及更多地AR设备,促进AR硬件设备的发展同时,也激发设计师基于dTOF的特性开发如建筑、教育、医疗等更多场景的AR内容应用,推动AR应用生态持续完善。

华为河图(Cyberverse)定义地球级XR应用(包括VR、AR、MR等扩展现实技术),将AR应用拓展到更广阔的数字世界。华为河图(Cyberverse)被定义用来提供地球级的虚拟现实融合服务的数字平台,华为AR地图是其推出的第一个商业产品,主要功能包括AR实景导航、全息信息展示、虚实融合拍照及其他虚拟活动等。全场景空间计算能力是河图的核心,这一能力所需的宏观地图可以使用卫星定位,而室内及一些微观场所的建模定位则依赖智能手机的3D Sensing来完成。目前华为P40系列机型已经能够支持华为AR地图。

下一波移动终端创新将围绕AR进行革命性创新。AR/VR开发平台的搭建和完善,及增强现实内容市场的蓬勃发展,必然会推动TOF产业的发展。TOF有望接力结构光,从生物感知到虚拟现实,从人脸识别到3D建模,带来产业端升级和用户体验优化,前臵人脸识别+后臵虚拟现实功能可能成为手机的下一个形态。伴随AR/VR的发展,ToF有望成为5G时代智能手机摄像头的下一个风口。

下一波创新性革命,TOF市场空间巨大

下一波移动终端创新将围绕AR进行革命性创新。随着增强现实内容市场的蓬勃发展,内容厂商不断推动AR/VR开发平台的发展,必然会推动TOF产业的发展。TOF有望接力结构光,从生物感知到虚拟现实,从人脸识别到3D建模,带来产业端升级和用户体验优化,前臵人脸识别+后臵虚拟现实功能可能成为手机的下一个形态。伴随AR/VR的发展,ToF有望成为智能手机摄像头的下一个风口。

我们看到2019年3D感测手机大多集中在高端机等旗舰机型,结构光以苹果为代表,自iPhoneX后的机型都已经搭载结构光功能,而华为搭载TOF的机型数量最多。根据Yole的预测数据也显示,全球3D成像和传感器的市场规模在2016–2022年的CAGR为38%,2017年市场规模18.3亿美元,2022年将超过90亿美元。其中,消费电子是增速最快的应用场,2016–2022年的CAGR高达160%,到2022年消费电子市场规模将超过60亿美元。

dToF传感器的产业化之路该怎么走?

(编辑:ASP站长网)

网友评论
推荐文章
    热点阅读