本篇文章3694字,读完约9分钟
北京,5月11日,科技步行者新闻(文字/余宜万):还记得那个有趣的广告吗?卡通形象与真人有着相同的表情,这也是iphone x的卖点之一,而实现这一功能的3d结构光相机模块就在它的小刘海里。Iphone引领了这项技术,但国内终端制造商不仅打破了这一领域的坚冰,还实现了5g视频通话。
5月10日,oppo正式完成了世界上首个使用3d结构光技术的5g视频通话演示。Oppo在演示中使用了高通公司的5g新空港终端原型,并通过定制oppo r11s智能手机的rgb和结构光摄像头采集了被摄对象的颜色和3D深度信息,然后通过5g传输,最终实现了3d人像图像在远程显示器上的还原。这次演示的完成不仅开启了5g应用的探索,也引发了对5g时代终端形式的更多思考。
5g 3d视频通话演示
5g将给手机行业带来什么?oppo研究院完成的一系列演示并不是从3d结构光开始的,5g连接带来的丰富应用成为第一个被分享的部分。据oppo研究院标准研究中心主任唐海介绍,oppo于2015年成立了5g标准团队,2017年成立了通信标准部,2018年成立了oppo研究院标准研究中心。Oppo参与了3gpp ran1、ran2、ran4和sa2的相关工作;参加中国5g测试工作组,参与终端规范的编制;参与gti并承担5g终端白皮书的编写工作。
oppo研究所标准研究中心主任唐海
从2g时代的跟风到5g时代的引领,国内厂商正在全方位渗透自己的力量。谈到参与5g技术研究和标准制定的初衷,唐海表示:oppo拥有大量的手机用户,因此有必要从技术影响力、产品影响力和行业影响力三个方面参与国际标准的制定,以确保最终用户的体验或整个行业的质量。通过标准先行,为后续产品的设计和推广奠定基础;以超高速和低延迟为用户带来更好的业务体验,并为未来的物联网提供基本框架;参与并合作完成5g通信标准和规范的制定,从用户的角度推动技术发展。
Oppo在5g终端的标准制定方面做了大量扎实的工作。2015年9月,他支持3gpp需求的建立,参与了5g需求的讨论,并在3gpp需求国际研讨会上做了主旨发言;2016年3月,支持建立3gpp 5g研究项目(si),参与与国内厂商的5g研究项目讨论,并出口数百份稿件;2017年3月,他支持建立3gpp 5g工作项目(wi),深入参与技术讨论,并输出数百份稿件。在3gpp 5g核心技术讨论中,oppo充当重要功能的讨论组织者;在3gpp 5g技术评估工作中,作为第一个终端企业,提交了模拟评估结果;Oppo支持5g系统下的语音和视频服务解决方案。作为主要参与单位,OPPO参与编写语音服务的技术要求和测试规范,并推动行业的实施。
已经上升到国家战略的5g将给用户带来什么?作为终端制造商,这也是oppo最关心的话题。5g连接的更高速度、更低延迟和更大容量将深入到手机等超级终端的应用层面。Oppo给出了他们对5g时代终端的理解,有三个普遍性。5g具有高速(embb)、大容量(mmtc)和低延迟(urllc)的特点。在embb中可以实现普适现实,在mmtc场景中可以实现远程医疗和智能家居等普适感知,在urllc场景中可以实现自动驾驶和云学习等普适控制。
随着5g标准在embb能力上的首次成熟,oppo将探索5g网络技术与其他新的成像和传感器技术的融合,并结合对用户需求的准确洞察,实现泛在现实的核心应用场景,包括远程虚拟现实(Remote virtual reality,Vr)、增强现实(ar)和联合现实(jr),充分利用5g高度率和低延迟的特点,支持终端和云之间的可视内容的实时合成。
那么,5g将给手机行业带来什么呢?或许这将重塑手机行业的竞争格局。如果我们坚持目前的手机形式,恐怕在5g很难取胜,我们必须提前布局。Oppo的判断是,泛在现实(ur)将成为5g embb的核心应用之一,人们现在所能感知的ar/vr远未达到泛在现实的标准,但5g网络上3d视频的实时传输使其成为可能。网络能力提升和终端创新总是交替领先,相互促进,最终互补。5g embb的首次成熟将引发新一轮手机技术创新。Oppo一直致力于5g的未来研发,urllc和5gmmtc的标准化仍在进行中。oppo 2022-2025年的embb增强技术(5.5g)将同时投入研发。唐海说道。
3d结构光技术为5g应用插上了翅膀。除了5g,3d结构光是oppo展示的另一个关键词。首先,我们需要了解3d结构光的工作原理。三维结构光的功能是通过多个复杂传感器的协作来实现的。固定光源发出光并将其投射到物体表面。然后采集设备采集物体表面反射的反射图像。然后在采集设备上运行算法,分析物体在三维环境中的反射效果,分析其景深信息,构建三维结构。3d结构光可以形成三维人脸图像,从而实现人脸识别解锁和支付功能,安全性高。
oppo研究院软件研究中心主任陈艳表示,3d结构光有三大技术。第一种是结构散斑技术,其技术原理是通过多点激光发射源将激光发射源打碎并做标准值,形成多个像散斑形成形变;第二项是结构编码,它也是由激光源发出的,但通过一层桅杆,形成不同的明暗条纹,通过物体表面反射条纹的变化来分析物体的距离和形状;第三种解决方案是相移条纹,它与第二种解决方案相似,但也不同。其解决方案是通过投影明暗条纹形成一定角度的变形进行多帧分析和合成。
oppo研究院软件研究中心主任陈艳
在如此复杂的技术下,三维结构光与传统的单摄像机和双摄像机相比有其自身的优势。三维结构光可以实现毫米景深信息检测,在黑暗场景中其优势更加突出。高精度三维点云数据作为三维重建的基础,可以提供成千上万的点和数据。例如,在好莱坞大片中,许多电影中人物的动作都是通过传感器的点来收集的,最终形成人的四肢和面部的点的信息,从而重建出一个三维图像。三维结构光可以提供成千上万的点和数据,可以满足人们对三维重建的需求。陈艳说。
无论技术多么先进,它都将为最终用户服务。3d结构光能给最终用户带来什么?苹果已经在iphone x上进行了实践,并为3d人脸安全支付了费用。基于深度学习的人脸智能识别算法可以从输入的人脸特征和深度信息中快速提取个人安全识别特征。安全特征有10000多个维度信息,可以保证百万分之一的准确性。该算法将该安全信息与输入时的安全信息进行匹配,以确定安全认证是否通过。Oppo通过三个指标完成3d人脸安全支付的解锁功能:人脸识别、活体检测和视线检测。现场试验证明,任何检测失败都会导致解锁失败。
三维人像重建技术的一个重要应用是三维美。二维美的精度可以达到296个人脸采集点,而三维技术可以提取数千甚至数万个特征点。利用结构光深度相机对三维人像进行复原,然后利用高精度的三维人脸信息进行更细致的磨皮、美白、大眼和瘦脸处理,使人像更具立体感和自然感。3d光效技术可以使3d建模后的用户脸部特征出现在各种环境光环境中,展现真实场景的外观,甚至提供类似电影大片或工作室的摄影效果,达到专业摄影水平。
三维人像重建可以实现三维视频通话。这是3d技术和5g技术的完美结合。陈艳说。同时,3d结构光技术在增强现实和游戏领域也很有前景。3d ar可以通过结构光双相机捕获的精确3d信息来实现精确的ar标签和微观表达。3d ar游戏利用结构光对周围环境进行精确建模,并将模型实时导入游戏中,实现虚拟和真实三维世界的紧密融合,达到逼真的三维效果。陈艳说。
Oppo的3d结构光的技术实现没有合作伙伴的支持是无法实现的,但是陈艳说现在不方便透露合作伙伴的情况。3d结构光确实是一项非常复杂的技术。oppo与业内领先的制造商合作,oppo与业内许多优秀的合作伙伴在激光发射器和高精度深度识别等多个方面开展合作。谈到知识产权,陈艳的回答相当自信。oppo的合作伙伴拥有许多3d结构光的核心专利,我们已经就这项技术的联合研发达成共识。
oppo研究所硬件研究中心主任白健当天率先发布消息,最后一个出现。首先要宣布的是以5g为核心的高速、高带宽、高吞吐量演示,它挑战了160mbps的最高上行速率和1.4gbps的下载速率。第二个演示是oppo 3d生物识别技术,现在已经可以大规模生产了。oppo将在6个月内正式将这项技术商业化。第三个演示是3d视频通话中的一些基本技术,如3d动态建模。3d静态建模需要等待一段时间,但动态建模是实时3d动态建模。这些场景的结合,加上5g的高速、高带宽和高吞吐量的优势,将在未来实现无限的应用场景。
oppo研究院硬件研究中心主任白健
最近,奥罗拉大数据公司发布的报告显示,今年第一季度,华为和oppo的市场份额均超过苹果,分别排名第一和第二。另一家市场研究机构——嘉汉(Sino)最近发布了一份关于2018年第一季度中国智能手机市场的报告,称oppo、vivo、苹果、华为和光荣(Glory)在销量方面位列前五名。Oppo已经在用户心中建立了稳固的立足点,同时也是高通5g试点计划的参与者。带3d结构光翼的oppo在5g时代必将飞得更高。
来源:搜狐微门户
标题:你不了解的3D结构光 将在5G应用中扮演什么样的角色?
地址:http://www.shwmhw.com/shxw/46984.html