正在阅读:

【专访】小米Face ID供应商Mantis Vision:虚拟会议场景很快就会实现

扫一扫下载界面新闻APP

【专访】小米Face ID供应商Mantis Vision:虚拟会议场景很快就会实现

3D技术能把真实的世界数字化,相比于二维成像,它未来有更多场景和可能性。

图片来源:网络

《王牌特工2》中有一个场景:特工们只需要戴上AR眼镜,就能实现远程开会,世界各地的特工聚在一起,坐在长桌旁商讨事务。一家以色列技术公司Mantis Vision已经通过手机将这项技术变为现实。

5月31日,小米8发布,搭载了Face ID技术,红外人脸识别,官方称即使在黑暗环境下也能快速解锁。这也是第一款在Face ID上能与苹果对标的安卓手机。

Mantis Vision是其3D结构光供应商。自从苹果公司2013年以3.45亿美金收购Prime Sense、并在iPhone X中首次将3D结构光用于人脸识别和支付后,这项技术就备受关注。这是该技术在安卓手机上的首次尝试。不同于iPhone X的DOE(衍射光学元件)投影,Mantis Vision采用基于掩膜的编码结构光,通过创新的专利编码技术,获取深度信息。

3D捕捉技术目前有三种主流方式:

  1. 双目成像(stereoscopic):它模拟人的双眼,使用两个或者两个以上的摄像头同时采集图像,通过比对这些不同摄像头在同一时刻获得的图像的差别,使用算法来计算深度信息,从而多角三维成像。现在手势识别领域的Leap MoTion使用的就是这种技术。
  2. 光飞行时间(TIme of Flight):通过光打过去和返回来的相位差计算距离,实现3D成像。TOF系统可同时获得整个场景,确定3D范围影像。利用测量得到的对象坐标可创建3D影像,并可用于机器人、制造、医疗技术以及数码摄影等领域的设备控制。代表厂商有微软(Kinect2代)、意法半导体、英飞凌、德州仪器等。
  3. 结构光(Structure Light):通过激光把不同形态的光斑打到物体上。这些光斑人眼不可见,但可以用红外摄像头捕捉到,通过光斑反射过来的形变去推测物体表面的形状。

第三种结构光技术目前是业界比较成熟的深度检测方案,很多的激光雷达和3D扫描技术都是采用的结构光方案。同时,这也是苹果iPhone X和Mantis Vision采用的技术方案。

完成后,Mantis Vision同时提供的编码技术,在高分辨率模式下,使用1M传感器能获得120K特征点,使用VGA传感器能获得40K特征点;更多的真实坐标点,帮助保留物体更小的细节特征,还原扫描目标的原貌,同时有效降低处理运算量。

这是什么概念?3D 成像点数会决定物体的成像质量。如果点数过少,成像会有漏洞。据Mantis Vision中国区负责人介绍,iPhone X 3D投射发射器发射了2.8万个点,成像是1.7万个点。到年底的成品上,Mantis Vision会达到12万个坐标点的量级。

以色列公司Mantis Vision已经成立有13年的历史了,一直专注于3D及计算机视觉领域的创新技术。之前获得过高通、索尼、三星等企业的投资。2018年3月,该公司正式进入中国。根据联美控股此前的公告:联美控股(600167)与以色列方面共同投资成立合资企业“螳螂慧视科技有限公司”,致力于将世界顶尖的3D及计算机视觉领域创新技术应用并服务于中国市场。除双方合资的螳螂慧视公司之外,其还是以色列Mantis Vision公司的第一大股东。

中国区负责人告诉界面新闻记者,在多年研发的基础上,Mantis Vision专利的自动校准技术,极大地提高了3D相机使用的稳定性。在日常使用中发生碰撞,或因温度变化引起机械形变的过程中,Mantis Vision凭借强大的技术,能支持设备在一定形变范围内,通过软件进行实时主动校准,以保证高质量3D数据的获取。

虽然在小米8上,该技术只用于3D人脸识别和支付应用。但未来,这项技术承载的是真实世界input的角色,将真实世界数字化。从而产生一些与传统二维成像完全不同的应用场景。

比如目前主流的裸眼3D展示技术,可以追踪到你眼球的位置。用户是在看网页、广告、在页面上哪个点停留的时间多,都可以做出测算。人眼眨眼的频率、瞳孔的放大缩小,可以反映80多种不同的情绪,根据这些信息,手机的前置摄像头可能会变成最了解你的人。

现在的广告投放主要依靠点击和搜索引擎,该技术很有可能彻底颠覆这种商业模式。

再比如,如果应用到新零售上,用户走进一家商店时,门口的3D摄像头就可以自动识别出这个人的身材、合适的服装尺寸,直接向你推荐服装甚至适合你的搭配风格。基于此,,甚至可以用来调整库存情况。这是目前很多“试衣镜”屏幕没有办法比拟的。

针对大数据方面的汇总分析,Mantis会提供行业相关的计算机视觉关键算法,如服装零售行业,提供人体测量、姿势识别算法;安防领域的人脸识别算法等。

回到文章开头,在未来的虚拟会议上,前面180度的镜像会出现在会议室里、或者出现在别人的桌子上。如果有几台设备,就可以实现360度全息投影了。这项技术将在今年AWE上展示。

未经正式授权严禁转载本文,侵权必究。

评论

暂无评论哦,快来评价一下吧!

下载界面新闻

微信公众号

微博

【专访】小米Face ID供应商Mantis Vision:虚拟会议场景很快就会实现

3D技术能把真实的世界数字化,相比于二维成像,它未来有更多场景和可能性。

图片来源:网络

《王牌特工2》中有一个场景:特工们只需要戴上AR眼镜,就能实现远程开会,世界各地的特工聚在一起,坐在长桌旁商讨事务。一家以色列技术公司Mantis Vision已经通过手机将这项技术变为现实。

5月31日,小米8发布,搭载了Face ID技术,红外人脸识别,官方称即使在黑暗环境下也能快速解锁。这也是第一款在Face ID上能与苹果对标的安卓手机。

Mantis Vision是其3D结构光供应商。自从苹果公司2013年以3.45亿美金收购Prime Sense、并在iPhone X中首次将3D结构光用于人脸识别和支付后,这项技术就备受关注。这是该技术在安卓手机上的首次尝试。不同于iPhone X的DOE(衍射光学元件)投影,Mantis Vision采用基于掩膜的编码结构光,通过创新的专利编码技术,获取深度信息。

3D捕捉技术目前有三种主流方式:

  1. 双目成像(stereoscopic):它模拟人的双眼,使用两个或者两个以上的摄像头同时采集图像,通过比对这些不同摄像头在同一时刻获得的图像的差别,使用算法来计算深度信息,从而多角三维成像。现在手势识别领域的Leap MoTion使用的就是这种技术。
  2. 光飞行时间(TIme of Flight):通过光打过去和返回来的相位差计算距离,实现3D成像。TOF系统可同时获得整个场景,确定3D范围影像。利用测量得到的对象坐标可创建3D影像,并可用于机器人、制造、医疗技术以及数码摄影等领域的设备控制。代表厂商有微软(Kinect2代)、意法半导体、英飞凌、德州仪器等。
  3. 结构光(Structure Light):通过激光把不同形态的光斑打到物体上。这些光斑人眼不可见,但可以用红外摄像头捕捉到,通过光斑反射过来的形变去推测物体表面的形状。

第三种结构光技术目前是业界比较成熟的深度检测方案,很多的激光雷达和3D扫描技术都是采用的结构光方案。同时,这也是苹果iPhone X和Mantis Vision采用的技术方案。

完成后,Mantis Vision同时提供的编码技术,在高分辨率模式下,使用1M传感器能获得120K特征点,使用VGA传感器能获得40K特征点;更多的真实坐标点,帮助保留物体更小的细节特征,还原扫描目标的原貌,同时有效降低处理运算量。

这是什么概念?3D 成像点数会决定物体的成像质量。如果点数过少,成像会有漏洞。据Mantis Vision中国区负责人介绍,iPhone X 3D投射发射器发射了2.8万个点,成像是1.7万个点。到年底的成品上,Mantis Vision会达到12万个坐标点的量级。

以色列公司Mantis Vision已经成立有13年的历史了,一直专注于3D及计算机视觉领域的创新技术。之前获得过高通、索尼、三星等企业的投资。2018年3月,该公司正式进入中国。根据联美控股此前的公告:联美控股(600167)与以色列方面共同投资成立合资企业“螳螂慧视科技有限公司”,致力于将世界顶尖的3D及计算机视觉领域创新技术应用并服务于中国市场。除双方合资的螳螂慧视公司之外,其还是以色列Mantis Vision公司的第一大股东。

中国区负责人告诉界面新闻记者,在多年研发的基础上,Mantis Vision专利的自动校准技术,极大地提高了3D相机使用的稳定性。在日常使用中发生碰撞,或因温度变化引起机械形变的过程中,Mantis Vision凭借强大的技术,能支持设备在一定形变范围内,通过软件进行实时主动校准,以保证高质量3D数据的获取。

虽然在小米8上,该技术只用于3D人脸识别和支付应用。但未来,这项技术承载的是真实世界input的角色,将真实世界数字化。从而产生一些与传统二维成像完全不同的应用场景。

比如目前主流的裸眼3D展示技术,可以追踪到你眼球的位置。用户是在看网页、广告、在页面上哪个点停留的时间多,都可以做出测算。人眼眨眼的频率、瞳孔的放大缩小,可以反映80多种不同的情绪,根据这些信息,手机的前置摄像头可能会变成最了解你的人。

现在的广告投放主要依靠点击和搜索引擎,该技术很有可能彻底颠覆这种商业模式。

再比如,如果应用到新零售上,用户走进一家商店时,门口的3D摄像头就可以自动识别出这个人的身材、合适的服装尺寸,直接向你推荐服装甚至适合你的搭配风格。基于此,,甚至可以用来调整库存情况。这是目前很多“试衣镜”屏幕没有办法比拟的。

针对大数据方面的汇总分析,Mantis会提供行业相关的计算机视觉关键算法,如服装零售行业,提供人体测量、姿势识别算法;安防领域的人脸识别算法等。

回到文章开头,在未来的虚拟会议上,前面180度的镜像会出现在会议室里、或者出现在别人的桌子上。如果有几台设备,就可以实现360度全息投影了。这项技术将在今年AWE上展示。

未经正式授权严禁转载本文,侵权必究。