美国专利和商标局(USPTO)公布了一项苹果公司AR技术的专利文件。文件称,通过先进硬件和复杂计算,这项技术可将虚拟物体嵌入真实环境,并且在画面中移动或删除真实存在的物体。
对苹果公司而言,“将虚拟物体置于真实环境”远不是AR技术的全貌,这只是AR技术的开始。
2015年,苹果公司收购了AR技术的领导者——德国Metaio公司。在此之前,Metaio已经延长了这项AR专利的有效期,该专利最早是2007年在德国申请的。2010年,Metaio在美国也获得这项专利,去年11月,将其转让给了苹果公司。
这项专利的重点,是以看上去最真实的方式,将虚拟物体置于真实环境中。也就是说,专利关注的是虚拟物体与现实世界图片之间的融合,而这项技术始终是仿真AR体验面临的最大难题。
举个例子,要想将一把虚拟的椅子嵌入一段真实环境的视频中,必须有精确的位置数据、精细的物体边界、准确的图像比例尺等等细节支持。如果没有足够先进的硬件设备支撑复杂的运算程序,这把虚拟的椅子很可能不能正常显示,出现透视或是几何上的问题,或者干脆不在画面上出现。
苹果公司通过高清相机、强大的图像处理器和先进的定位工具来解决这一难题。多亏了iPhone的上市,用户才刚刚得以接触到这些工具。
简单来说,这项技术先利用高清相机捕捉到真实环境的二维图像,确定图像中至少一个物体的相对位置。之后通过景深图的生成、雷达、立体照相机等技术,收集三维空间的图像信息,包括地板、墙壁的相对位置。
然后,将你需要的二维环境图像分离出来,用于放置虚拟物体,同时可以删去真实环境中不需要的物体。这样,用户才能真正体验到虚拟与真实物体间的碰撞。
文件显示,这项技术将可应用于销售、维修、生产等众多相关领域。比如,用户可以通过AR来摆放、挪动家具,而不必费事去挪动真实的家具。而且除了将虚拟沙发、书桌摆放在真实环境中,你还能将真实环境中已有的物体彻底删除。
必须说明的是,将已有物体从二维图像中删除并非易事。为实现这一操作而分离出的二维图像,必须有极为精确的景深数据,在几何、物体质地及其它因素上的数据,也必须足够完善。
这项技术生成的图像,可通过手机应用查看,效果类似Pokemon GO和Snapchat滤镜。而这项技术还将有半透明展示效果。微软推出的Hololens全息眼镜,采用了与这项专利类似的技术。
不过,摆放、删除家具只能体现这项技术的冰山一角。Metaio还计划将这项技术应用于AR汽车导航,比如设计一款平视显示器。
尽管没有详细说明,文件显示,这项技术可以隐藏全部或者部分车内环境,因此司机开车时能看到更为宽广、清晰的路况。不仅如此,据报道苹果公司正在研发AR导航系统,未来可应用于自动驾驶汽车。
去年苹果公司从黑莓QNX挖来一批工程师,研究AR平视显示器,并让其可以支持手机应用、Siri和其它一些可以解放双手的技术。同时,苹果公司可能正在悄悄测试类似于Oculus Rift和HTC Vice的VR头戴式显示器。
专利文件还包含许多图片,显示了这项AR技术的运算过程。
尚不清楚苹果公司是否会将这项专利投入市场,但有消息称,近期苹果将发布某款AR系统。配备双镜头的iPhone 7 Plus可能是这款AR系统的关键,毕竟iPhone照相的人像模式已经具有深度感知功能。