%>

你以为摄像头是用来拍照的?那是下一代交互平台

By XSSY-LED, CNN Updated 2017-09-08

     

       从最早西门子手机30万像素玩具般的摄像头,到现在手机上2000万像素的前置和后置摄像头,高质量图像传感器在移动设备上的普及不仅重创了卡片机和中低端单反相机,而且培养了用户每天上传数十亿图像数据。以snapchat和google lens为代表的社交和生产力应用,将摄像头界面,变成了新一代键盘。

       而随着iqe、lumentum、finisar等公司生产的vcsel激光器被用在iphone 8上,3d传感器将会成为移动设备的标配,手机摄像头将不仅能够拍摄高清影像,而且能够获得环境的深度信息,让用户可以将虚拟信息与现实生活相结合。这种「虚实结合」引发的是人机交互的变革,正像触摸屏改变了用户和手机的交互,3d传感器和摄像头的进化,带来的则是人机交互,人与环境交互的革新。

       从触摸屏到nano sim卡,iphone引领了智能手机的进化方向。当10周年版的iphone 8将3d传感器变成必备配件时, 3d传感器的普及也就是时间问题了。而得益于这些微小的半导体晶圆,用户的手机将变成一个沟通现实和虚拟世界的窗口,替换下鼠标、触摸屏,创造新的人机交互方式。

       而传闻中iphone 8将会配备的vcsel激光器,其用途是环境感知、人脸识别和虹膜识别,简言之,就是不仅能利用摄像头纪录画面,而且能通过激光器测量手机周围环境的深度信息(depth information)。目前主流的深度信息捕捉方法有两种,tof(time of flight)以及结构光(structured light coding)。前者利用激光从物体表面反射回手机的速度来测量二者之间的距离,实现深度信息获取;后者利用发出的带有结构的光源,通过光在物体上图像的畸变判断距离,获取深度信息。虽然方式不同,但两种方案都不可避免的要用到vcsel激光器。

       在应用方面,google的tango项目二代方案采用的就是tof技术,而结构光的代表则是被苹果收购的primesense,其生产的体感设备kinect早在2009年就被用在了微软的xbox 360游戏机上。有机构预测,此次iphone 8将会采用前置tof,后置双目结构光的方案,建立一个完整的3d感应体系,而这可能是颠覆的开始。

       当把用于tof和结构光的激光传感器放进手机中后,我们就赋予了手机感知周围3d环境的能力,让机器能够「看懂」周边的世界。而有了这样的能力,能够打开更多手机的使用场景。目前手机上应用最广泛的就是指纹识别,3d传感器的加入,将使得虹膜识别和人脸识别方案更加可靠。此前三星的galaxy note 7已经推出虹膜识别功能,但是成功率依然是问题。而有了3d传感器,iphone 8很可能将虹膜和人脸识别推广开来,增加生物识别的可能性。

       谷歌的tango和微软的hololens有一个令人印象深刻的功能,就是用摄像头扫视房间一周后,即可在系统中建立一个房间的3d轮廓,类似于在机器的大脑中建立了一个深度地图,让机器能够认识到这个房间有多大,都有什么家具,同时了解到自己在这个三维环境中的位置,并时时做出调整。而让机器「认知」环境十分重要,因为这是接下来虚拟现实融合的基础。

      在苹果的wwdc大会上展示了arkit的demo,在摄像头界面上,可以看到实体桌面上有一个虚拟的冒着热气的咖啡杯。现在看来效果已经不错,但如果想要将虚拟物体和现实物体更真实的融合在一起,还需要3d传感器,后者让手机能够更加清楚的知道桌面的位置,因此能够让桌面上的虚拟杯子更加真实,而不是像pokemon go!一样仅仅是2d贴图。而一旦打下3d感知的基础,混合现实的大门也即将开启,摄像头带来的颠覆也将奔袭而至——改变人机交互方式。

       在苹果建立的arkit twitter页面上,全球开发者上传了无数脑洞大开的demo,从虚拟格尺到虚拟博物馆不一而足。但是,具备3d感知能力的设备改变最大的,其实是人机交互的方式。从最早的代码、到微软的windows图形界面,人们与机器的交互经历了数码和模拟的变迁。而vr、ar和混合现实为代表的新一代技术,则将人机交互还原成人类的自然交互——你看到一块石头,用手就可以将其捡起来,并且能扬手扔出去。在理想状态,这样的设备可能是一台ar/mr眼镜,用户可以看到逼真的虚拟物体和真实世界的物体叠加在一起,用户可以同时和虚拟及真实物体进行互动,且双方也会发生交互。而目前由于技术问题,可能还达不到这个水平,但是苹果、facebook等巨头想出的方案,就是将混合现实急先锋的重任,放在人手一台的手机身上。具备了3d感知的手机,就是用户手中的一扇「混合现实视窗」,而其界面就是摄像头。

        今年的谷歌开发者大会上,其团队推出的新应用google lens,将整个摄像头界面变成了搜索页,用户可以打开摄像头,拍下眼前的餐馆或者电影院来预约买票,或者拍下眼前的花卉,手机会自动给出花的名字和种类。就在几个月后,我们可以看到在摄像头界面,配备了3d传感器的手机将会为用户进行室内导航、3d扫描建模等等先进功能。

        第一代iphone推出后,人们根本不知道该拿这一大块触摸屏做什么,只能玩玩《愤怒的小鸟》和水果忍者,大概谁也没想到用手指划来划去会成为主流的交互方式。同理,3d传感器和双摄像头的组合的普及,人们还只是拿来玩个滤镜自拍,但是后者所代表的交互方式的变革,可能要比触摸屏带来的影响更深也更广。

 

COPYRIGHT © 2017 SHENZHEN XU SHRNG SEMICONDUCTOR CO., LTD. ALL RIGHTS RESERVED 粤ICP备09079088号  POWERED BY VANCHEER