AR体验只能通过眼镜、智能手机?是谁把这样的想法塞进你的脑子的?世界顶尖的卡耐基梅隆大学的计算机科学学院(全世界排名第6),就另辟蹊径做出了一款奇特的设备,让你在“灯泡”下获得AR体验。
不一样的“灯泡”
跟普通螺口灯泡一样,这只名叫Desktopography“灯泡”插入螺口灯座,就可带来AR体验。隐藏于灯座之中的原型设备,从外观来看,螺口造型与竖式结构与灯泡相差无几。但整台设备却采用了小型投影仪、深度传感器、计算机,可以投射出多点触摸显示屏到物体的表面。
不止是桌面,冰箱、墙面等一切平坦的表面都可以实现投影。
只要按一定手势操作,就能开启设备界面,不同于方块状的交互界面,圆形的交互界面搭配上新的设备形态,给人眼前一亮的感觉。
选中计算器,尝试一下操作,按中123,屏幕上立马出现相应数字。你也可以对其进行任意移动。
对页面进行放大缩小,在页面上滚动,关闭页面等。
甚至,你可以双手操作,拉伸地图。
除了智能手机常用的一些设置外,它也为我们带来了一些惊喜。要知道,桌面交互并非是一时心血来潮。早在上个世纪,就已经进行了大量尝试。
画面都很干净整洁,对不对?但实际上,你的办公桌可能是这样的!
在如此复杂的投影环境中,只是简单的投影显然不能满足我们的需求。那么如果,投影的图像、应用程序能够避开这些障碍,选择一个更为空旷的环境呢?没错,这就是Desktopography带来的惊喜之一。
不满足于此,Desktopography还能够将投射的应用于现实世界中的物体“绑定”起来。甚至在你桌面投影日历的时候,日历也可以跟随书本的移动而移动。当你想要打开更多应用,挪开更大的地方时,应用已经随你挪动电脑时挪走了。是不是很省心?
未来接口组的黑科技
这样一款与众不同的设备,当然不是一蹴而就的。Desktopography项目隶属于卡耐基梅隆大学的未来接口组。而未来接口组(The Future Interfaces Group,FIG),正是其计算机科学学院下设的人机交互学院的跨学科实验室。
这个实验室的目标也不简单,想要创造新的感官和交互技术。Desktopography项目只是他们最新的尝试。未来接口组,想要让人与计算机间的交互行为变得更为高效、便利,所以他们努力的方向在新的使用方式上:包括可穿戴计算、触摸交互、手势接口等。
在Desktopography项目中,可以看到此前技术的积累。早在2016年他们就在探索新的交互方式。在他们之前,就早已有大量研究表明:深度摄像头加上投影仪能够使得任何平坦的表面成为一个对触碰敏感的显示屏。
存在的问题是,即便使用最新的深度摄像头,也难以保证获得足够的传感保真度。于是,他们发明了一项名为DIRECT的新的触摸追踪计算算法,融合了通过传感器捕捉的深度和红外图像。这项技术提高了大约15%的触摸检测率,比起此前最好的技术减少了55%的位置误差。
原型带来的革命?
在项目背后,其技术领头人Robert Xiao,在其中扮演了一个重要的角色。这个名字也不止一次地出现在未来接口组的项目中。其计算机科学、数学的相关背景,使他能够更从容采用传感器、机器学习、计算机视觉来创造新的交互技术。
我们能够看到,采用该交互技术的优势显而易见,无需穿戴HoloLens或者Meta这样笨重的设备,也无需使用智能手机,便可以在任何一个平面上,体验增强现实显示屏,像智能手机一般进行操作。甚至你不需要繁琐的操作,仅需要将其拧入标准尺寸接口的螺口插座即可。
Robert Xiao表示,“这是一次将增强现实带给日常生活的尝试”。他的做法无疑在“打破屏幕与设备之间互动的形式。”屏幕虽然与现实相互隔离,但是最终却将呈现的内容完美的融合进了我们所处的环境中。
但是我们也注意到,在Desktopography商业化前仍需克服大量障碍。例如,采用摄像头来实现精确的多点追踪,可能存在的问题是,摄像头拍摄到手的表面,却无法拍摄底部,在预估手指在何时会接触显示屏时可能十分困难。此外,在体积如此小的设备内,如何将设备产生的热量均匀分散也会是一个问题。Robert Xiao也承认,要让该项目变为真实产品可能仍需五年时间。但五年后的头显可能也会大不相同。
零镜观点
无论是VR、AR、MR设备均在发展之中,很难说设备终极形态是什么样子。但很难在市面上看到除眼镜、头显之外的尝试。在此之前,令人印象深刻的设备可能是HoloLamp。在并未最终定型之前,不同的探索可能会发展出不同的道路。延续20世纪90年代探索的Desktopography正是这种尝试的一种表现。与此同时,面对新设备时,我们也需要更多包容心去对待。像Desktopography,在颠覆我们认知的同时,无疑也在带给我们惊喜。