不用翻墙下Pokemon Go也能玩上AR啦!

普通的吊灯除了照明还能有什么用?

三个来自卡内基.梅隆大学(Carnegie Mellon University, CMU, 以计算机和机器人享誉世界)的博士亲手告诉你,它还可以是你通往AR世界的大门!

无论是你的书桌,还是冰箱,墙壁,哪怕任何一个表面(甚至都可以不是平的),都可以成为增强现实大显身手的舞台。但这可不意味着复杂繁琐的操作,你只需像在智能手机屏幕上一样,动动手指,就能享受到美妙的AR体验。

这一名为Desktopography的技术由CMU下属的Future Interfaces Grop研发,设备十分简单。仅需一个小的投影仪,一个深度感测器和一台用来将图片投影到各个平面上的笔记本电脑即可营造出AR场景。原先的版本是由灯罩来完成投影任务,不过在最新一版的原型中,已经升级换代为了台灯。

Desktopography可以将包括计算器、地图在内的诸多物品投影到桌面上,你只需要动动手指即可与它们互动,正如玩iPad一样轻松简单。

其最大的亮点是,就算桌面并不十分平整,甚至摆满了各种杂物,也都不会影响到Desktopography,它依然可以十分出色的完成任务。

在我们深入探索这款“AR台灯”之前,不妨先来看一看其背后的技术团队究竟是何方神圣。

(上图为3D打印毛发,下图为Teslatouch)

Future Interfaces Group(FIG)的名字已经直接了当地道出了其任务与使命——通过打造全新传感和界面技术,来创造更为先进与愉悦的人机交互体验。其在2010年发布了第一款产品Teslatouch触摸技术,短短八年来,已经为我们带来了多达26种黑科技。其中既有可穿戴电脑设备,触摸交互,手势界面等硬核技术,也偶有3D打印毛发这种妙趣横生的黑科技。

而具体到Desktopography这个项目,则由即将在CMU开始攻读博士的加拿大籍华裔学生Robert Xiao主导,在他的两位导师Chris Harrison和Scott Hudson的辅助下完成。

(从上至下依次为Robert Xiao, Chris Harrison, Robert Hudson)

在他们这篇论文的开篇,Xiao向我们介绍了这一领域的历史,遇到的困难,与他们所取得的进步:

“打造一个能够在桌面上提供混合现实与虚拟的交互界面的系统,这个想法其实早在几十年前就已经被提出,并非是这次VR/AR热潮中才诞生的新鲜产物。但是至今,这个领域都没有哪怕一个系统能得到较为广泛的应用。制约其发展和普及的一个重要瓶颈是,原先的产品在设计时只考虑了在平整表面上应用的场景,在可应对的表面的多样性和复杂性上有着极大的限制,在实际使用中,很难于不规则或是堆满物品的表面上发挥效果。”

为了解决这个问题,Xiao的团队找到了十种交互方式,并把它们引用到AR桌面系统来展示其可行性。(若想深入了解这一过程,这里是他们的论文

而他们的成果是显著的。

当你把杯子放在桌子上时,配套软件能迅速发现平面上这一“凸起”。不同于以往傻傻地把图像投到杯壁上的前辈们,Desktopography会选择迅速转移阵地,将图像投影到新的位置。

哪怕是图片都无法淋漓尽致地展现这神奇的景象,让我们直接来看视频吧。

这并不意味着Desktopography将本能地选择躲避所有不规则物体,你可以选择将虚拟景象绑定到实实在在地物体上。比如你选择将日历投影到好看的笔记本上,完成锁定后,当你移动笔记本时,日历的投影也会移动,从而保持对其依附的笔记本的相对静止。

稍显可惜的是,目前Desktopography依然处于试验阶段,面临着这样那样的诸多问题,短期内无法进行大规模生产和普及。

举例来说,其中一个看似琐碎但相当棘手的现实问题是——为了打造更好的用户体验,Xiao不得不把需要用到的投影仪、感测器等诸多硬件紧凑地组合在一起,而如何解决这个硬件的散热问题就十分让人头痛。

谈及到具体的研发进程,Xiao选择了更为保守现实的回答,认为将这个原型转化为可以大规模商业化应用的产品,大概还需要五年左右的时间。

不过尽管如此,Xiao依然乐观地表示这是相当有意义的一次尝试Xiao和他的导师开发Desktopography的初心,就是希望能在不额外增添任何传感器或是电子产品的条件下,将AR融入现实生活。而目前来看,他们也真得实现了这一愿景。不同于微软的HoloLens或是Meta研发的Meta2, Desktopography摆脱了巨大头盔给用户带来的不便与困扰。更赞的是,甚至连玩Pokemon Go时必备的智能手机在这里也变得不需要起来。

“我们希望能重塑人机交互的模式,将其从我们的屏幕和电子设备的桎梏中解放出来。现在,人机交互是和现实世界脱离的。举个例子,当你戴上耳机,沉浸在最新的电视剧里时,你其实已经与周围的世界短暂地失去了联系。我们试图打破这一界限,将人机交互融入到我们所处的现实环境之中。”

我们之前曾报道过另一盏赋予普通桌面可交互能力的台灯Lampix。而Desktopography与其相比,优势突出在能更为灵活地应对各种复杂的界面,以及体积更为小巧上。

在如此简便巧妙的新型人机交互下,一直以轻薄著称的iPad都显得无比笨重起来。

随身带上小小投影仪,只要有一块说得过去的桌面,就可以随时轻松刷剧。

不过,分辨率,图像呈现乃至隐私问题(或许你并不想让整个办公室的人都知道你喜欢看天线宝宝),都是相关从业者需要面对和解决的。


来源: 36kr