中秋佳节独在异乡,微软这个黑科技让亲人一秒来到身边

作者:欧狄

独在异乡为异客,每逢佳节倍思亲。

中秋佳节之际,诗人王维的七言绝句再次成为许多背井离乡之人的内心写照。物理空间依然是不可逾越的鸿沟,幸运的是,在技术日新月异的今天,我们得以借助科技这座虚拟桥梁,拉近与亲人的心理距离。

中秋佳节想让亲人一秒来到身边,能借助的工具,除了漫画里哆啦 A 梦的任意门,还有微软的黑科技 Holoportation。

Holoportation 是微软于今年 3 月份发布的新型 3D 科技,能实时对人体 3D 模型进行重建、压缩,并且以全息图像的方式传输到世界上的任何一个角落。

远在他方的用户只要戴上 HoloLens 这类混合现实设备,就可以在所在空间中实时重现全息人像的一举一动。用户不仅能看到全息人像,还可以与之交谈、互动。

HoloLens-holoportation-930x523.png

话不多说,来看看演示视频:

(Holoportation 演示视频,中文翻译来自创客星球)

如果不想点开视频,可以阅读下文的 GIF 详解。

需要说明的是,下面 GIF 图里,白色上衣是真实的人物,左下角的画中画是白衣人戴着 HoloLens 所看到的画面。和白衣人进行全息对话的人有两位,分别是白衣人的同事和女儿。

Holoportation-08.gif

上面这个 GIF 是演示的效果,按理说没有佩戴上显示设备是看不到全息图像的。

只有双方一起戴上 HoloLens,彼此才能看到对方的全息人像。同时,双方都可以听到彼此的声音,进而用语言交流。

Holoportation-01.gif

真实人物和全息人影还能互动,比如击掌,以及父亲发出指令让女儿跳下椅子。

Holoportation-02.gif

Holoportation-03.gif

此外,Holoportation 这项科技还有一个非常温馨的功能,它能将全息对话记录下来,并进行回放。戴上 HoloLens,你仿佛能看到「活的记忆」。

Holoportation-04.gif

Holoportation-05.gif

更令人振奋的是,由于这些全息影像本身就是 3D 模型,你可以对其进行缩放,以上帝视角来观看「记忆回放」。

Holoportation-06.gif

Holoportation-07.gif

或许你心里会有疑问,这种全息对话场景只在科幻电影里出现过,微软是不是在画大饼?

100% 可以肯定的是,微软 Holoportation 是真实存在的,它的实际效果也像视频演示般具有科幻感,但这项技术还只是存在于实验室中。

所以,我们什么时候才能用上 Holoportation?

微软在发布这项技术时,没有透露太多细节,但在演示视频中,我们还是可以略窥 Holoportation 所需要的技术流程:采集 3D 信息——重建 3D 模型——传输——显示。

屏幕快照 2016-09-17 下午1.31.50.png

演示视频中出现了很多组黑色的仪器,这是用来采集区域内人物和物体运动的摄像头。

这一整个摄像头系统具备深度采集能力,能采集高质量的 3D 图像,类似 Kinect 的深度摄像头。

「但 Kinect 深度摄像头只能追踪人体骨骼,而 Holoportation 可以采集到人体的高质量细节信息。为了打造这套系统,我们从头构思了摄像头的 3D 传感器。」视频中的演示者、微软研究经理 Shahram Izadi 在接受 Wired(连线)采访时透露。

环绕布置的多个摄像头无死角地采集到 3D 图像后,定制的软件会将这些图像拼接起来,形成一个完整的、栩栩如生的动态 3D 模型。3D 模型经过压缩后传输到世界上任意角落的显示终端(如 HoloLens)。Izadi 说道:

整个过程是实时进行的,我们希望能在 33 毫秒内完成所有事情。

要在这么短时间内完成,需要强大的图像处理性能和巨大的带宽做保证。图形处理方面,Izadi 团队用的是 Nvidia 现成的 GPU。

而在带宽方面,Izadi 没有透露具体的数字,但无疑是普通带宽难以承受的。并且,大部分的视频流编解码器都没有特意正对 3D 模型进行过优化。这又加大了数据传输的难度。

如果观察视频足够仔细,你会发现两个房间的家具摆放都是一样的,摆放的位置也是重叠的。而且,家具下面还贴有白色胶带做定位。这说明,Holoportation 目前还只能在一个做了的受控环境里运行。

种种技术限制注定了 Holoportation 这套设备成本不菲,远超出普通消费者可以接受的范围。在接受 Wired 采访时,Izadi 坦承:「虽然 Holoportation 最终是面对消费者的产品,但最近几年,还是会先进入到公司里的会议室。一套 Holoportation 设备是挺贵的,但还够不上全世界飞来飞去的出差。它能帮公司省下不少钱。」


(还不知道 HoloLens 是什么?点击我们以前的文章详细了解:一探价值不菲的 HoloLens :它值三千美刀吗?