克雷西发自三里屯
量子位公众号 QbitAI
只要一台“手机”,普通用户也能随时随地拍摄出 AR 大片了。
这个看似手机的设备,就是 AR 独角兽 XREAL 最新推出的空间计算终端 Beam Pro。
不同于传统的 3D 拍摄,用它拍 AR 视频,不用后期处理,立马就能看,效果是这样婶儿的:
而且还能把 2D 应用迁移到三维空间,甚至把像 Xbox、PS5 这样的游戏主机,也串流到 AR 世界当中。
配合上 AR 眼镜,不必坐到电视前也能看电影、打游戏,再也不必担心会有人走过挡住画面了。
可以说,Beam 既是小型 3D 摄像机,又是 AR 终端驱动器,还是一个串流终端,平时当成普通平板来用也没问题。
价格也十分亲民,6+128GB 版本只要1299,甚至比单独一个 3D 镜头(1600 元)还要便宜。
那么,这究竟是怎样的一款产品?
人人都能成为 AR 创作者
首先了解一下 Beam Pro 的硬件参数:
- 外观上,搭载了 90Hz 6.5 英寸防频闪 LCD 屏幕,拥有两颗 5000 万像素摄像头和双 USB-C 接口。
- 计算与存储上看,内置高通骁龙 4nm 制程 8 核芯片,配备6+128 GB/8+256 GB 存储,支持最高 1T Micro SD 卡扩展。
- 连接方面,拥有2*2 MIMO 双天线,支持 WIFI6+ 蓝牙 5.2。
- 续航方面,内置 4300mAh 电池,在连接 XREAL Air 系列眼镜时可以连续使用 3 小时,支持最高 27W 的快充。
但比硬件参数更重要的,是内容生态,Beam Pro 的出现,也让这个生态变得人人都可参与。
过去,想要看一部 AR 电影,可能光是寻找片源就能让人累个半死,更不必说专业的制作了。
但 Beam Pro 则不需要任何专业知识就能拍摄,也无需任何后期处理,插上 AR 眼镜就能立刻欣赏自己的大作。
之所以能实现这一点,除了技术,还在于许多细节上的改变。
比如硬件层面,Beam Pro 的两颗摄像头就是专门为 AR 拍摄而设计,这也是硬件上 Beam Pro 与手机的最大不同。
在手机中虽然也有多颗摄像头,但往往负责着不同的拍摄任务,因此光圈参数也不相同,如果用手机的双摄拍摄 AR 影像,会出现景深不同步的问题。
另外,手机中的摄像头间距太近,不符合人类双眼之间的距离,拍出来的 AR 视频也会给人带来不真实感。
但 Beam Pro 所搭载的两颗 5000 万像素的摄像头,则采用了相同的配置,都是 14 毫米焦距配合 2.2 光圈,镜头间距则设计成了 50 毫米。
采用完全相同的摄像头,景深不一致的问题就得到了解决;增大后的镜头间距,也与人类的瞳距更接近了。
当然除了硬件,还需要算法上的支持。
Beam Pro 内置的双目立体校正算法,进一步消除了双主摄镜头的景深差异,让画面无叠影、成像显示更清晰,拍摄主体和背景的融入更加自然。
另外,XREAL 也延续了核心防抖科技 EIS,并为 3D 拍摄做了深度算法优化;在 3D 拍摄帧率上,支持防抖效果更好的 30fps 和流畅度更好的 60fps 两种模式,画面流畅度上逼近真实质感。
将 2D 内容带进 AR 世界
诚然,Beam Pro 将 AR 视频的门槛大幅降低,但视频只是 AR 世界诸多内容中的冰山一角。
想象一下我们用手机的时候,不可避免接触的就是海量应用,在 AR 世界也是同样的道理。
但实际上,由于终端保有量较低,开发者对此的热情并不高涨。
既然专业作者缺乏热情,Beam Pro 就采取了“曲线救国”的方法,将 2D 内容 3D 化,将普通应用带进 AR 世界。
具体来说,XREAL 专为空间计算打造了操作系统nebulaOS,结合自研算法,让 Beam Pro 把移动 APP 内容,直接“搬”进 AR 世界。
当然,Beam Pro 中也预装了影视、游戏、办公等多个热门内容应用,让丰富的 AR 内容“开箱即得”。
除了应用,Beam Pro 也支持直接把其他终端设备上的内容串流到 AR 世界当中。
只要在相同的局域网之下,无论是 Steam,还是 Xbox、PS5 等游戏主机,都能实时把游戏画面投射到 AR 眼镜里。
哪怕游戏机放在客厅,只要打开串流,也能躺在卧室里,戴上眼镜打游戏,不再需要用固定的姿势盯紧电视屏幕,也不必担心有人突然从画面前穿过了。
当然,2D 内容的投射,是受实际情况所限的过渡性方案,从长远上看,还是需要更多的原生应用。
因此 XREAL 在扩大用户规模的同时,还为开发者提供了 SDK,希望通过多种手段,吸引更多 AR 内容开发者加入。
AI 时代,AR 也在拥抱 AI
在 AI 时代,谈论一种新的硬件,如果不提 AI,仿佛总让人感觉少了点什么。
而对于 AI 与 AR 之间的关系,XREAL 创始人兼 CEO 徐驰这样说:
AI 与 AR 之间是一种“双向奔赴”——AI 是 AR 的最好载体,AR 是 AI 的最好交互。
一方面,AR 眼镜的真实视角能为 AI 提供最接近人类的视觉素材;另一方面,AI 驱动着 AR 设备当中的许多交互功能。
甚至在用户不能直观感受到的地方,AI 同样在默默付出。
不仅是 XREAL,实际上许多 AR 产品中都有的手势交互,就是非常标准的基于计算机视觉的 AI 智能网络模型做的任务,但在这个过程当中,用户不会感知到它是一个大模型或者什么模型在后面跑。
就像手势交互一样,在核心算法、感知算法、交互算法等方面,AR 设备都无法脱离 AI 的帮助。
不过在内容方面,AI 在 AR 世界当中可能刚刚甚至尚未起步,但未来在 AR 的土壤之中生根发芽,或许也只是个时间问题。