专题栏目:ARVRMR虚拟现实

边玩王者荣耀边追剧,悬浮屏幕,这款MR眼镜做到了

未来,VR头显和AR眼镜将融为一体,并以轻巧、便携和高效的形态被人们应用在生活中的各处。2021年,VR产业发展明显升温,但这似乎距离前面描述的目标还有很长的路要走。

就在上周,陀螺君从B站某UP主那学到了一个实现类似效果的半吊子玩法。其实就是基于Oculus Quest头显的边界系统Guardian功能,在开启透视的同时显示VR界面并调整到合适的透明度玩VR游戏。

Quest开Guardian功能实现伪MR视效(图源:B站)

这种黑白透视的新奇体验,令陀螺君不禁联想到:如果真有一款结合了AR眼镜的增强现实显示效果和VR头显的6DoF强交互玩法的产品,那它的体验究竟如何呢?

实际上,还真有一款叫“鸿鹄”的MR眼镜与这一想法不谋而合。恰好,陀螺君也在这周收到了这款产品制造商影创科技寄来的快递。就这样,陀螺君抱着上面的疑惑开启了这次的体验之旅。

售价2W块

一款硬实力在线的MR眼镜

图源:VR陀螺

鸿鹄,由影创科技和英国PhotonLens联合设计,是首批搭载高通骁龙XR2平台的混合现实设备之一,其主体分为主机、可拆卸6DoF体感手柄和MR眼镜三个部分,眼镜和主机之间则通过Type-C数据线连接。

从外观来看,“鸿鹄”给人的第一印象更像是一个缩小版的Switch掌机。但所谓麻雀虽小五脏俱全,“鸿鹄” 的一副蓝牙手柄采用磁吸式链接,可以实现供电、游玩两不误。手柄内部还内置了两个6DoF“天线”,可供轻度交互时使用。

可拆卸+蓝牙手柄+便携式6DoF演示(图源:影创)

XR2平台是高通针对XR设备,新推出的7nm工艺制程扩展现实平台。其原生支持5G网络传输,CPU采用8核处理器、最高主频可达2.84GHz,GPU采用Adreno 650 图形处理器搭建。据悉,XR2的CPU和GPU 性能比上一代提升了2 倍、视频带宽提升4 倍、分辨率提升6 倍、AI 性能提升了11 倍。

交互方面,XR2定制化的计算机视觉处理器确保交互过程中的精准高效,且可支持最多7路并行摄像头下高精度实时追踪用户头部、嘴唇和眼球,支持26点手部骨骼追踪。计算机视觉则可高效进行场景理解和3D重建。

这些所有底层功能,为“鸿鹄”的后期流畅体验带来保障。而也的确如上所述,“鸿鹄”这款MR眼镜独特的地方,在于将目前流行的VR一体机交互方案无缝移植到了增强现实终端上。

图源:VR陀螺

其CV方案头手双6DoF追踪功能,基于影创自研的SLAM空间定位算法。

得益于XR2芯片和影创自研算法加持,“鸿鹄”MR眼镜实现了虚拟物体与真实环境相对位置的持久化的功能。无论何种意外情况发生,虚拟物体在真实世界中的位置都是固定不变的。同时,手柄上还集成了隐藏式追踪灯环,可有效弥补强光环境下CV方案的短板,实现稳定追踪。

SLAM定位遮挡测试(图源:影创)

就实际体验感受来说,“鸿鹄”MR眼镜的追踪方案与Quest相差无异。据影创科技透露,摄像机的拍摄速度是60Hz,每帧间隔16.6ms,视频里每一帧的延迟都低于16.6ms。这种情况下依旧保持较高效的虚实叠加呈现,表明整个系统的延迟都在1帧以内。

图源:影创

除了主机和MR眼镜部分,“鸿鹄”的配件也相当丰富。通过连接在主机背面的圆型磁吸支架,用户可以随意加载5G模块或者外接充电宝供电。“鸿鹄”还配备了一个可拆卸的肩键设计。用户可以根据需要选择是否使用,这在保障完整手柄体验的同时,实现了便携。

图源:影创

此外,“鸿鹄”还配备了全自由度自然手势追踪系统,这块在后面的系统实测环节中会讲到。

系统、操作趋于“科幻”

真实版赛博朋克来了

实际上,这并非是陀螺君第一次体验“鸿鹄”。

今年一月初体验时,这款MR眼镜给我的最大震撼,来源于它将6DoF交互和混合现实相融合的新奇想法。但系统层面,尽管当时是内置安卓10以及Blue Cat 2.0双系统,但体验感受上仍处在初级状态。

正所谓一日不见如隔三秋,这次再体验“鸿鹄”,竟有种时空穿越的感觉。

镜框两侧为两颗CV摄像头,镜片外侧为两颗红外感应器,中心为一颗800万像素摄像头(图源:VR陀螺)

操作系统

MR眼镜的系统操作体验,通常由视觉通透性、色彩对比度和交互三方面决定。说到这,相信大部分人都会首先想起于2019年底发售的,赫赫有名的微软HoloLens 2。

“鸿鹄”MR眼镜中,可以看到一些借鉴的影子。首先,该设备也和HoloLens 2一样支持全自由度自然手势追踪,这意味着用户只需要正常的通过抓、握、拽等常见动作就可以实现系统交互。

图源:影创

操作界面的可视化,“鸿鹄”采用了更加靠近安卓电视桌面的排布方式。上手后不会像HoloLens 2那种手腕呼出界面一样令人感到陌生。几秒内,用户就可以用手拖动界面对应的位置滑动图标并选择应用。

值得一提的是,手势模型到控制界面之间,有一条“磁力线”作为链接。这使得用户不用像HoloLens 2中一样非得走到面前去戳对应的位置,而是可以与虚拟窗口保持一定距离实现流畅操作。

缩放操作演示(图源:影创)

以页面窗口为例,用户可以通过将“磁力线”吸附在边框上进行翻转。配合比较直观的过渡动画效果,可以给人一种自然、高流畅度操控感受。

绘画应用

回到6DoF交互上,基于手柄“鸿鹄”可以准确追踪用户手臂更多自由度的活动。为了更好地展现其在MR眼镜上的表现,“鸿鹄”内置了一款类似MR版本《Tilt Brush》的绘画应用。

图源:影创

在实际体验过程中,悬空的画板和真实环境背景形成透视关系,更像是在现实生活中的一张透明亚克力板。同样的,作画过程中笔触的力道、轨迹都模拟的非常真实。值得一提的是,因为“鸿鹄”使用的是BB光学方案,其对比度、透光性和色彩控制都要比波导类更好,此外相较VR头显又少了分辨率问题的困扰,在这样的场景下的绘画体验十分新奇,可谓是极具科幻感。

图源:影创

绘画过程中,手柄与笔触做到无缝衔接。在这里,可以全面呈现出“鸿鹄”6DoF手柄在无延迟三维空间追踪效果的出色表现。

在虚拟鸿鹄的创作过程中,手柄与SLAM算法相融合,实时感知现实空间的三维信息,XR2处理器做出机器视觉信息运算,再将虚拟画面与手柄轨迹一一对应,这样的闭环计算几乎感知不到延迟,更是靠肉眼无法察觉的。

影音娱乐

6DoF交互+SLAM呈现,为一些成熟的游戏作品移植打好了坚实的基础。比如,在MR环境中体验《Beat Saber》,需要的是超低延迟和长时间高频运动下稳定的虚拟环境定位。可以说,此次体验里“鸿鹄”都做到了。

此外,“鸿鹄”的安卓10系统自然可以原生支持安卓游戏在其上流畅运行。陀螺君在MR眼镜上尝试了王者荣耀和网页浏览。面对全息大屏打游戏、追剧,并且还有种飘浮在半空中若隐若现的感觉,这种游戏体验像极了各类赛博朋克电影中的经典场景。

图源:影创

最重要的是,相较于仅仅作为外接显示器的传统手机+AR分体式眼镜设备,“鸿鹄”自带的手柄可以蓝牙适配大部分游戏内容,遥感+按键操作的舒适度远超盲搓手机。

“鸿鹄”背后

承载着影创怎样的大志?

“鸿鹄”的背后,是CV方案6DoF交互、XR2芯片组、手势识别等技术趋于成熟的写照;VR产业从Cardboard到Quest,AR产业从15°FOV棱镜到45°FOV BB光学......这些底层技术不再被高高挂起,各大厂商结合自有特色研发出新产品,并开启探索走向商用化和普及化的征程。

Quest VR游戏生态正在海外市场掀起一场热潮。 其成熟生态的背后,离不开技术硬实力的支撑。而影创作为国内MR硬件厂商,凭借自研将6DoF等技术成功赋能到MR眼镜上,这证明国内内容生态起势前的技术储备阶段已经颇见成效。

便携性大幅提升(图源:影创)

至于国内MR游戏未来是否会像VR游戏一样火爆,现阶段不好妄下结论。但是,“鸿鹄”给了国内VR、AR游戏开发者更多可能性,无论是旧游戏移植还是新游戏创作,对于急待发展优质内容和良性营收闭环的中国VR/AR游戏生态来说都是好事。

总结

上次体验时,影创工作人员告诉陀螺君,他们正在以一天N次迭代的高强度工作方式来优化“鸿鹄”操作系统、可视化界面和人机交互的体验成熟度。今天,“鸿鹄”算是交上了一份满意的答卷。

“鸿鹄”MR眼镜原价是20000元,预售定金是5000元。目前“鸿鹄”MR眼镜已经开启预售通道,影创科技还推出了“趣味问答免尾款”(限量198台,目前已售罄)、“体验反馈赢免单”和“2021 Qualcomm XR 创新应用挑战赛赢奖品”活动。

如果参加“体验反馈赢免单”和“2021 Qualcomm XR 创新应用挑战赛赢奖品”活动,将有机会获得影创科技免费赠送的“鸿鹄”MR眼镜。

无论是从技术、算法层面看,还是创新能力和想象力上看,国内以影创为代表的一众厂商正在MR这条道路上扩宽探索半径。随着海外消费级市场的崛起,成熟商业化技术模式的形成,国内将依托独有的产业链优势助推国内厂商一路向前,以更好的体验、更加低廉的成本后发抢占国际市场。

来源:VR陀螺

发表评论

相关文章