Varjo XR-4系列引入集成手部跟踪功能

Varjo宣布Varjo XR-4系列全部支持手跟踪功能,随着Varjo Base 4.10软件的发布。这一强大的新功能现在作为标配免费提供!可通过Varjo Base设置自动启用。

请注意:手动跟踪作为一种测试功能。虽然它已经实现了新的可能性,但也有一些已知的限制,包括手势可靠性和延迟。

OpenXR 应用程序无缝集成

集成的手部跟踪功能适用于定焦和自动对焦功能的XR-4头显。用户现在可以在任何支持手部跟踪的应用中享受身临其境的交互。具体来说,Varjo实现了包括对XR _ EXT _ hand _跟踪和XR _ EXT _ hand _交互的OpenXR扩展。

XR _ EXT _ hand _跟踪支持完全连接26个手形标志,提供详细的骨骼跟踪。

XR _ EXT _ hand _交互支持四种直观的手势:瞄准、捏、抓、戳。为了获得最佳用户体验,Varjo建议使用应用此扩展的应用程序。

基于摄像头的跟踪 -- 不需要额外的硬件

这一新功能是通过利用视频透视(VST)摄像机流式传输到XR-4实现的。这意味着不需要额外的硬件---用户的手部将直接可在可视区域内被跟踪。

90 Hz和75 Hz VST模式都支持手部跟踪,尽管在初始版本中跟踪帧速率略有降低。(对于使用XR-4 FE的用户,请注意75 Hz模式提供了略大的垂直视野。)

针对真实环境进行优化

该系统针对典型的办公室照明条件(200-500勒克斯)进行了优化。为了实现最佳性能,请确保环境光线充足,让VST相机捕捉高质量的帧。

手部跟踪独立于头显的位置跟踪方法(inside-out跟踪(IoT)与SteamVR跟踪)工作。

由机器学习提供支持

该功能的核心部分是在Varjo内部训练的机器学习模型。该系统使用以下组合来检测和映射3D环境中的手:

  • 立体视觉来自耳机的VST摄像头。

  • 深度数据来自内置的飞行时间传感器

Varjo已经通过对来自各种个人的数据(包括年龄、肤色、手的大小和性别)进行模型训练,确保了该功能的稳定性和包容性。

推算是在CPU上执行的,因此高性能处理器将提供更平稳的手部跟踪。(GPU不用于手跟踪,以区分用户应用程序的优先级)

相关推荐
localbob11 小时前
Pico 4XVR 1.10.13安装包下载与安装教程 ico 4XVR最新版下载、4XVR 1.10.13 APK安装包、Pico VR看电影软件、4XVR完整版安装教程、Pico 4播放器推荐、V
android·vr·vr播放器·vr眼镜播放器下载·pico 4xvr·4xvr下载·pico 4xvr最新版安装包
Pursue Limits12 小时前
人形机器人之VR遥操作
机器人·vr
音源部落12 小时前
Cubase15 R2R/VR一键安装完整版本下载安装Nuendo 14最新版本下载安装支持Win/Mac 双系统版本加104G原厂音源Mac系统不关SIP安装编曲软件Cubase 15.0.10下载
macos·vr·cubase·cubase15·nuendo·nuendo14
菜鸟不学编程12 小时前
鸿蒙中的 AR/VR 开发与场景创建
ar·vr·harmonyos
北京阿法龙科技有限公司17 小时前
AR智能眼镜在职业教育培训的应用指南 | 阿法龙XR云平台
ar·xr
720云18 小时前
AI结合VR全景创作新范式,720云全景图一拍多用落地方法
vr·vr全景·720云
星幻元宇VR18 小时前
VR消防安全学习机|沉浸式体验守护生命安全的新方式
科技·学习·安全·vr·虚拟现实
2501_946490382 天前
城市地标光影呈现技术实践——Hirender集群与多边形融合带在《生命之树》的实操解析
服务器·xr·媒体·hirender·hecoos
星幻元宇VR2 天前
VR地震科普学习机|沉浸式防震减灾新体验
学习·安全·vr·虚拟现实
星幻元宇VR2 天前
VR爱国教育学习机|让红色精神在沉浸体验中代代传承
科技·学习·vr·虚拟现实