Skip to main content

面部与眼动追踪 (Face and Eye Tracking)

面部与眼动追踪 (Face and Eye Tracking)

Resonite 目前支持使用以下硬件进行面部和眼动追踪：

  • Vive Pro Eye - 眼动追踪
  • Vive Facial Tracker - 面部追踪
    • 这不需要 Vive 头显。用户已成功在各种头显上使用胶带固定并使用。
  • Quest Pro（通过 Steam Link）

如果您在使用这些系统时遇到问题，请查看并遵循以下通用建议。

硬件 (Hardware)

  • 确保所有设备都已插入。如果不确定，请拔下并重新插入所有线缆。所有设备上应亮起绿灯或蓝灯。
  • 检查所有线缆是否完好，确保没有磨损、损坏或扭结。

对于非 Vive Pro Eye 头显，您可能需要一个 USB-C 转 USB（Type-A）适配器。它们看起来像这样：

image.png

USB-C 转 USB 适配器

面部追踪器安装

对于非 Vive 头显，用户分享了各种各样的安装方案。以下提供一份简短列表以供参考：

  • 胶带 (Tape) - 缠上很多胶带，追踪器就能粘得很牢。任何胶带都行。
  • 双面魔术贴 (Double Sided Velcro Tape) - 提供一种可拆卸的安装方案。确保存重能力足够强（Heavy duty），以支撑追踪器的重量和头部的运动。
  • 3D 打印 (3D Printing)
    • 简易支架 (Simple Mount) - 一个简单的支架，可以用胶带粘在头显底部。
    • 摩擦支架 (Friction Mount) - 利用支架与 Valve Index 前置扩展舱（Frunk）之间的摩擦力/卡扣固定。如果你甩头太猛，可能会掉下来。
    • 磁吸支架 (Magnetic Mount) - 利用 Valve Index 前盖现有的磁铁吸附在头显上。这个打印件需要配合尺寸为 1/8" 直径 x 1/8" 厚度的磁铁使用。

软件 (Software)

要更改 Resonite 监听 Steam Link 面部/眼动追踪数据的端口，请在使用 Steam Link 时前往 Settings（设置） > Devices（设备）。

确保没有运行任何可能产生冲突的 OSC 应用程序。

Steam Link for Meta 下载

仅针对 Vive 硬件的软件安装

面部追踪和眼动追踪都需要来自 HTC 的同一款软件。您可以从 HTC 网站 下载该软件。下载后，请在开始菜单中找到并运行它。安装并运行后，它应该会在系统托盘（任务栏右侧）中放置一个图标，如下所示：

image.png

SRAnipal 的系统托盘图标

如果出现此图标，追踪功能通常已正常运行。

追踪状态

该图标（一个机器人）也传达了追踪的状态：

  • 机器人的眼睛显示眼动追踪的状态。
  • 机器人的嘴巴显示面部追踪的状态。

眼睛或嘴巴的颜色代表当前情况：

  • 黑色：追踪未激活。
  • 橙色：追踪处于空闲/待机状态。
  • 绿色：追踪处于活动状态。

“关于”窗口

右键单击机器人图标，会出现一个小菜单，选择“About（关于）”将弹出一个窗口。此窗口提供更多信息，例如：

  • 软件版本
  • 眼动追踪器版本
  • 面部追踪器版本

如果在 Eye Camera（眼部相机）或 Lip Camera（唇部相机）部分显示 N/A，则表示软件无法检测到您的设备。请参阅 硬件 部分进行故障排除。

当前软件版本为：1.3.2.0。但是，推荐使用 1.3.1.1。

眼动追踪校准

Vive Pro Eye 需要偶尔进行校准，以便尽可能准确地检测您的眼睛。请参阅 HTC Vive Pro Eye 校准指南 了解如何操作。

其他软件/硬件帮助

由于 Vive 头显和面部追踪器由 HTC 制造，他们有自己的帮助板块和支持系统。请参阅他们的资源以获得更多帮助：

Resonite 中的设置

一旦软件和硬件设置完毕，您应该能够直接运行 Resonite，一切都会正常工作。Resonite 启动并进入初始世界后：

  • 如果您有眼动追踪，机器人的眼睛应该是绿色的。
  • 如果您有面部追踪，机器人的嘴巴应该是绿色的。

现在，尝试装备一个兼容面部/眼动追踪的 Avatar。

Resonite 中的常见问题

如果您的追踪在 Resonite 中不起作用，请尝试：

如果问题仍然存在，请获取日志文件并在 Resonite Discord 的 #questions-help 论坛中提问。

形态键 (Shape Keys) 与设置

一旦您的 Avatar 可以工作，请参阅关于设置 Avatar 的指南。（待办：此部分尚待编写）

（文档待完善）

No comments to display

Back to top