2022 年 8 月 18 日 –成衣增强现实 (AR) 智能眼镜开发商Nreal最近宣布对其手部追踪 API 进行重要更新。该更新改进了手势和虚拟对象操作，包括快速的自闭手部动作。该公司还表示，该更新将有助于确保开发应用程序将变得更加容易，同时提高稳定性和准确性，降低延迟，实现新的交互功能。
Nreal 表示，“Nreal 团队通过使用最新的基于深度学习的人工智能技术，在手部追踪开发方面取得了重大进展”，使得此次更新成为可能。该公司指出，它已经使用数百万张手的图像及其相应的标签训练了一个专门设计的深度神经网络，其中关节和尖端作为关键点。生成的网络模型首先检测公司 Nreal Light 眼镜上的摄像头看到的手，然后计算手关键点在 3D 空间中的位置。
从这些计算中，Nreal 的算法不仅能够计算出用户手部在虚拟世界中的位置和方向（称为姿势信息），还能够识别特定的手势。这些包括点、捏、抓、张开双手、胜利/和平标志，以及竖起和向下的拇指。由于 Nreal 量身定制的深度学习模型和优化的硬件计算，这一切都是实时计算的。
除了这些改进之外，Nreal 的手部追踪 API 还与公司的混合现实工具包 (MRTK) 交互工具包集成，赋予应用级手部控制功能。通过结合使用 Nreal 的 NRSDK 和 MRTK，开发人员可以为他们的应用程序生成直观的虚拟对象操作和内容控制体验。Nreal 表示，因此，这现在还允许在带有手部跟踪的 HoloLens 设备上开发的应用程序在 Nreal 设备上使用，从而确保设备传输的便利性。
手部跟踪属于手势识别的范畴，在使用 XR 应用程序时提供存在感、控制感和世界操控感。它有助于再现人们在现实生活中执行的手势，以便在与虚拟空间中的全息对象交互时使用。在虚拟空间中对控制器使用手部跟踪的好处之一是这些交互变得更加直观和高效。虚拟现实 (VR) 耳机的流行以及行业从控制器转向一些游戏的手部追踪有助于证明手部追踪作为沉浸式体验交互工具的普及。在娱乐用例之外，医疗保健等行业也采用了手部跟踪技术，以便为医务人员提供更直观的交互。
Nreal 在其公告中表示：“我们很高兴与您分享我们旅程中的这一步，因为它为 AR 开发的未来和 AI 的能力开辟了更大的可能性。与之前的 NRSDK 相比，我们新的手部追踪 API 降低了交互开发成本，同时提高了准确性和稳定性。”