使用MediaPipe Hand Tracking与Unity

7
我们正在开发一个移动(Android)混合现实游戏项目,使用手势与虚拟物体进行交互。我们已经为此研究了可以用于该项目的框架和API。目前,我们认为最好的方法是使用Google Media Pipe来进行多手追踪,并使用Vuforia创建MR环境。但由于Vuforia是与Unity一起使用的,而MediaPipe尚未有Unity端口,因此我们不确定如何将所有这些组合在一起。
您是否有其他框架推荐可用于此目的,或者您能提供任何关于如何继续的想法?

你在这方面有进展了吗?我们正在寻找非常类似的用例。我们是C++开发人员,没有使用Unity的实际经验。我们的方法涉及在单独的进程中运行MediaPipe,并将手骨架数据转发到Unity。我们在以前的项目中成功地使用了这种技术,只是没有手部跟踪数据。我很乐意提供帮助 - 如果有Unity经验的人能在另一端提供帮助,那就太棒了。 - Joel Bodenmann
1
@JoelBodenmann 感谢您对我的帖子的关注。我们是高年级大学生,正在尝试将mediapipe实现到一个移动应用的unity项目中作为毕业设计。然而,我们无法像您在您的项目中所做的那样取得任何进展。我们团队有三名开发人员,他们有着长达两年的Unity工作经验,其中一年是在现场工作。我不确定我们是否有足够的经验来解决您的问题,但如果您愿意,我们会尽力帮助您。期待您的回复。 - Cagla Sozen
1个回答

1
如果有人仍然对这个问题感兴趣,可以使用MediaPipeUnityPlugin直接连接Unity和MediaPipe。

网页内容由stack overflow 提供, 点击上面的
可以查看英文原文,
原文链接