从单目视频中实时获取3D手部交互

从单目视频中实时获取3D手部交互

RGB2Hands：实时跟踪来自单目RGBVideoarxiv论文摘要的https://arxiv.org/abs/2106.11725v1arXiv PDF文档https://arxiv.org/pdf/2106.11725v1.pdf中的3D手部交互https://arxiv.org/abs/2106.11725v1 https://arxiv.org/pdf/2106.11725v1.pdf

跟踪和重建交互中双手的三维姿态和几何形状是一个具有挑战性的问题，它与AR/VR、机器人或手语识别等多种人机交互应用具有很高的相关性。

…提出了第一种实时捕捉手部骨骼姿势和3D表面几何形状的方法，该方法从单个RGB摄像机显式地考虑了密切的交互作用。

…提出了一种新的多任务CNN，它回归了多条互补信息，包括分割、与3D手模型的密集匹配和2D关键点位置，以及新提出的手内相对深度和手间距离图。

…该方法提供了以前从未见过的来自RGB的双手跟踪性能，并且在数量和质量上都优于未明确设计用于双手交互的现有基于RGB的方法。

此外，我们的方法甚至在性能上与基于深度的实时方法不相上下。

随时了解最新情况。使用我的其他帖子按类别https://morrislee1234.wixsite.com/website/contactWeb订阅我的帖子https://morrislee1234.wixsite.com/website站点https://morrislee1234.wixsite.com/website/contact https://morrislee1234.wixsite.com/website

领英https://www.linkedin.com/in/morris-lee-47877b7bhttps://www.linkedin.com/in/morris-lee-47877b7b