人类的四维展现：用Transformers重建和追踪人类
摘要：人类重建和跟踪的方法：HMR 2.0网络的全面“转换化”版本用于人类网格恢复，该网络改进了现有技术水平，并展示了从单个图像中重建过去难以分析的异常姿势的能力。为了分析视频，我们使用HMR 2.0的3D重建作为输入，结合在3D中运行的跟踪系统来处理多个人并在遮挡事件中保持身份。我们的完整方法4DHumans在从单目视频中跟踪人类方面取得了最先进的结果。此外，我们还展示了HMR 2.0在下游任务中动作识别的有效性，相比以往基于姿势的动作识别方法，取得了显著的改进。我们的代码和模型可在项目网站上找到：https://shubham-goel.github.io/4dhumans/。
作者：Shubham Goel, Georgios Pavlakos, Jathushan Rajasegaran, Angjoo Kanazawa, Jitendra Malik
论文ID：2305.20091
分类：Computer Vision and Pattern Recognition
分类简称：cs.CV
提交时间：2023-09-01