Real2Sim in HOI: Toward Physically Plausible HOI Reconstruction from Monocular Videos
发表机构 * The Hong Kong University of Science and Technology(香港科学与技术大学) ; Tencent IEG(腾讯IEG)
AI总结 本文研究如何从单目视频中重建具有物理合理性的4D人-物交互(HOI)动画,以支持3D内容生成和仿真学习等应用。为了解决现有方法在交互一致性、接触稳定性和物理合理性方面的不足,作者提出了HA-HOI框架,采用“以人为先,物体跟随”的策略,以人体运动为交互锚点,重建并优化物体的运动轨迹,并将其映射到物理仿真中进行验证。该方法在多个基准和真实视频上显著提升了人-物对齐、接触一致性及仿真适用性,推动了从视觉合理到物理合理的交互动画生成。