跳到正文
arXiv Computer Vision· Yang Zhao, Yan Zhang, Zixuan Guo, Hangyu Zhou, Haotian Mao, Hui Wang, Xubo Yang·· 3 小时前AI 评分24

IKMo:基于轨迹-姿态条件扩散模型的图像关键帧运动生成

IKMo: Image-Keyframed Motion Generation with Trajectory-Pose Conditioned Motion Diffusion Model

AI 导读

IKMo 框架通过 TPMDM 扩散模型与 VLM 多智能体系统,将用户提供的 2D 参考图像和全局轨迹转化为显式运动约束,解决异构几何约束下的坐标不匹配问题。TPMDM 采用解耦并行控制策略,显式分离并对齐轨迹与图像姿态信号。在 HumanML3D 和 KIT-ML 上,该方法在异构轨迹与关键帧姿态约束下的运动生成任务中达到新的 SOTA。

来源:arXiv Computer Vision · arxiv.org