arXiv Artificial Intelligence· Yiheng Li, Zhuo Li, Ruibing Hou, Yingjie Chen, Hong Chang, Hao Liu, Shiguang Shan·· 17 小时前AI 评分30
AnyMo:用掩码建模扩展任意模态条件动作生成
AnyMo: Scaling Any-Modality Conditional Motion Generation with Masked Modeling
AI 导读
AnyMo 是统一多模态框架,结合 Residual FSQ 动作 tokenizer 与可扩展掩码建模 Transformer,支持任意模态组合下的高质量动作合成。研究同时构建 OmniHuMo 数据集,含超 5,000 小时动作、320 万条序列及文本、语音、音乐、轨迹对齐标注。实验显示其在空间与风格属性上均可灵活控制。
来源:arXiv Artificial Intelligence · arxiv.org