IT之家·· 2 小时前AI 评分60
智元发布 WITA-Omni 具身全模态端到端交互大模型
号称行业首个具身全模态端到端交互大模型,智元发布 WITA-Omni
AI 导读
智元发布 WITA-Omni(硅光动语全模态大模型),官方称其为行业首个具身全模态端到端交互大模型,在音视频之外新增触觉、本体状态输入和机器人动作、表情输出。模型基于流式全双工架构,官方给出的交互响应最快约 400 毫秒、平均约 600 毫秒,较业内平均水平快近 3 倍,并支持免唤醒词的全模态拒识、上百种语言和方言的流式同声传译。
推荐理由模型分析
智元发布面向机器人本体的全模态交互模型,把触觉、本体状态纳入输入,动作与表情作为输出,并给出约 400 毫秒最快、约 600 毫秒平均的响应数据。对做具身交互和机器人语音对话的团队,可据此比较流式全双工架构与免唤醒词拒识方案的设计取舍,但性能数字来自官方口径,尚未见第三方复现。
来源:IT之家 · ithome.com