arXiv Artificial Intelligence· Yi-Jen Shih, Puyuan Peng, Haohe Liu, David Harwath, Abdelrahman Mohamed·· 17 小时前AI 评分26
RUBATO：解耦时钟让全双工模型按硬件速度思考
RUBATO: Decoupled Clocks Allow Full-Duplex Models to Think as Fast as They Can
AI 导读
RUBATO 是一种多流位置编码方法，为各流分配独立时钟以完全解耦，使全双工语音模型能零样本插值任意推理解码速度，训练仅需两种极端解码速度。在 Spoken GSM8K 上，基线模型在插值速度下准确率跌至 1.7%，而 RUBATO-Full 在所有速率下保持 48.7% 至 51.1%，并借助更快硬件实现 6.5 倍更短的回答时间且首响应时间不变。
来源：arXiv Artificial Intelligence · arxiv.org