arXiv Computer Vision· Weixin Xu, Yifan Liu, Yi Wang, Mingfei Rong, Zhenyu Yang, Zhisheng Zhong, Shengsheng Qian, Changsheng Xu·· 20 小时前AI 评分29
VideoEvoHarness:从无标注视频自进化智能体框架实现视频理解
VideoEvoHarness: Self Evolving Agent Harness from Unlabeled Videos for Video Understanding
AI 导读
VideoEvoHarness 提出一种从无标注视频中联合进化 Questioner 与 Solver 框架的方法,模型参数保持冻结。Questioner 直接从视频记忆记录构建问题并计算参考答案,Solver 借助执行反馈进化技能、策略、超参数和工具,可执行策略以代码定义工作流。在与进化视频不重叠的基准及专用问题集上,整体准确率高于初始水平,并随轮次逐步提升,且增益可跨骨干模型迁移。
来源:arXiv Computer Vision · arxiv.org