arXiv Artificial Intelligence· Sven Kleinkop, Tam\'as Janusko, Ricardo Bochnia, Gunnar Hempel, Steffen Tomschke, J\"urgen Anke, Maik Thiele·· 2 天前AI 评分32
PromptOps:面向 LLM-as-a-Judge 系统的迭代提示词优化框架
PromptOps: Iterative Prompt Optimization for LLM-as-a-Judge Systems
AI 导读
PromptOps 是一个用于监控并迭代重校准 LLM-as-a-Judge 系统的闭环框架,将"何时优化、用哪种优化流程、用哪些反馈记录、如何更新评判提示词"拆分为四项独立决策。
来源:arXiv Artificial Intelligence · arxiv.org