跳到正文
arXiv Artificial Intelligence· Ruth Wan Theng Chew, Zhiliang Chen, Apivich Hemachandra, Bryan Kian Hsiang Low·· 19 小时前AI 评分36

BoLT:面向昂贵 LLM 任务的黑盒优化基准

BoLT: A Benchmark to Democratize Black-box Optimization Research for Expensive LLM Tasks

AI 导读

研究者发布 BoLT,首个以 LLM 为中心、面向黑盒优化(BBO)社区的开源基准,让无力承担 LLM 训练与推理成本的研究者也能开展相关优化研究。BoLT 覆盖多保真度、多目标、异方差噪声和高维搜索空间等问题,每个问题基于真实实验数据,并通过拟合数千次真实 LLM 实验结果的轻量代理模型实现完全可复现。

来源:arXiv Artificial Intelligence · arxiv.org