★ 3
arXiv 论文提出 PromptOps 迭代优化 LLM 评审系统
论文把 LLM-as-a-Judge 系统随用户交互与分数分布变化而出现的性能漂移定义为「评审漂移」,并提出闭环框架 PromptOps。框架拆分何时优化、用何种优化流程、用哪些反馈记录、如何更新提示四个决策,并以 GEPA、SIMBA、评分标准合成等五种方法实例化。实验表明迭代提示优化可恢复评审…
arXiv cs.AI6 小时前
共 1 篇相关资讯,按重要度与时间排序,每 3 小时更新。
论文把 LLM-as-a-Judge 系统随用户交互与分数分布变化而出现的性能漂移定义为「评审漂移」,并提出闭环框架 PromptOps。框架拆分何时优化、用何种优化流程、用哪些反馈记录、如何更新提示四个决策,并以 GEPA、SIMBA、评分标准合成等五种方法实例化。实验表明迭代提示优化可恢复评审…