跳到正文
arXiv AI· Chengguang Gan, Yunhao Liang, Hanjun Wei, QingHao Zhang, Shiwen Ni·· 2 天前评分48

Can We Make an LLM Dumber, or Is It Just Playing Dumb? An Empirical Study of Believable Performance Throttling

摘要

我们引入CapLadder,一个基于IRT校准的数学、代码、多选推理和工具使用的1,985项套装。简单弱教师LoRA调制在保持1.9点校准误差时,可达到对推理的未见目标水平,而提示、温度和噪声干扰无法融合可比的范围和精度。但在多选题中,调制收敛到一个答案令牌吸引点:新引入的97%个错误中有最多97%个落在一个字母上,吸引点从Qwen的D变为Llama的A。

推荐理由

请对照arXiv AI原文,核对完整说明及适用条件。

本站只提供摘要与原文入口。完整内容请阅读原文。

来源:arXiv AI · arxiv.org