跳到正文

校准

2篇文章

2026. 09. 22 · 阅读约40分钟

决策模型,Jev 与 Kev

有个模型不返回文本,只返回概率。confidence 不是学出来的值而是算术,校准也不是模型的性质而是分布的性质。本文用公开的 Jev 实测 5,743 条,以及把复现实现 Kev 直接跑在本博客音译闸门上的结果来验证。

2026. 09. 17 · 阅读约14分钟

LLM 的校准与过度自信

校准不是准确率,而是知道自己能答对百分之几的能力。本文整理 ECE 如何衡量这种偏离,GPT-4 技术报告中 post-training 后 ECE 从 0.007 恶化到 0.074 的结果,以及其原因目前弄清到了什么程度。