2件の記事
2026. 09. 22 · 49分で読めます
テキストの代わりに確率を返すモデルJevが公開された。confidenceは学習された値ではなく算術であり、キャリブレーションはモデルではなく分布の性質だ。公開されたJevの実測5,743件と、再現実装Kevをこのブログの音写ゲートに直接かけた結果で確かめる。
2026. 09. 17 · 17分で読めます
キャリブレーションは正解率ではなく、自分が何パーセント当てるかを知る能力だ。ECEがそのズレをどう測るか、GPT-4技術レポートでpost-training後にECEが0.007から0.074に悪化した結果と、その原因がどこまで明らかかを整理する。