Jev news

Jev 心里想"我不知道"却不说出口:Sys1Cal-v1 概率校准数据集发布

HuggingFace Daily Papers(社区热门论文)AIHOT score 45/100

Summary

针对 System One 模型 Jev 的概率校准承诺缺乏公开测试的问题,研究者发布 Sys1Cal-v1 数据集,用已知精确概率 P(A) 的真/假命题,通过 Noul、Choice、Score 三个原语查询并以全变差距离评估。

Original title

Jev thinks "I don't know'', but doesn't say it: Introducing Sys1Cal-v1 Dataset for Probability Calibration