Jev 心里想"我不知道"却不说出口:Sys1Cal-v1 概率校准数据集发布
HuggingFace Daily Papers(社区热门论文)AIHOT 评分 45/100
摘要
针对 System One 模型 Jev 的概率校准承诺缺乏公开测试的问题,研究者发布 Sys1Cal-v1 数据集,用已知精确概率 P(A) 的真/假命题,通过 Noul、Choice、Score 三个原语查询并以全变差距离评估。
原始标题
Jev thinks "I don't know'', but doesn't say it: Introducing Sys1Cal-v1 Dataset for Probability Calibration