jev-certify
nikkoxgonzales/jev-certify
Finite-sample guarantees for Jev (TypeSafe's System One). Conformal risk control turns calibrated probabilities into certified routing thresholds; prediction-powered inference audits them. 2,412 decisions on CLINC150 for $0.23 — including the shift and prevalence cases where the guarantee breaks.
- スター
- 1
- フォーク
- 0
掲載理由
研究ツールがコンフォーマルリスク制御でJevの選択を振り分けしきい値に変換し、記録した判定で実験したと報告しています。