AnyLM2Jev
our0boros/AnyLM2Jev
Reproducing the Jev decision interface
Python
- スター
- 0
- フォーク
- 0
掲載理由
小型言語モデルで Jev の型付き決定形式を再構成し、自己整合性で蒸留した読出しと生の選択肢 logits を比較する研究。自身の決定はホスト型 Jev ではない。
our0boros/AnyLM2Jev
Reproducing the Jev decision interface
小型言語モデルで Jev の型付き決定形式を再構成し、自己整合性で蒸留した読出しと生の選択肢 logits を比較する研究。自身の決定はホスト型 Jev ではない。
Bench of typed decision models: Jev vs OpenJev vs Laya, small local LLMs and cheap hosted LLMs on the same zero-shot classification tasks, in English and French.
共通トピック: calibration
Probability-aware evaluation for typed decision models: calibration, selective risk, latency, and reproducible benchmarks.
共通トピック: calibration
How many decisions can a model make in a minute, and what do they cost? Jev, a System One decision model, raced against six LLMs on the same Snake boards.
共通トピック: calibration