jev-mahjong-bench
hamakyo/jev-mahjong-bench
Reproducible riichi mahjong benchmark for Jev, GPT, Mortal, and hybrid agents using MJAI and RiichiEnv.
- スター
- 1
- フォーク
- 0
掲載理由
READMEは、同じ立直麻雀の局面でJevとGPTの選択を比較した著者の実験を報告しています。結果はここでは再現していません。
hamakyo/jev-mahjong-bench
Reproducible riichi mahjong benchmark for Jev, GPT, Mortal, and hybrid agents using MJAI and RiichiEnv.
READMEは、同じ立直麻雀の局面でJevとGPTの選択を比較した著者の実験を報告しています。結果はここでは再現していません。
A learning scaffold for TypeSafe AI's System One models: eval harness plus a measured, plain-language comparison of the Jev decision model vs an LLM stand-in on 24 real operational decisions. All numbers reproducible from committed run files.
共通トピック: benchmark, evaluation
Three measured experiments on RAG hallucination: quote-checking, TypeSafe's Jev, and IBM's STAIR. 850+ graded questions, raw responses included.
共通トピック: benchmark, evaluation
First independent head-to-head benchmark of System One decision models (Laya vs Jev) on byte-identical inputs
共通トピック: benchmark, evaluation