typed-decision-bench
4nt0ineB/typed-decision-bench
Bench of typed decision models: Jev vs OpenJev vs Laya, small local LLMs and cheap hosted LLMs on the same zero-shot classification tasks, in English and French.
研究与评测Python
- 星标
- 0
- 派生
- 0
收录依据
这项小型基准在相同的英法语零样本分类任务上比较 Jev、OpenJev、Laya 及本地／托管模型；作者将结论限制在一个数据集和一种问题，本次未复现指标。
主题
jevbenchmarkcalibrationenglishfrenchlayallm-evaluationmassive-dataset