jevbooks

← 全部项目

luce

scienthoon/luce

Jev 风格决策模型的开放配方:任务描述到校准概率。

这是什么

Luce 是构建 Jev 风格决策模型的开放配方。它搭建问题、用 LLM 教师生成或标注数据、在 Qwen 上训练 LoRA + 决策头、评估校准并服务概率。

它怎么用 Jev

Jev 被用作托管基线进行比较。README 报告了 Luce 与 Jev 在相同测试项上的准确率和 ECE,包括训练无帮助的情况。

用到的原语:choicescorenoul

值得抄的做法

在小型开放模型上训练 LoRA + 决策头,为类型化问题输出校准概率。

怎么试

pip install "git+https://github.com/scienthoon/luce" 然后运行 luce init、synth、train、eval、serve。

去 GitHub 看

Jev 判的jev-1.13.0

证据

每一行都是就 README 问 Jev 的一道题。≥ 0.60 算「是」,≤ 0.40 算「否」,中间这一段 Jev 不下判断。

  • Jev 是主角未判定0.51
  • 有 System One 用法0.35
  • 处理了不确定性0.05
  • 有实测数据0.22
  • 可直接跑0.62
  • 值得推荐0.38
  • 是模型的复刻0.96
  • 问题普遍性按 0–2 打分1.10
  • 与 Jev 相关0.90

信号由 Jev jev-1.13.0 判定,简介由 DeepSeek V4.1 Flash 于 2026年9月21日 读 README 写成。