jevbooks

← 全部项目

verdict

jonesmelton/verdict

面向 TypeSafe AI Jev 评估 API 的类型化 OCaml Eio 客户端

评测与基准98%次选分类: 基础设施 / SDK / 集成一个 state 多题平铺

这是什么

一个非官方的 OCaml 5.2+ 客户端 SDK,用于 TypeSafe AI 的 system-one 评估 API。它让 OCaml 程序发送状态和类型化问题并读回校准后的答案,TLS、重试和有界请求由库处理。

它怎么用 Jev

调用方用 Question.noul、Question.choice 构造带指令的类型化问题,打包进带状态的 Request,再调用 Client.evaluate。Jev 返回每个问题的答案;Response.find 可取回 noul 的 Probability,或 choice 问题的选项与 Confidence。

用到的原语:choicenoul

值得抄的做法

问题句柄携带其答案类型,因此答案不会被当作错误类型的答案读取。

怎么试

opam pin add verdict . 然后设置 TYPESAFE_API_KEY 并运行 examples/ 中的示例。

去 GitHub 看

Jev 判的jev-1.13.0

证据

每一行都是就 README 问 Jev 的一道题。≥ 0.60 算「是」,≤ 0.40 算「否」,中间这一段 Jev 不下判断。

  • Jev 是主角0.86
  • 有 System One 用法0.12
  • 处理了不确定性0.04
  • 有实测数据0.04
  • 可直接跑0.97
  • 值得推荐0.30
  • 是模型的复刻0.03
  • 问题普遍性按 0–2 打分1.04
  • 与 Jev 相关0.98

信号由 Jev jev-1.13.0 判定,简介由 DeepSeek V4.1 Flash 于 2026年9月20日 读 README 写成。