评测与研究

padflow-jev-evals

@zsavage81PythonMIT更新于 2026-09-17

PadFlow 的类型决策基准,包括模式、匿名标注数据和支持 TypeSafe Jev 等模型的运行器。

英文原文

Typed-decision benchmark from PadFlow (land development SaaS): schemas, anonymized labeled rows, and a runner for confidence-calibrated models like TypeSafe Jev.

zsavage8/padflow-jev-evals

它在哪儿调用了 Jev

python scripts/run_baseline.py --model jev --base-url https://api.typesafe.ai/v1 --api-key-env TYPESAFE_API_KEY

scripts/run_baseline.py:7

链接指向我们抓取当天的那个 commit,行号是准的。

这个项目没法在这儿跑

它的 question 组合是运行时拼出来的,或者代码里没有直接写出来,所以没法原样搬过来。源码链接在上面,可以自己去看。

同类的其他项目