Jev 当 Rubric 评委:更便宜更快,但错在同一处
作者 Remy
解读 arXiv:2609.29769:typed classifier Jev 与三位 flash LLM 在九 panel、5003 pairs 上对照——准确率多数分不出显著差异,成本/时延差 29–325× 与 30–220×;相关错误让「廉价一阶段 + LLM 回退」cascade 最多只多出约 1.5pp。
阅读 →2 篇文章
解读 arXiv:2609.29769:typed classifier Jev 与三位 flash LLM 在九 panel、5003 pairs 上对照——准确率多数分不出显著差异,成本/时延差 29–325× 与 30–220×;相关错误让「廉价一阶段 + LLM 回退」cascade 最多只多出约 1.5pp。
阅读 →arXiv:2609.27678 在 ContractNLI 上对照 Jev 与九家托管/本地模型:成本、时延、基线准确率与 All-12 持续正确率会排出不同名次。均分相近可以掩盖翻盘;选型要盯 persistent correctness,而不是只看 accuracy。
阅读 →