10/19Harrison Chase 判断 Jev 当 judge 是便宜快速的语义验证器

已见于 09/21早间

话题 · 研究与方法

先看结论

Harrison Chase 判断 Jev 当 judge 是便宜快速的语义验证器

Elvis Saravia 预告将发布用 Jev 搭 System 1 + System 2 agent harness 的指南

这些标记是什么意思

疑似或传闻 当事方还没回应迹象指向 依据接口、代码提交等公开痕迹作出的推断转述 二手说法,不是原话

最新进展Shawn Wang 认为 TypeSafe AI 提出的 System One Models 无人使用,Jev 被称为 decision model
当前状态未定稿 · 转述

事件

Elvis Saravia 认为 Jev 类 System One 模型在持续评测、长时程 agent 验证器与递归自改进 harness 三方向值得关注

看什么现在的情况依据
事实Elvis Saravia 预告将发布用 Jev 搭 System 1 + System 2 agent harness 的指南
官方尚未表态

各方3 人

Elvis Saravia实测他用 Jev 给 agent harness 的 /goal 功能搭了一个自定义 verifier𝕏

白毛 Serenity分析她在征集开源决策模型变体的实际使用经验𝕏

Harrison Chase解读他指出典型场景是在线 evals:需要给海量 trace 批量打分𝕏

产业解读

关键数字未给出价格或分数,只定性为便宜快速
时间点System 1 + System 2 harness 指南将在未来几天发布
谁会受影响跑在线 evals、搭 agent harness 的团队,其评测环节的算力账单被碰到

这不是投资建议。

Shawn Wang 认为 TypeSafe AI 提出的 System One Models 无人使用,Jev 被称为 decision model𝕏

这件事更早 3

称Jev 用带校准概率的 yes/no 小模型替前沿模型做 agent 分支决策𝕏

Harrison Chase

Harrison Chase:Jev 类决策模型在 LangSmith evals 中按难度与正确性各自输出 typed answer,一次遍历每条 trace𝕏

Harrison Chase

判断RL 将大幅降低关键 agent 操作成本,flow-1 以 23 倍低价匹配 GPT-6-luna-sol 的 trace 智能𝕏

Elvis Saravia
每早一封:昨夜到今晨新增的几件事,每件一行,点开回站点看完整。
HOURAHEAD关于 · 往期 · 2026-10-19 20:31