作者吐槽 AI 大会上的「软件未来」大多还停在让 agent 产出传统确定性代码,或者把 agent 拴在客服弹窗里。TypeSafe 的 Diogo Almeida 在 AIE 上讲 Jev 与 System One 模型:我们过度调优了人类反馈,结果越按人类反馈训练,人越被留在关键路径上。他主张把小型 System One 模型的调用像 switch 语句一样随意撒进应用代码内部,用结构化选择和概率替代绕来绕去的字符串拼接。
🔑 核心要点
核心追问很朴素:自动化到底在哪,为什么有了能解千禧年难题的模型,大家工时反而更长。
System One 的价值不只在速度、成本或校准,而在三者一起成立。
把模型当成可依赖的原语,在应用内部做判断,而不是当成聊天对象。
作者认为业界还患着大模型斯德哥尔摩综合征。
💡 金句
“The simple answer is we overtuned for RLHF, and unsurprisingly tuning for more human feedback only serves to keep the human in the critical path of work rather than remove them.” 译:简单的答案是我们在 RLHF 上调过头了,按人类反馈调优,只会把人留在工作的关键路径上,而不是把人移出去。