[2026-10-15] JevAgentHarness: Benchmarking, Deploying and Training Decision Models That Share Control with LLMs
把选工具、填有限选项交给小模型,不确定时仍调用大模型。沿真实发货日志和可运行的订单检查器,解释三层评测、阈值与训练,并核对新规则失败和 coding harness 的实际验证范围。
课程笔记、踩坑记录,还有一些摸鱼和日常。
复仇者不折镆干。虽有忮心,不怨飘瓦。
把选工具、填有限选项交给小模型,不确定时仍调用大模型。沿真实发货日志和可运行的订单检查器,解释三层评测、阈值与训练,并核对新规则失败和 coding harness 的实际验证范围。
让通用模型 Astra 直接控制机械臂,还是先检查机器人动作模型 π0.5 的建议?从真实分类案例、控制代码和原始图表解释两种方案与评测条件,附面向 LLM / VLM 读者的机器人基础。
让模型用 Blender 搭出靠机械作用运行的三维装置。沿一道路口放行的真实任务,介绍题目怎么构建、模型看到什么、动画怎么评分,以及运行成功为何不等于机械正确。
Agent 拆出的子任务没有现成答案,怎样训练它评价这些任务?SERA 让同一模型写评分条件、执行与评分。本文用公开两菜任务的实际程序重放,讲清三种训练奖励、最终验收和关键负结果。
把历史任务提炼成经验,只在训练时交给模型的冻结副本;正在学习的模型自己尝试,再向这份带经验的判断靠近。本文拆解经验生成、筛选、训练损失和文本游戏评测,也指出按测试成绩挑训练版本的限制。
强模型只留下成功做过哪些操作,也能帮助训练吗?本文通过取消订单的真实记录,解释 π-Distill 如何让同一模型在带参考记录和不带记录的两种输入下共同学习,并核对奖励、概率约束和评测选择。
已有参考解答时,指导学生的模型应该看完整推导、具体方法、思考方向,还是只看答案?沿公开数学题、真实逻辑题与可运行评分代码,解释五组训练、结果选择和有效性边界。
模型知道相交弦定理,却把图里的线段配错。ViCuR 用训练时的视觉提示和新增注意力分支改善读图;本文追到公开数据,讲清提示从哪来、怎样蒸馏,以及哪些结果没有变好。
模型写出代码后,训练程序执行它,让模型多看画面再判断哪些代码应该改。Visual-SDPO 还把遮挡、裁切等问题关联到源码,增加相关语句的训练权重。
模型先只看题目写答案,再让冻结的同模型副本多看标准解,计算这份答案每个位置的下一词概率。OPSD 用两份概率的差异训练模型,不需要另请一个更大的模型生成训练答案。