十组护栏的基准分数范围相差23倍

今日概览

  • 安全基准分数可能更多反映政策口径,同一架构与优化流程训练的十组护栏,在HarmBench-copyright和WildGuard-benign上的分数范围分别为0.99和0.043,蒸馏教师的软标签也会传递政策。
  • CoworkEnv合成可执行的长程办公Agent训练环境:使用其资源进行监督微调后,Qwen3-VL-8B-Instruct在Claw-Eval Multi-turn tasks上提升31.9分;强化学习证据仍属初步。
  • MT Forcing从整条轨迹控制多轮编辑漂移。它以原图生成的累计编辑目标监督画质,并用参考轨迹鼓励跨轮内容一致性;摘要未交代长序列和真实用户指令下的具体泛化结果。

重点关注

01 安全对齐 安全基准测出的,可能只是你采用了哪套政策

同一个安全模型框架,仅仅换一套标签口径,得分就可能从区间一端跑到另一端。研究者用同一批约5.3万条提示、两种「危险」定义训练了十组护栏:一种判断用户是否在索取有害内容,另一种判断审核员是否会拦截;在架构和优化流程不变时,十组护栏在HarmBench-copyright上的分数范围为0.99,在WildGuard-benign上为0.043,前者是后者的23倍。更意外的是,只改变约0.03%的参数,就能让部分基准分数跨越几乎整个区间——这反映的未必是检测能力变化,更可能是模型学到了哪套政策。政策还会通过蒸馏教师的软标签悄悄传给学生,即使学生看到的硬标签全部来自另一套定义,教师来源依然会成为隐藏变量。论文还发现训练池与两个过度拒绝基准分别有88%和82%的重合;后续结论虽基于去污染数据,但这足以提醒团队,漂亮的「不乱拦截」成绩可能首先需要做数据审计。在唯一对全部20个护栏分支评分的验证集划分上,验证准确率与标注者政策一致性的相关性为ρ=0.74,高于其与检测能力的ρ=0.34。对评测和采购团队来说,模型排名不能单独使用:还应要求披露训练集污染、标签定义、蒸馏教师来源与随机种子波动,否则你比较的可能不是谁更安全,而是谁更符合这张试卷的政策。

把安全基准分数拆成检测能力与政策匹配度,避免把口径差异误判成能力高低采购护栏模型时审计训练集重合、标签定义和蒸馏教师来源要求报告随机种子下限与多次运行结果,别用单次排名做决策

02 Agent 训练长程办公Agent,为什么先得造一个能运转的办公室?

长程办公Agent的训练经验需要连贯的请求、服务记录、工具接口和评分检查,并能处理变化中的工作区状态。CoworkEnv从能力和工作流约束出发生成完整任务,再用程序化验证与反馈修复检查任务规格和评分逻辑,让环境真正可执行。使用CoworkEnv资源和教师示范做监督微调后,Qwen3-VL-8B-Instruct在Claw-Eval上的平均分从46.6升至64.1,其中多轮任务提升31.9分。这个框架还可以把学生交互转成强化学习所需的轨迹和奖励;摘要仅将训练奖励改善视为构造环境支持策略优化的初步证据,并未在摘要中报告策略能力结果。对开发办公Agent的团队而言,应检查请求、服务记录、工具接口和评分检查是否连贯且可执行。

训练长程Agent要交付完整可执行环境,而不只是任务提示词基于CoworkEnv资源的SFT使Qwen3-VL-8B-Instruct在Claw-Eval Multi-turn tasks上提升31.9分强化学习结果仍属初步证据,选型时不宜把训练奖励等同于实际能力

03 图像生成 从单步画质转向整条编辑轨迹

多轮图像编辑的漂移不只是某一步画得不够好,更在于模型不断消费自己先前的输出,让伪影、细节损失和内容偏移沿轨迹累积。MT Forcing让教师直接从原图生成包含全部历史指令的目标,给学生的多轮自生成结果提供一个不受递归误差污染的参照。同时,它用参考编辑轨迹约束依赖历史的状态转移,以鼓励跨轮内容一致性,减少对本应保留的区域和此前编辑的意外改动。摘要称画质稳定性与跨轮一致性均有显著改善,但没有给出具体幅度,其对长序列、复杂局部编辑和真实用户指令的泛化仍需看全文确认。对交互式图像工具而言,这项工作的实用启示是:训练目标不仅要评价每一步,还要显式管理整条编辑轨迹。

多轮漂移应被视为误差累积问题,而非单步生成质量问题可用从原图生成的累计编辑结果作为更干净的训练参照评估图像编辑产品时,应同时检查长序列画质和既有内容保留能力

也值得关注

04
用完成轨迹的验证结果训练小型外部监控器,可在预测代码Agent运行可能失败时提前终止 代码智能StopLoss在SWE-bench Verified上保留99%的成功运行,并使每个保留解答的成本降低4.5%。链接
05
FineSplat用两种局部分组重新连接高分辨率细节 图像生成视图内分组结合三维空间分组,再以重建误差反馈修正一次性前馈预测,在相同或更少高斯基元预算下兼顾细节与紧凑性。链接
06
视频推理链还需显式落到跨帧时空证据 多模态TCoVP把实体、时间范围和带时间戳的空间证据组织成推理链,并将选定证据转为框提示和视频掩码预测的时间支持。链接
07
JEPA类潜在世界模型的解释目标需要从解码表示推进到分析变量如何交互、演化并影响预测 可解释性论文提出Ground、Structure、Verify、Act四阶段议程,同时承认后三阶段仍缺少系统探索。链接
08
从识别出的思路切换点生成更强的单路径延续,再进行思路级偏好优化 推理SteadyThought将新响应与原响应用于偏好训练,在保持较强推理准确率时,token消耗最多减少63.8%。链接
09
开放式生成的评分标准会随策略进步失去区分度 训练优化RARE只替换当前输出已完全满足的样本级标准;在三类视频脚本生成中,针对缺陷的更新较匹配静态标准平均提升3.82分。链接
10
人类与模型错误不同并不会自动转化为互补优势 安全对齐416名评审的35,613次判断显示,论文测试的辅助方式即使提高总体准确率,也可能减少人类纠正AI错误的次数。链接
11
天气模型合并token时可用观测不确定性保护关键位置 AI for Science在ERA5 72小时预测的1.40625°设置下,UtoMe-E以50% token缩减和相同0.55倍编码器FLOPs将Overall error从67.32降至53.00。链接
12
相近主指标分数可能对应明显不同的医疗风险校准表现 评测Auto-MD-bench覆盖10个临床数据集的15项任务,并显示模型在跨人群、医院与时间迁移时差异显著。链接
13
相较直接提供完整交互历史,个性化记忆平均使回答分布熵降低34.7% Agent这一结果覆盖多种模型和记忆机制,来自1,000个基于真实人机对话偏好构建的benchmark实例。链接

今日观察

三篇主文共同提示,长链路系统的可靠性不只取决于最终模型,还受监督接口如何设计影响:CoworkEnv把工作流要求、服务记录、工具接口和评分检查纳入环境构造,MT Forcing用累计编辑教师目标与参考轨迹提供画质及跨轮一致性监督,护栏研究则显示标签口径与教师软标签能够显著改变基准表现。对团队的具体行动建议是,把环境规格、监督信号来源与评测政策放进同一条数据治理链路审计。