跳到正文
原文
Reddit · r/artificial· /u/AIGODSEND·· 4 小时前AI 评分50

对抗性验证一年实践:约 3 成高置信输出未通过审查,模型一致不等于验证

A year of adversarial verification: 3 in 10 confident outputs failed review. Agreement between models isn't verification.

AI 导读

一个 AI 智能体系统运行对抗性验证层一年后,日志显示约 3 成高置信输出未通过审查。团队通过追踪后续事故、人工标签或回滚结果来审计审核者,并剔除长期误判或从不放行的审核者;验证重点不是模型达成一致,而是评估分歧成本,并在执行前完成不可逆操作的审查。

来源:Reddit · r/artificial · reddit.com