OpenAI 提出 g-mean² 之外的互补可监控性指标
OpenAI 在 g-mean² 之外新增两个互补指标:pair-matched 指标只在多个模型共同支持的实例上比较可监控性,post-control 指标则模拟监控器拒绝输出后的部署风险。原文指出,g-mean² 分数可能受各模型有效任务子集不同的影响,且不反映监控器在部署中作为控制手段的实际效果。
回到原文
这里保留短导读,不转载来源网站的完整正文。具体表述和后续更新请以原文为准。
打开 AIHOT 原文OpenAI 在 g-mean² 之外新增两个互补指标:pair-matched 指标只在多个模型共同支持的实例上比较可监控性,post-control 指标则模拟监控器拒绝输出后的部署风险。原文指出,g-mean² 分数可能受各模型有效任务子集不同的影响,且不反映监控器在部署中作为控制手段的实际效果。
这里保留短导读,不转载来源网站的完整正文。具体表述和后续更新请以原文为准。
打开 AIHOT 原文