Agile Deliberation
Google Research 提出的一个用于主观图像分类的人机协作框架,将边界样本交给用户判断以迭代调整分类器,实现概念对齐。
时间轴 (近 90 天)
Google Research 发布了 Agile Deliberation 框架,用于处理主观图像分类中的灰色地带问题。
Agile Deliberation 将边界样本交给用户判断,通过具体图像对比澄清概念定义,形成人机协作的概念对齐循环。
在18场真实用户会话中,Agile Deliberation 将基于 Gemini 的分类器 F1 分数相比零样本基线提升了10.5个点。
Agile Deliberation 的提升来自人类对边界案例的澄清,而非更多的标注数据或更大的模型。
Agile Deliberation 依赖真实用户会话,效果与用户投入的交互质量相关。
18场会话的规模表明 Agile Deliberation 仍是早期验证,更大规模下的表现有待观察。
Agile Deliberation 在多人意见冲突时如何聚合判断尚未披露。
全部知识事实 (7)
Agile Deliberation 的提升来自人类对边界案例的澄清,而非更多的标注数据或更大的模型。
50%待验证Agile Deliberation 将边界样本交给用户判断,通过具体图像对比澄清概念定义,形成人机协作的概念对齐循环。
50%待验证在18场真实用户会话中,Agile Deliberation 将基于 Gemini 的分类器 F1 分数相比零样本基线提升了10.5个点。
50%待验证Agile Deliberation 在多人意见冲突时如何聚合判断尚未披露。
50%待验证Agile Deliberation 依赖真实用户会话,效果与用户投入的交互质量相关。
50%待验证18场会话的规模表明 Agile Deliberation 仍是早期验证,更大规模下的表现有待观察。
50%待验证Google Research 发布了 Agile Deliberation 框架,用于处理主观图像分类中的灰色地带问题。
50%