概念noise floor
噪声底线
衡量基准自身免费分的统计工具,用随机或平凡基线策略运行同一任务集得到分数下限,用于区分真实信号与基准噪声
时间轴 (近 90 天)
10月15日
噪声底线是用完全随机、平凡或无操作策略在相同任务集上跑一遍得到的分数,代表任何系统在没有真正能力时也能获得的下限。
待验证50%
10月15日
在二分类任务中,若正负样本比例为6:4,则永远输出‘正’的基线得分为60分,此时Agent得65分只有5分真实信号。
待验证50%
衡量基准自身免费分的统计工具,用随机或平凡基线策略运行同一任务集得到分数下限,用于区分真实信号与基准噪声
噪声底线是用完全随机、平凡或无操作策略在相同任务集上跑一遍得到的分数,代表任何系统在没有真正能力时也能获得的下限。
在二分类任务中,若正负样本比例为6:4,则永远输出‘正’的基线得分为60分,此时Agent得65分只有5分真实信号。