概念
COMPREHEND
一种自动构建超细粒度蕴含层次结构的方法,用句子替代传统分类体系中的簇名,基于自然语言推理中的蕴含关系组织提示分类,实现更细粒度的提示分类与模型弱点分析。
时间轴 (近 90 天)
11月4日
COMPREHEND是一种自动构建超细粒度蕴含层次结构的方法,用句子替代传统分类体系中的簇名。
待验证50%
11月4日
在WildBench基准上,COMPREHEND的蕴含/忠实性指标从EvalTree的22.6提高到41.7。
待验证50%
11月4日
在预测基准测试中的响应得分时,COMPREHEND生成的弱点报告比EvalTree更具信息量。
待验证50%
11月4日
COMPREHEND的代码已开源于GitHub仓库JackNapier20/COMPREHEND_public。
待验证50%
11月4日
COMPREHEND依赖LLM生成句子描述的质量,可能引入生成偏差。
待验证50%