基准美国执照医师考试 / United States Medical Licensing Examination
USMLE
美国执照医师考试,分三个阶段覆盖基础医学科学、临床知识与临床技能,以多选题为主,是医疗大模型评估中最常被引用的基准之一
时间轴 (近 90 天)
10月30日
该研究利用带有经验难度标签的USMLE和PANCE试题,引导LLM归纳出一套难度评分规则(rubric)。
待验证50%
10月30日
USMLE(美国医师执照考试)分Step 1、Step 2 CK和Step 3三个阶段,主要面向医学生和住院医师。
待验证50%
10月30日
USMLE的难度规则更强调对多个临床线索的整合能力。
待验证50%
9月26日
神经外科申请方使用USMLE Step分数、科研论文、推荐信等多维指标进行初步筛选
待验证50%
9月24日
MedQA是基于美国执业医师资格考试(USMLE)题库构建的多选题问答基准
待验证50%
9月23日
在USMLE等医学考试基准上的高分并不等于模型能在真实病例中做出正确判断
待验证50%
9月7日
Google的Med-PaLM 2在美国医师执照考试(USMLE)中达到专家水平
待验证50%
全部知识事实 (8)
待验证
GPT-4在美国执照医师考试USMLE中通过率超过90%
80%待验证USMLE(美国医师执照考试)分Step 1、Step 2 CK和Step 3三个阶段,主要面向医学生和住院医师。
50%待验证该研究利用带有经验难度标签的USMLE和PANCE试题,引导LLM归纳出一套难度评分规则(rubric)。
50%待验证USMLE的难度规则更强调对多个临床线索的整合能力。
50%待验证神经外科申请方使用USMLE Step分数、科研论文、推荐信等多维指标进行初步筛选
50%待验证MedQA是基于美国执业医师资格考试(USMLE)题库构建的多选题问答基准
50%待验证在USMLE等医学考试基准上的高分并不等于模型能在真实病例中做出正确判断
50%待验证Google的Med-PaLM 2在美国医师执照考试(USMLE)中达到专家水平
50%