Codeforces
知名在线编程竞赛平台,提供算法竞赛题目,也被用于评测AI模型的算法编程能力
时间轴 (近 90 天)
最终版DeepSeek R1与2024年12月版OpenAI o1在基准上互有胜负:AIME 2024上79.8%对79.2%,Math500上97.3%对96.4%,Codeforces上o1略占优。
AlphaCode论文报告其在Codeforces竞赛中达到约前54%的人类选手水平。
模型在竞赛数学(如 AIME、IMO)和代码生成(如 Codeforces 竞赛题)上的得分在过去一年间出现近乎垂直的增长曲线
Codeforces、AtCoder等竞赛编程平台的顶尖选手绝大多数使用C++
AlphaCode是DeepMind 2022年的里程碑,在Codeforces上达到人类参赛者中位数水平
LiveCodeBench持续从LeetCode、Codeforces、AtCoder等竞赛平台抓取新题目以防止数据泄露
全部知识事实 (10)
o1模型在国际数学奥林匹克预选题上的表现接近金牌水平,在Codeforces编程竞赛中达到了89百分位
85%待验证在Pass@1 Codeforces基准测试中,o1和o1 pro得分非常接近
80%待验证Codeforces拥有超过200万注册用户
75%待验证AlphaCode是DeepMind 2022年的里程碑,在Codeforces上达到人类参赛者中位数水平
60%待验证在Codeforces评分中,o1的得分远低于o3-mini-high
60%待验证最终版DeepSeek R1与2024年12月版OpenAI o1在基准上互有胜负:AIME 2024上79.8%对79.2%,Math500上97.3%对96.4%,Codeforces上o1略占优。
50%待验证AlphaCode论文报告其在Codeforces竞赛中达到约前54%的人类选手水平。
50%待验证模型在竞赛数学(如 AIME、IMO)和代码生成(如 Codeforces 竞赛题)上的得分在过去一年间出现近乎垂直的增长曲线
50%待验证Codeforces、AtCoder等竞赛编程平台的顶尖选手绝大多数使用C++
50%待验证LiveCodeBench持续从LeetCode、Codeforces、AtCoder等竞赛平台抓取新题目以防止数据泄露
50%