Aider-Polyglot厂商自报 · 越高越好
51.6%
Standard benchmark
成绩出处Aider-Polyglot Edit厂商自报 · 越高越好
52.9%
Standard benchmark
成绩出处AIME 2024厂商自报 · 越高越好
48.1%
Standard benchmark
成绩出处AIME 2025厂商自报 · 越高越好
46.4%
GPT-4.1 with no tools - Competition mathematics (AIME 2025).
成绩出处CharXiv-D厂商自报 · 越高越好
87.9%
Standard benchmark
成绩出处CharXiv-R厂商自报 · 越高越好
56.7%
Standard benchmark
成绩出处COLLIE厂商自报 · 越高越好
65.8%
Standard benchmark
成绩出处ComplexFuncBench厂商自报 · 越高越好
65.5%
Standard benchmark
成绩出处GPQA厂商自报 · 越高越好
66.3%
Diamond
成绩出处Graphwalks BFS <128k厂商自报 · 越高越好
61.7%
Standard benchmark
成绩出处Graphwalks BFS >128k厂商自报 · 越高越好
19%
Internal benchmark
成绩出处Graphwalks parents <128k厂商自报 · 越高越好
58%
Internal benchmark
成绩出处Graphwalks parents >128k厂商自报 · 越高越好
25%
Internal benchmark
成绩出处HMMT 2025厂商自报 · 越高越好
28.9%
GPT-4.1 with no tools - Harvard-MIT Mathematics Tournament.
成绩出处Humanity's Last Exam厂商自报 · 越高越好
5.4%
GPT-4.1 with no tools - Expert-level questions across subjects.
成绩出处IFEval厂商自报 · 越高越好
87.4%
Standard benchmark
成绩出处Internal API instruction following (hard)厂商自报 · 越高越好
49.1%
Internal benchmark
成绩出处MathVista厂商自报 · 越高越好
72.2%
Standard benchmark
成绩出处MMLU厂商自报 · 越高越好
90.2%
Standard benchmark
成绩出处MMMLU厂商自报 · 越高越好
87.3%
Standard benchmark
成绩出处MMMU厂商自报 · 越高越好
74.8%
Standard benchmark
成绩出处Multi-Challenge厂商自报 · 越高越好
38.3%
Standard benchmark (GPT-4o grader)
成绩出处Multi-IF厂商自报 · 越高越好
70.8%
Standard benchmark
成绩出处OpenAI-MRCR: 2 needle 128k厂商自报 · 越高越好
57.2%
Internal benchmark
成绩出处OpenAI-MRCR: 2 needle 1M厂商自报 · 越高越好
46.3%
Internal benchmark
成绩出处SWE-Bench Verified厂商自报 · 越高越好
54.6%
Internal methodology, see source footnote [2]
成绩出处TAU-bench Airline厂商自报 · 越高越好
49.4%
Avg 5 runs, no custom tools/prompting (footnote [4])
成绩出处TAU-bench Retail厂商自报 · 越高越好
68%
Avg 5 runs, no custom tools/prompting (footnote [4], GPT-4o user model)
成绩出处Video-MME (long, no subtitles)厂商自报 · 越高越好
72%
Standard benchmark
成绩出处