ARC-C厂商自报 · 越高越好
94.8%
0-shot Chain-of-Thought
成绩出处BBH厂商自报 · 越高越好
86.9%
3-shot Chain-of-Thought
成绩出处BFCL厂商自报 · 越高越好
68.4%
accuracy
成绩出处ChartQA厂商自报 · 越高越好
89.2%
relaxed accuracy
成绩出处CRAG厂商自报 · 越高越好
50.3%
accuracy
成绩出处DocVQA厂商自报 · 越高越好
93.5%
ANLS
成绩出处DROP厂商自报 · 越高越好
85.4%
0-shot
成绩出处EgoSchema厂商自报 · 越高越好
72.1%
accuracy
成绩出处FinQA厂商自报 · 越高越好
77.2%
0-shot accuracy
成绩出处GPQA厂商自报 · 越高越好
46.9%
6-shot Chain-of-Thought
成绩出处GroundUI-1K厂商自报 · 越高越好
81.4%
accuracy
成绩出处GSM8k厂商自报 · 越高越好
94.8%
0-shot Chain-of-Thought
成绩出处HumanEval厂商自报 · 越高越好
89%
0-shot pass@1
成绩出处IFEval厂商自报 · 越高越好
92.1%
0-shot
成绩出处LVBench厂商自报 · 越高越好
41.6%
accuracy
成绩出处MATH厂商自报 · 越高越好
76.6%
0-shot Chain-of-Thought
成绩出处MMLU厂商自报 · 越高越好
85.9%
0-shot Chain-of-Thought
成绩出处MM-Mind2Web厂商自报 · 越高越好
63.7%
step accuracy
成绩出处MMMU厂商自报 · 越高越好
61.7%
Chain-of-Thought
成绩出处SQuALITY厂商自报 · 越高越好
19.8%
ROUGE-L
成绩出处TextVQA厂商自报 · 越高越好
81.5%
weighted accuracy
成绩出处Translation en→Set1 COMET22厂商自报 · 越高越好
89.1%
COMET22
成绩出处Translation en→Set1 spBleu厂商自报 · 越高越好
43.4%
spBleu
成绩出处Translation Set1→en COMET22厂商自报 · 越高越好
89%
COMET22
成绩出处Translation Set1→en spBleu厂商自报 · 越高越好
44.4%
spBleu
成绩出处VATEX厂商自报 · 越高越好
77.8%
CIDEr
成绩出处VisualWebBench厂商自报 · 越高越好
79.7%
composite
成绩出处