跳到正文
ARC Prize· X:ARC Prize (@arcprize)·· 3 小时前AI 评分38

DeepSeek V4.1 Flash 的 ARC-AGI 评测成绩

AI 导读

DeepSeek V4.1 Flash 在 ARC-AGI-3 上取得 3.3% 的成绩,总评测成本 878 美元(provider adapter harness);在标准 harness 下为 0.9%,成本 1.2k 美元。该模型是首个在 ARC-AGI-3 上以低于 1k 美元总评测成本得分超过 3% 的模型。

正文

DeepSeek V4.1 Flash from @deepseek_ai on ARC-AGI (Verified):

- ARC-AGI-3: 3.3%, $878 (provider adapter harness), 0.9%, $1.2k (standard harness)

DeepSeek V4.1 Flash is the first model we've evaluated on ARC-AGI-3 to score above 3% for under $1k in total evaluation cost.

来源:ARC Prize · x.com