ARC Prize· X:ARC Prize (@arcprize)·· 3 小时前AI 评分38
DeepSeek V4.1 Flash 的 ARC-AGI 评测成绩
AI 导读
DeepSeek V4.1 Flash 在 ARC-AGI-3 上取得 3.3% 的成绩,总评测成本 878 美元(provider adapter harness);在标准 harness 下为 0.9%,成本 1.2k 美元。该模型是首个在 ARC-AGI-3 上以低于 1k 美元总评测成本得分超过 3% 的模型。
正文
DeepSeek V4.1 Flash from @deepseek_ai on ARC-AGI (Verified):
- ARC-AGI-3: 3.3%, $878 (provider adapter harness), 0.9%, $1.2k (standard harness)
DeepSeek V4.1 Flash is the first model we've evaluated on ARC-AGI-3 to score above 3% for under $1k in total evaluation cost.
来源:ARC Prize · x.com