UCSD Hao AI Lab· X:UCSD Hao AI Lab (@haoailab)·· 3 小时前AI 评分31
开源权重模型零样本表现如何?ORA 与 RPent 在 RoboTwin、LIBERO-Pro 上的成绩
开源权重模型零样本表现如何?
AI 导读
开源权重模型零样本能力测试中,ORA 在 RoboTwin 取得 69.2%、在 LIBERO-Pro 取得 81.4%。带任务专属记忆的 RPent 在 RoboTwin 上配合 GPT-5.5 与 Opus-4.7 分别为 62.4% 和 58.4%,在 LIBERO-Pro 上配合 Opus-4.7 为 82.4%。同一批测试用例,不同系统表现各异。
正文
How far can an open-weight model go, zero-shot?
ORA: 69.2% on RoboTwin; 81.4% on LIBERO-Pro.
RPent (with task-specific memory): 62.4%/58.4% on RoboTwin with GPT-5.5/Opus-4.7; 82.4% on LIBERO-Pro with Opus-4.7.
Same cases, different systems. https://github.com/RLinf/RPent
来源:UCSD Hao AI Lab · x.com