AI HOT 精选

Artificial Analysis 评测 Step 5 Preview: Intelligence Index 得 44 分,成本约为同级模型 1/2.8

8.5内容质量

TL;DR · AI 摘要

阶跃星辰Step 5 Preview在Artificial Analysis Intelligence Index得44分,成本为同级模型的1/2.8,但智能体评测表现略逊于Qwen3.8 Max和GLM-5.3。

核心要点

  • Step 5 Preview每任务成本$0.72,为同分模型的1/2.8
  • 前沿推理能力较Step 3.7 Flash提升25分(HLE)和19分(CritPt)
  • 600B参数模型在AA-Omniscience准确率42%,但幻觉率43%

结构提纲

按章节快速跳转。

  1. Step 5 Preview在Intelligence Index得44分,成本显著低于同级模型。

  2. 600B总参数/27B激活参数,输入输出token定价$1/$2.70。

  3. 在HLE和CritPt测试中表现优于前代模型,但落后于Kimi K3。

  4. GDPval-AA Elo值1566,低于Qwen3.8 Max和GLM-5.3。

  5. 支持文本/图像/视频输入,文本输出,但未提及具体实现细节。

  6. AA-Omniscience准确率42%,但幻觉率高于GLM-5.3。

思维导图

用一张图看清主题之间的关系。

查看大纲文本(无障碍 / 无 JS 友好)
  • Step 5 Preview评测分析
    • 核心指标
      • Intelligence Index 44分
      • 成本$0.72/任务
    • 性能对比
      • HLE 46%(vs Kimi K3 47%)
      • CritPt 21%(介于Kimi K3与GLM-5.3之间)
    • 短板分析
      • GDPval-AA Elo 1566(低于Qwen3.8 Max 1668)
      • AA-Omniscience Index 16(介于GLM-5.3与Kimi K3之间)

金句 / Highlights

值得收藏与分享的关键句。

#模型评测#大模型#成本分析#AI性能
打开原文

Artificial Analysis 评测 Step 5 Preview: Intelligence Index 得 · AIHOT

返回

原文

精选

AI 评分 65/100

在 X 查看原推

(在新标签页打开)

导出 Markdown

Artificial Analysis 评测 Step 5 Preview: Intelligence Index 得 44 分,成本约为同级模型 1/2.8

Artificial Analysis · @ArtificialAnlys · X

·

2026-09-22 09:49

8分钟前

AI 导读

Artificial Analysis 评测阶跃星辰 Step 5 Preview,其在 Artificial Analysis Intelligence Index 得 44 分,与 Kimi K3 (max) 持平,略低于 GLM-5.3 (max) 和 Qwen3.8 Max 的 45 分,每任务成本约 $0.72,约为同级模型(约 $2.00)的 1/2.8。

Artificial Analysis

@

ArtificialAnlys

65

AI 编辑部评分,满分 100

· 8分钟前

推荐理由

Artificial Analysis 实测 Step 5 Preview 的得分、成本与智能体短板,读者可据此对比同分段模型的表现与性价比。

正文 · AI 翻译

中文

阶跃星辰的 Step 5 Preview 在 Artificial Analysis 智能指数上得分 44,与 Kimi K3(max)持平,而每任务成本约低 2.8 倍,但在智能体评测上落后于同类模型

Step 5 Preview 是 @StepFun_ai 的新旗舰模型,总参数量 600B、激活参数 27B,接替 Step 3.7 Flash(2026 年 5 月发布)。它在智能指数上得分 44,与 Kimi K3(max)持平,仅略低于 GLM-5.3(max,45)和 Qwen3.8 Max(45)

关键要点:

➤ Step 5 Preview 每完成一项智能指数任务的成本,比同分数模型低约 2.8 倍。它每任务成本约 $0.72,而同样得分 44 的 Kimi K3(max)约为 $2.00,得分 45 的 GLM-5.3(max)约为 $2.01。这源于其定价:每 1M 输入/输出 token 为 $1/$2.70,在输入和输出上都低于这两者。MiMo-V2.6-Pro 是唯一一个得分更高(46)而每任务成本更低($0.13)的模型

➤ 前沿推理是其突出强项,也是相较 Step 3.7 Flash 提升最大的地方。Step 5 Preview 在 Humanity's Last Exam 上得分 46%,与 Kimi K3(max,47%)相当;在 CritPt 上得分 21%,介于 Kimi K3(23%)和 GLM-5.3(max,19%)之间。两者相较 Step 3.7 Flash 均大幅提升:HLE 上 +25 分,CritPt 上 +19 分

➤ 在参数更少的情况下,AA-Omniscience 准确率高于 GLM-5.3,但幻觉更多。Step 5 Preview 总参数量为 600B,在 AA-Omniscience(我们衡量事实回忆与幻觉的基准)上达到 42% 的准确率,领先于 GLM-5.3(max,34%,753B),落后于 Kimi K3(max,48%,2.8T)。它尝试回答的问题比 GLM-5.3 更多(68% 对 55%),且作答时更常出现幻觉(43% 对 30%),最终在 AA-Omniscience Index 上得分为 16,介于 GLM-5.3(14)与 Kimi K3(20)之间

➤ 在智能体评测中,Step 5 Preview 落后于 Intelligence Index 得分相近的同类模型。它在我们衡量智能体表现的主要评测 GDPval-AA 上获得 1,566 Elo,落后于 Qwen3.8 Max(1,668)和 GLM-5.3(max,1,646)。这一差距在 Terminal-Bench 4.0(33% 对 39% 和 42%)、AA-Briefcase(1,432 Elo 对 1,640 和 1,525)以及 AutomationBench-AA(51% 对 56% 和 62%)上同样存在

模型关键细节:

➤ 模型规模:600B 总参数,27B 激活参数的 MoE 模型

➤ 上下文窗口:1M tokens

➤ 多模态:支持文本、图像和视频输入,文本输出

➤ 定价:每 1M 输入/输出 tokens 为 $1/$2.70,缓存输入为 $0.05/M

➤ 可用性:StepFun 第一方 API,并计划于 10 月 15 日发布开放权重

➤ 许可:目前为闭源权重,计划于 10 月 15 日发布权重

来源: Artificial Analysis · x.com

智能体

推理

评测/基准