Anthropic开发的Claude 3.5 Haiku提供200,000 token的上下文窗口。定价为每百万输入token 1美元，每百万输出token 5美元，通过提示缓存可节省高达90%，通过消息批处理API可节省50%。2024年11月4日发布，擅长代码补全、交互式聊天机器人、数据提取标注以及实时内容审核。
| Grok 4 | Claude 3.5 Haiku | |
|---|---|---|
网站
| ||
提供商
| ||
聊天
| ||
发布日期
| ||
模态
| 文本 图像 语音 视频 | 文本 |
API提供商
| xAI | Anthropic, AWS Bedrock, Vertex AI |
知识截止日期
| - | 01.04.2024 |
开源
| 否 | 否 |
输入定价
| $3.00 每百万token | $0.80 每百万token |
输出定价
| $15.00 每百万token | $4.00 |
MMLU
| - | 不可用 |
MMLU-Pro
| - | 65% 0-shot CoT 来源 |
MMMU
| - | 不可用 |
HellaSwag
| - | 不可用 |
HumanEval
| - | 88.1% 0-shot 来源 |
MATH
| - | 69.4% 0-shot CoT 来源 |
GPQA
| 87.5% Science 来源 | 不可用 |
IFEval
| - | 不可用 |
SimpleQA
| - | - |
AIME 2024 | - | - |
AIME 2025 | 91.7% Competition Math 来源 | - |
Aider Polyglot
| - | - |
LiveCodeBench v5
| 79% Competitive Coding 来源 | - |
Global MMLU (Lite)
| - | - |
MathVista
| - | - |
移动应用 | ||
MathArena | ||
| 平均分数 | 89% | - |
AIME 2025 基于美国邀请数学考试（American Invitational Mathematics Examination）题目的测试，旨在检验模型的数学能力。 | 91% | - |
HMMT February 2025 基于2025年2月哈佛-MIT数学竞赛题目的测试，旨在检验模型的数学能力。 | 92% | - |
BRUMO 2025 | 95% | - |
SMT 2025 基于2025年斯坦福数学竞赛题目的测试，旨在检验模型的数学能力。 | 86% | - |
CMIMC 2025 基于2025年加拿大数学奥林匹克竞赛题目的测试，旨在检验模型的数学能力。 | 83% | - |