Anthropic开发的Claude 3.5 Haiku提供200,000 token的上下文窗口。定价为每百万输入token 1美元，每百万输出token 5美元，通过提示缓存可节省高达90%，通过消息批处理API可节省50%。2024年11月4日发布，擅长代码补全、交互式聊天机器人、数据提取标注以及实时内容审核。
Mistral开发的Mistral Large 2提供128K token上下文窗口，定价为每百万输入token 3美元，每百万输出token 9美元。2024年7月24日发布，在5-shot评估的MMLU基准测试中获得84.0分，展现多任务处理的强大性能。
| Claude 3.5 Haiku | Mistral Large 2 | |
|---|---|---|
提供商 | ||
网站 | ||
发布日期 | Nov 04, 2024 5 个月 ago | Jun 24, 2024 9 个月 ago |
模态 | 文本 | 文本 |
API提供商 | Anthropic, AWS Bedrock, Vertex AI | Azure AI, AWS Bedrock, Google AI Studio, Vertex AI, Snowflake Cortex |
知识截止日期 | 01.04.2024 | 未知 |
开源 | 否 | 是 |
输入定价 | $0.80 每百万token | $3.00 每百万token |
输出定价 | $4.00 | $9.00 每百万token |
MMLU | 不可用 | 84% 5-shot 来源 |
MMLU Pro | 65% 0-shot CoT 来源 | 50.69% 来源 |
MMMU | 不可用 | 不可用 |
HellaSwag | 不可用 | 不可用 |
HumanEval | 88.1% 0-shot 来源 | 不可用 |
MATH | 69.4% 0-shot CoT 来源 | 1.13% 来源 |
GPQA | 不可用 | 24.94% |
IFEval | 不可用 | 84.01% |
移动应用 | - |