앤트로픽이 개발한 Claude 3.5 Haiku는 200,000 토큰의 컨텍스트 윈도우를 제공합니다. 입력 토큰 백만 개당 $1, 출력 토큰 백만 개당 $5의 가격이며, 프롬프트 캐싱으로 최대 90%, 메시지 배치 API로 최대 50% 절감이 가능합니다. 2024년 11월 4일 출시되었으며, 코드 자동완성, 대화형 챗봇, 데이터 추출 및 라벨링, 실시간 콘텐츠 검열 등에 탁월한 성능을 보입니다.
메타가 개발한 Llama 3.3 70B Instruct는 지시 기반 작업에 특화되어 미세 조정된 다국어 대형 언어 모델로, 대화형 응용에 최적화되어 있습니다. 최대 128,000 토큰의 컨텍스트 윈도우를 지원하며, 다양한 언어의 텍스트 생성 및 처리가 가능합니다. 2024년 12월 6일 출시되었으며, 공개 및 사유 챗봇 모델 다수를 능가하는 벤치마크 성능을 기록했습니다. Grouped-Query Attention(GQA)을 활용해 확장성을 높였으며, 공개 데이터 기반의 15조 개 이상 토큰으로 학습되었습니다. 모델 지식은 2023년 12월 기준입니다.
| Claude 3.5 Haiku | Llama 3.3 70B Instruct | |
|---|---|---|
웹사이트
| ||
제공자
| ||
채팅
| ||
출시일
| ||
모달리티
| 텍스트 | 텍스트 |
API 제공자
| Anthropic, AWS Bedrock, Vertex AI | Fireworks, Together, DeepInfra, Hyperbolic |
지식 업데이트 종료일
| 01.04.2024 | 12.2024 |
오픈 소스
| 아니오 | 예 |
입력 가격
| $0.80 100만 토큰당 | $0.23 100만 토큰당 |
출력 가격
| $4.00 | $0.40 100만 토큰당 |
MMLU
| 정보 없음 | 86% 0-shot, CoT 출처 |
MMLU-Pro
| 65% 0-shot CoT 출처 | 68.9% 5-shot, CoT 출처 |
MMMU
| 정보 없음 | 정보 없음 |
HellaSwag
| 정보 없음 | 정보 없음 |
HumanEval
| 88.1% 0-shot 출처 | 88.4% pass@1 출처 |
MATH
| 69.4% 0-shot CoT 출처 | 77% 0-shot, CoT 출처 |
GPQA
| 정보 없음 | 50.5% 0-shot, CoT 출처 |
IFEval
| 정보 없음 | 92.1% 출처 |
SimpleQA
| - | - |
AIME 2024 | - | - |
AIME 2025 | - | - |
Aider Polyglot
| - | - |
LiveCodeBench v5
| - | - |
Global MMLU (Lite)
| - | - |
MathVista
| - | - |
모바일 앱 | - |