Grok 3는 xAI의 최신 고급 모델로, 이전 최고 수준 모델보다 10배 강력한 연산 성능을 가진 Colossus 슈퍼클러스터에서 훈련되었습니다. 100만 토큰 컨텍스트 윈도우와 고급 추론 능력을 갖추었으며, 대규모 강화 학습을 통해 복잡한 문제를 해결하는 데 수 초에서 수 분까지의 깊이 있는 사고 과정을 구현합니다. 학술 벤치마크와 실사용자 평가에서 최고 성능을 달성했으며, Chatbot Arena에서 Elo 점수 1402를 기록했습니다. Grok 3 Mini는 저비용 경량화 버전으로 함께 출시되었습니다.
앤트로픽이 개발한 Claude 3.5 Haiku는 200,000 토큰의 컨텍스트 윈도우를 제공합니다. 입력 토큰 백만 개당 $1, 출력 토큰 백만 개당 $5의 가격이며, 프롬프트 캐싱으로 최대 90%, 메시지 배치 API로 최대 50% 절감이 가능합니다. 2024년 11월 4일 출시되었으며, 코드 자동완성, 대화형 챗봇, 데이터 추출 및 라벨링, 실시간 콘텐츠 검열 등에 탁월한 성능을 보입니다.
| Grok 3 Beta | Claude 3.5 Haiku | |
|---|---|---|
웹사이트
| ||
제공자
| ||
채팅
| ||
출시일
| ||
모달리티
| 텍스트 이미지 비디오 | 텍스트 |
API 제공자
| xAI | Anthropic, AWS Bedrock, Vertex AI |
지식 업데이트 종료일
| 2025-01 | 01.04.2024 |
오픈 소스
| 아니오 | 아니오 |
입력 가격
| 정보 없음 | $0.80 100만 토큰당 |
출력 가격
| 정보 없음 | $4.00 |
MMLU
| 정보 없음 | 정보 없음 |
MMLU-Pro
| 79.9% Base model 출처 | 65% 0-shot CoT 출처 |
MMMU
| 78% With Think mode 출처 | 정보 없음 |
HellaSwag
| 정보 없음 | 정보 없음 |
HumanEval
| 정보 없음 | 88.1% 0-shot 출처 |
MATH
| 정보 없음 | 69.4% 0-shot CoT 출처 |
GPQA
| 84.6% With Think mode, Diamond 출처 | 정보 없음 |
IFEval
| 정보 없음 | 정보 없음 |
SimpleQA
| - | - |
AIME 2024 | - | - |
AIME 2025 | - | - |
Aider Polyglot
| - | - |
LiveCodeBench v5
| - | - |
Global MMLU (Lite)
| - | - |
MathVista
| - | - |
모바일 앱 |