LLaMA 4 Scout – tai 17 milijardų parametrų modelis, kuris naudoja Mixture-of-Experts architektūrą su 16 aktyvių ekspertų, todėl yra lyderis savo multimodalių modelių kategorijoje. Jis nuolat lenkia konkurentus, tokius kaip Gemma 3, Gemini 2.0 Flash-Lite ir Mistral 3.1 įvairiose užduotyse. Nepaisant aukštos spartos, LLaMA 4 Scout yra nepaprastai efektyvus – gali veikti vienoje NVIDIA H100 GPU naudojant Int4 kvantavimą. Taip pat turi pirmaujantį 10 milijonų žodžių konteksto langą ir yra natūraliai multimodalinis – be problemų apdoroja tekstą, vaizdus ir vaizdo įrašus sudėtingoms realaus pasaulio reikmėms.
DeepSeek-R1 yra 671B parametrų Mišrios ekspertų (MoE) modelis su 37B aktyvuotais parametrais per žodį, apmokytas didelio masto sustiprinto mokymosi, sutelkiant dėmesį į mąstymo gebėjimus. Jis apima dvi sustiprinto mokymosi stadijas, skirtas atrasti patobulintas mąstymo schemas ir suderinti su žmogaus pageidavimais, taip pat dvi SFT stadijas, skirtas pritaikyti mąstymo ir nemąstymo gebėjimus. Modelis pasiekia našumą, panašų į OpenAI-o1, matematikos, kodo ir mąstymo užduotyse.
Llama 4 Scout | DeepSeek-R1 | |
---|---|---|
Tiekėjas | ||
Internetinė svetainė | ||
Išleidimo data | Apr 05, 2025 2 savaitės ago | Jan 21, 2025 3 mėnesiai ago |
Modalumai | tekstas vaizdai vaizdo | tekstas |
API tiekėjai | Meta AI, Hugging Face, Fireworks, Together, DeepInfra | DeepSeek, HuggingFace |
Žinių nutraukimo data | 2025-04 | Nežinoma |
Atvirojo kodo | Taip (Šaltinis) | Taip |
Įvesties kaina | Nėra prieinama | $0.55 už milijoną žodžių |
Išvesties kaina | Nėra prieinama | $2.19 už milijoną žodžių |
MMLU | Nėra prieinama | 90.8% Pass@1 Šaltinis |
MMLU Pro | 74.3% Reasoning & Knowledge Šaltinis | 84% EM Šaltinis |
MMMU | 69.4% Image Reasoning Šaltinis | - |
HellaSwag | Nėra prieinama | - |
HumanEval | Nėra prieinama | - |
MATH | Nėra prieinama | - |
GPQA | 57.2% Diamond Šaltinis | 71.5% Pass@1 Šaltinis |
IFEval | Nėra prieinama | 83.3% Prompt Strict Šaltinis |
Mobilioji programa | - |
Compare AI. Test. Benchmarks. Mobiliosios pokalbių robotų programos, Sketch
Copyright © 2025 All Right Reserved.