BBH
Das Ergebnis jedes Modells, so, wie der Benchmarking Hub von Epoch AI es veröffentlicht, von Epoch gemessen oder aus der genannten Quelle gesammelt. Facthory hat sie nicht selbst gemessen.
Daten: Epoch AI, „Capabilities & benchmarking“, epoch.ai/benchmarks, lizenziert unter CC BY 4.0. Gelesen am 16.11.2026.
Das Diagramm zeigt die 25 besten von 50 Ergebnissen; die Tabelle führt alle auf.
| # | Modell | Organisation | Ergebnis | Nachweis |
|---|---|---|---|---|
| 1 | gemini-1.5-pro-001 API access | Google DeepMind | 89,2 % | Protokoll oder Quelle |
| 2 | gemini-1.5-pro-001-feb24 API access | Google DeepMind | 84 % | Protokoll oder Quelle |
| 3 | DeepSeek-V3 Open weights (restricted use) | DeepSeek | 82,9 % | Protokoll oder Quelle |
| 4 | Llama-3.1-405B Open weights (restricted use) | Meta AI | 82,9 % | Protokoll oder Quelle |
| 5 | Phi-3-medium-128k-instruct Open weights (unrestricted) | Microsoft | 81,4 % | – |
| 6 | Qwen2.5-72B Open weights (unrestricted) | Alibaba | 79,8 % | Protokoll oder Quelle |
| 7 | Phi-3-small-8k-instruct Open weights (unrestricted) | Microsoft | 79,1 % | – |
| 8 | DeepSeek-V2 Open weights (restricted use) | DeepSeek | 78,8 % | Protokoll oder Quelle |
| 9 | GPT-4 (Jun 2023) API access | OpenAI | 75,1 % | – |
| 10 | Phi-3-mini-4k-instruct Open weights (unrestricted) | Microsoft | 71,7 % | – |
| 11 | StableBeluga2 Open weights (non-commercial) | Stability AI | 69,3 % | Protokoll oder Quelle |
| 12 | Llama-2-70b-hf Open weights (restricted use) | Meta AI | 64,9 % | Protokoll oder Quelle |
| 13 | GPT-3.5 Turbo (June 2023) API access | OpenAI | 61,6 % | – |
| 14 | phi-2 Open weights (unrestricted) | Microsoft | 59,4 % | – |
| 15 | Nemotron-4 15B Unreleased | Nvidia | 58,7 % | – |
| 16 | LLaMA-65B Open weights (non-commercial) | Meta AI | 58,4 % | Protokoll oder Quelle |
| 17 | Mistral-7B-v0.1 Open weights (unrestricted) | Mistral AI | 56,1 % | Protokoll oder Quelle |
| 18 | gemma-7b Open weights (restricted use) | Google DeepMind | 55,1 % | Protokoll oder Quelle |
| 19 | Yi-34B Open weights (restricted use) | 01.AI | 54,3 % | – |
| 20 | Qwen-14B Open weights (restricted use) | Alibaba | 53,4 % | Protokoll oder Quelle |
| 21 | internlm-20b | – | 52,5 % | Protokoll oder Quelle |
| 22 | Yi-34B-Chat Open weights (restricted use) | 01.AI | 51,4 % | – |
| 23 | LLaMA-33B Open weights (non-commercial) | Meta AI | 50 % | Protokoll oder Quelle |
| 24 | Qwen-14B-Chat Open weights (restricted use) | Alibaba | 49,7 % | – |
| 25 | Baichuan-2-13B-Base Open weights (restricted use) | Baichuan | 48,8 % | – |
| 26 | Qwen-7B Open weights (restricted use) | Alibaba | 45 % | Protokoll oder Quelle |
| 27 | Llama-2-34b Unreleased | Meta AI | 44,1 % | – |
| 28 | vicuna-13b-v1.1 | – | 43 % | – |
| 29 | Baichuan-13B-Base Open weights (restricted use) | Baichuan | 43 % | – |
| 30 | Yi-6B Open weights (restricted use) | 01.AI | 42,8 % | – |
| 31 | Llama-2-70b-chat Open weights (restricted use) | Meta AI | 42,4 % | – |
| 32 | internlm-chat-20b | – | 42,4 % | – |
| 33 | Baichuan-2-7B-Base Open weights (restricted use) | Baichuan | 41,6 % | – |
| 34 | Yi-6B-Chat Open weights (restricted use) | 01.AI | 39,7 % | – |
| 35 | Llama-2-13b Open weights (restricted use) | Meta AI | 39,4 % | Protokoll oder Quelle |
| 36 | Baichuan2-13B-Chat | – | 38,8 % | – |
| 37 | mpt-30b Open weights (unrestricted) | MosaicML | 38 % | Protokoll oder Quelle |
| 38 | LLaMA-13B Open weights (non-commercial) | Meta AI | 37,9 % | – |
| 39 | falcon-40b Open weights (unrestricted) | Technology Innovation Institute | 37,1 % | Protokoll oder Quelle |
| 40 | internlm-7b | – | 37 % | Protokoll oder Quelle |
| 41 | gemma-2b Open weights (restricted use) | Google DeepMind | 35,2 % | Protokoll oder Quelle |
| 42 | mpt-7b Open weights (unrestricted) | MosaicML | 35,2 % | – |
| 43 | INTELLECT-1-Instruct | Prime Intellect,Hugging Face,Arcee AI | 34,9 % | Protokoll oder Quelle |
| 44 | chatglm2-6b | – | 33,7 % | – |
| 45 | Llama-2-13b-chat Open weights (restricted use) | Meta AI | 32,9 % | – |
| 46 | Llama-2-7b Open weights (restricted use) | Meta AI | 32,6 % | Protokoll oder Quelle |
| 47 | Baichuan-7B Open weights (non-commercial) | Baichuan | 32,5 % | – |
| 48 | LLaMA-7B Open weights (non-commercial) | Meta AI | 32,4 % | – |
| 49 | falcon-7b Open weights (unrestricted) | Technology Innovation Institute | 28,8 % | – |
| 50 | Qwen-1.8B | – | 28,2 % | Protokoll oder Quelle |
