TriviaQA
Das Ergebnis jedes Modells, so, wie der Benchmarking Hub von Epoch AI es veröffentlicht, von Epoch gemessen oder aus der genannten Quelle gesammelt. Facthory hat sie nicht selbst gemessen.
Daten: Epoch AI, „Capabilities & benchmarking“, epoch.ai/benchmarks, lizenziert unter CC BY 4.0. Gelesen am 16.11.2026.
Das Diagramm zeigt die 25 besten von 39 Ergebnissen; die Tabelle führt alle auf.
| # | Modell | Organisation | Ergebnis | Nachweis |
|---|---|---|---|---|
| 1 | claude-2.0 API access | Anthropic | 87,5 % | Protokoll oder Quelle |
| 2 | claude-1.3 API access | Anthropic | 86,7 % | Protokoll oder Quelle |
| 3 | PaLM 2-L | – | 86,1 % | Protokoll oder Quelle |
| 4 | GPT-3.5 Turbo (Nov 2023) API access | OpenAI | 85,8 % | – |
| 5 | Llama-2-70b-hf Open weights (restricted use) | Meta AI | 85 % | Protokoll oder Quelle |
| 6 | GPT-4 (Jun 2023) API access | OpenAI | 84,8 % | Protokoll oder Quelle |
| 7 | DeepSeek-V3 Open weights (restricted use) | DeepSeek | 82,9 % | Protokoll oder Quelle |
| 8 | Llama-3.1-405B Open weights (restricted use) | Meta AI | 82,7 % | Protokoll oder Quelle |
| 9 | Mixtral-8x7B-v0.1 Open weights (unrestricted) | Mistral AI | 82,2 % | – |
| 10 | LLaMA-65B Open weights (non-commercial) | Meta AI | 81,7 % | – |
| 11 | PaLM 2-M | – | 81,7 % | Protokoll oder Quelle |
| 12 | Llama-2-34b Unreleased | Meta AI | 81 % | – |
| 13 | DeepSeek-V2 Open weights (restricted use) | DeepSeek | 80 % | Protokoll oder Quelle |
| 14 | Llama-2-13b Open weights (restricted use) | Meta AI | 79,6 % | Protokoll oder Quelle |
| 15 | claude-instant-1.1 API access | Anthropic | 78,9 % | Protokoll oder Quelle |
| 16 | LLaMA-33B Open weights (non-commercial) | Meta AI | 78,7 % | – |
| 17 | claude-instant-1.2 API access | Anthropic | 78,7 % | Protokoll oder Quelle |
| 18 | PaLM 540B Unreleased | Google Research | 76,9 % | Protokoll oder Quelle |
| 19 | PaLM 2-S | – | 75,2 % | Protokoll oder Quelle |
| 20 | falcon-40b Open weights (unrestricted) | Technology Innovation Institute | 74,6 % | – |
| 21 | Phi-3-medium-128k-instruct Open weights (unrestricted) | Microsoft | 73,9 % | – |
| 22 | Llama-2-7b Open weights (restricted use) | Meta AI | 72,1 % | Protokoll oder Quelle |
| 23 | Qwen2.5-72B Open weights (unrestricted) | Alibaba | 71,9 % | Protokoll oder Quelle |
| 24 | GLaM (MoE) Unreleased | 71,3 % | – | |
| 25 | text-davinci-001 API access | OpenAI | 71,2 % | Protokoll oder Quelle |
| 26 | LLaMA-13B Open weights (non-commercial) | Meta AI | 70,1 % | – |
| 27 | mpt-30b Open weights (unrestricted) | MosaicML | 68 % | – |
| 28 | Meta-Llama-3-8B-Instruct Open weights (restricted use) | Meta AI | 67,7 % | – |
| 29 | Phi-3-mini-4k-instruct Open weights (unrestricted) | Microsoft | 64 % | – |
| 30 | gemma-7b Open weights (restricted use) | Google DeepMind | 63,4 % | Protokoll oder Quelle |
| 31 | LLaMA-7B Open weights (non-commercial) | Meta AI | 63,3 % | – |
| 32 | Mistral-7B-v0.1 Open weights (unrestricted) | Mistral AI | 62,5 % | Protokoll oder Quelle |
| 33 | Phi-3-small-8k-instruct Open weights (unrestricted) | Microsoft | 58,1 % | – |
| 34 | Gopher (280B) Unreleased | DeepMind | 57,1 % | – |
| 35 | mpt-7b Open weights (unrestricted) | MosaicML | 55,7 % | – |
| 36 | Chinchilla (70B) Unreleased | DeepMind | 55,4 % | – |
| 37 | gemma-2b Open weights (restricted use) | Google DeepMind | 53,2 % | Protokoll oder Quelle |
| 38 | falcon-7b Open weights (unrestricted) | Technology Innovation Institute | 52,6 % | – |
| 39 | phi-2 Open weights (unrestricted) | Microsoft | 45,2 % | – |
