Benchmarks / Performance

AA output speed

Output tokens per second

Medianer Output-Tokens pro Sekunde nach dem ersten Chunk, gemessen am Default-API-Provider jedes Modells mit ~1k Input-Tokens (AA-Medium-Workload).

Was dieser Benchmark nicht misst
  • IDE- oder Chat-App-Latenz — nur First-Party-API-Routen, die AA als Default-Provider trackt.
  • Qualität oder Reasoning-Tiefe — nur Speed. Ein schnelles Modell kann schwere Aufgaben trotzdem verfehlen.
Analyse

Warum dieser Benchmark nützlich ist

Wenn es um Streaming-Geschwindigkeit nach dem ersten Chunk geht — IDE-Gefühl, Chat-Responsivität, Batch-Durchsatz — nicht um Antwortqualität.

Umfang

Abdeckung

Aufgabenfamilie
Performance
Format
Streaming-Generierung nach erstem Token; Median der letzten 72 Stunden im AA-Harness.
Bewertung
Mehr Tokens/s ist schneller. AA nutzt OpenAI tiktoken o200k_base für Token-Zählung.
Verantwortliche Stelle
Artificial Analysis
Lesehilfe

So liest du die Scores

Höhere mediane Tokens/s sind schneller. AA pinnt den Default-API-Provider und eine ~1k-Token-Medium-Workload; IDE oder andere Provider können abweichen.

Blinde Flecken

Was er nicht abdeckt

  • IDE- oder Chat-App-Latenz — nur First-Party-API-Routen, die AA als Default-Provider trackt.
  • Qualität oder Reasoning-Tiefe — nur Speed. Ein schnelles Modell kann schwere Aufgaben trotzdem verfehlen.
Scores

Evidenz-Ledger

196 Zeilen
196196 Zeilen
414 t/sbester Score
196quellgeprüft
1Quellen
2026-10-12bis 2026-09-05
196

api · api

Verteilung

Wo die Zeilen liegen

0255075100

Auf die Skala dieses Benchmarks normalisiert (0–100). Die Tabelle zeigt die Rohwerte.

Zeitverlauf

Neueste Belege

  1. Gemini 3.5 Flash-Lite414 t/s ·
  2. Gemini 3.1 Flash Lite361 t/s ·
  3. Ling 3.0 Flash347 t/s ·
  4. Gemini 3.7 Flash314 t/s ·
  5. Nemotron 3.5 Lightning301 t/s ·

Scores nutzen die eigene Einheit und Skala dieses Benchmarks, keinen universellen Qualitätswert.

#ModellVeröffentlichungScoreHerkunftBeleglage
1Gemini 3.5 Flash-LiteGoogle2026-07-21414 t/s
2026-10-12
Quelle geprüft
2Gemini 3.1 Flash LiteGoogle2026-05-07361 t/s
2026-10-12
Quelle geprüft
3Ling 3.0 FlashOther2026-08-04347 t/s
2026-10-12
Quelle geprüft
4Gemini 3.7 FlashGoogle2026-08-13314 t/s
2026-10-12
Quelle geprüft
5Nemotron 3.5 LightningNVIDIA2026-08-11301 t/s
2026-10-12
Quelle geprüft
6Muse Spark 1.2Meta2026-08-05272 t/s
2026-10-12
Quelle geprüft
7Nemotron 3 Nano Omni 30B A3B ReasoningNVIDIA2026-04-29243 t/s
2026-10-12
Quelle geprüft
8GPT-5.4 MiniOpenAI2026-03-17236 t/s
2026-10-12
Quelle geprüft
9Claude Haiku 5.5Anthropic2026-10-07235 t/s
2026-10-12
Quelle geprüft
10Granite 4.2 3BOther2026-08-25211 t/s
2026-10-12
Quelle geprüft
11DeepSeek V4.1 FlashDeepSeek2026-09-10205 t/s
2026-10-12
Quelle geprüft
12DeepSeek V4 Flash 0731 (Reasoning, Max Effort)DeepSeek2026-07-31202 t/s
2026-10-12
Quelle geprüft
13Gemini 3 Flash PreviewGoogle2025-12-17201 t/s
2026-10-12
Quelle geprüft
14DeepSeek V4 Flash Vision (Reasoning, Max Effort)DeepSeek2026-08-21199 t/s
2026-10-12
Quelle geprüft
15Gemini 3.5 Flash (medium)Google2026-05-19198 t/s
2026-10-12
Quelle geprüft
16Qwen3.7 MaxAlibaba2026-05-19197 t/s
2026-10-12
Quelle geprüft
17Inkling SmallOther2026-07-30193 t/s
2026-10-12
Quelle geprüft
18Muse Spark 1.3Meta2026-09-02190 t/s
2026-09-05
Quelle geprüft
19Gemini 3.5 FlashGoogle2026-05-19189 t/s
2026-10-12
Quelle geprüft
20Gemini 3 Flash Preview (Reasoning)Google2025-12-17188 t/s
2026-10-12
Quelle geprüft
21Inkling (xhigh)Other2026-07-15187 t/s
2026-10-12
Quelle geprüft
22Gemini 3.6 Flash (high)Google2026-07-21186 t/s
2026-10-12
Quelle geprüft
23Gemini 3.5 Flash (minimal)Google2026-05-19181 t/s
2026-10-12
Quelle geprüft
24GPT-5.4 NanoOpenAI2026-03-17172 t/s
2026-10-12
Quelle geprüft
25GPT-5 Codex (high)OpenAI2025-09-23169 t/s
2026-10-12
Quelle geprüft
26Mistral Medium 3.5Mistral2026-04-29163 t/s
2026-10-12
Quelle geprüft
27Kimi K2 ThinkingMoonshot2025-11-06161 t/s
2026-10-12
Quelle geprüft
28Step 3.7 FlashStepFun2026-06-01160 t/s
2026-10-12
Quelle geprüft
29GLM-5.2 (Non-reasoning)Zhipu2026-06-16160 t/s
2026-10-12
Quelle geprüft
30Nemotron 3 Ultra 550B A55B (Reasoning)NVIDIA2026-06-04155 t/s
2026-10-12
Quelle geprüft
31GPT-5.5 Instant (June 2026)OpenAI2026-06-25153 t/s
2026-10-12
Quelle geprüft
32Qwen3.6 35B A3B (Non-reasoning)Alibaba2026-04-16137 t/s
2026-10-12
Quelle geprüft
33GPT-6 LunaOpenAI2026-09-22136 t/s
2026-10-12
Quelle geprüft
34Claude Sonnet 5.5Anthropic2026-09-28135 t/s
2026-10-12
Quelle geprüft
35Gemini 3.8 FlashGoogle2026-09-02132 t/s
2026-10-12
Quelle geprüft
36Gemini 3.1 Pro PreviewGoogle2026-02-19131 t/s
2026-10-12
Quelle geprüft
37Muse GlimmerMeta2026-08-10131 t/s
2026-10-12
Quelle geprüft
38GPT-5.2 Codex (xhigh)OpenAI2025-12-11129 t/s
2026-10-12
Quelle geprüft
39Qwen3.6 35B A3B (Reasoning)Alibaba2026-04-16129 t/s
2026-10-12
Quelle geprüft
40OpenAI o3OpenAI2025-04-16129 t/s
2026-10-12
Quelle geprüft
41Qwen3.5 122B A10B (Reasoning)Alibaba2026-02-24129 t/s
2026-10-12
Quelle geprüft
42GPT-5.1 Codex (high)OpenAI2025-11-13124 t/s
2026-10-12
Quelle geprüft
43GPT-6 SolOpenAI2026-09-22122 t/s
2026-10-12
Quelle geprüft
44GPT-5.6 TerraOpenAI2026-07-09122 t/s
2026-10-12
Quelle geprüft
45GPT-5.6 LunaOpenAI2026-07-09120 t/s
2026-10-12
Quelle geprüft
46K2 Horizon 375B A23BOther2026-09-03119 t/s
2026-10-12
Quelle geprüft
47North Mini CodeCohere2026-06-09119 t/s
2026-10-12
Quelle geprüft
48GPT-5.1OpenAI2025-11-13119 t/s
2026-10-12
Quelle geprüft
49Ring-2.6-1TOther2026-05-08118 t/s
2026-10-12
Quelle geprüft
50GPT-5.3 Codex (xhigh)OpenAI2026-02-05115 t/s
2026-10-12
Quelle geprüft
51Gemma 4 12B (Non-reasoning)Google2026-06-10114 t/s
2026-10-12
Quelle geprüft
52Grok 4.3 (Non-reasoning)xAI2026-04-30113 t/s
2026-10-12
Quelle geprüft
53Gemma 4 12B (Reasoning)Google2026-06-07111 t/s
2026-10-12
Quelle geprüft
54MiniMax M3MiniMax2026-05-31107 t/s
2026-10-12
Quelle geprüft
55GPT-5 (high)OpenAI2025-08-07104 t/s
2026-10-12
Quelle geprüft
56GPT-5 (low)OpenAI2025-08-07104 t/s
2026-10-12
Quelle geprüft
57Grok 4.3xAI2026-04-30103 t/s
2026-10-12
Quelle geprüft
58GPT-5 (medium)OpenAI2025-08-07103 t/s
2026-10-12
Quelle geprüft
59Muse Spark 1.1Meta2026-07-09102 t/s
2026-10-12
Quelle geprüft
60Claude Opus 5.5Anthropic2026-09-2296 t/s
2026-10-12
Quelle geprüft
61Solar Pro 4Other2026-08-0695 t/s
2026-10-12
Quelle geprüft
62Grok 4.3 (low)xAI2026-04-3095 t/s
2026-10-12
Quelle geprüft
63GPT 5.5OpenAI2026-04-2394 t/s
2026-10-12
Quelle geprüft
64GPT 5.4OpenAI2026-03-0594 t/s
2026-10-12
Quelle geprüft
65Grok 4.3 (medium)xAI2026-04-3094 t/s
2026-10-12
Quelle geprüft
66DeepSeek V4 Pro (Non-reasoning)DeepSeek2026-04-2492 t/s
2026-10-12
Quelle geprüft
67DeepSeek V4 Pro 0813 (Reasoning, Max Effort)DeepSeek2026-08-1392 t/s
2026-10-12
Quelle geprüft
68Grok 4.20 ReasoningxAI2026-03-0590 t/s
2026-10-12
Quelle geprüft
69GPT-5.5 (high)OpenAI2026-04-2389 t/s
2026-10-12
Quelle geprüft
70GLM-5.2Zhipu2026-06-1388 t/s
2026-10-12
Quelle geprüft
71Step 5 PreviewStepFun2026-09-2088 t/s
2026-10-12
Quelle geprüft
72Qwen3.5 397B A17B (Reasoning)Alibaba2026-02-1688 t/s
2026-10-12
Quelle geprüft
73GPT-5.5 (medium)OpenAI2026-04-2387 t/s
2026-10-12
Quelle geprüft
74GPT-5.6 SolOpenAI2026-07-0985 t/s
2026-10-12
Quelle geprüft
75Grok 4.20 0309 v2 (Non-reasoning)xAI2026-04-0785 t/s
2026-10-12
Quelle geprüft
76Hy3Other2026-07-0685 t/s
2026-10-12
Quelle geprüft
77Qwen3.5 397B A17B (Non-reasoning)Alibaba2026-02-1684 t/s
2026-10-12
Quelle geprüft
78GPT-5.5 (Non-reasoning)OpenAI2026-04-2384 t/s
2026-10-12
Quelle geprüft
79Grok 4.7xAI2026-09-2184 t/s
2026-10-12
Quelle geprüft
80GPT-5.5 (low)OpenAI2026-04-2384 t/s
2026-10-12
Quelle geprüft
81GPT-5.2OpenAI2025-12-1181 t/s
2026-10-12
Quelle geprüft
82Claude Sonnet 5Anthropic2026-06-3079 t/s
2026-10-12
Quelle geprüft
83Granite 4.2 30BOther2026-08-2577 t/s
2026-10-12
Quelle geprüft
84Qwen3.5 27B (Reasoning)Alibaba2026-02-2476 t/s
2026-10-12
Quelle geprüft
85GLM-5 (Reasoning)Zhipu2026-02-1175 t/s
2026-10-12
Quelle geprüft
86Mistral Large 3Mistral2025-12-0274 t/s
2026-10-12
Quelle geprüft
87Grok 4xAI2025-07-1073 t/s
2026-10-12
Quelle geprüft
88Kimi K2.7 CodeMoonshot2026-06-1270 t/s
2026-10-12
Quelle geprüft
89MiniMax M2.5MiniMax2026-04-0168 t/s
2026-10-12
Quelle geprüft
90Llama 4 ScoutMeta2026-04-0567 t/s
2026-10-12
Quelle geprüft
91MiniMax-M2.1MiniMax2025-12-2367 t/s
2026-10-12
Quelle geprüft
92Claude Fable 5.1Anthropic2026-09-0167 t/s
2026-10-12
Quelle geprüft
93GLM-5.3Zhipu2026-08-1466 t/s
2026-10-12
Quelle geprüft
94GPT-6.1 SolOpenAI2026-09-2966 t/s
2026-10-12
Quelle geprüft
95Grok Build 0.1 0616xAI2026-06-1665 t/s
2026-10-12
Quelle geprüft
96LongCat-2.0Meituan2026-06-2965 t/s
2026-10-12
Quelle geprüft
97Claude Fable 5Anthropic2026-06-0965 t/s
2026-10-12
Quelle geprüft
98GPT-6 AstraOpenAI2026-09-0364 t/s
2026-09-05
Quelle geprüft
99MiniMax M2.7MiniMax2026-04-1564 t/s
2026-10-12
Quelle geprüft
100GLM-5 (Non-reasoning)Zhipu2026-02-1163 t/s
2026-10-12
Quelle geprüft
101GLM-5.3-FlashZhipu2026-08-2661 t/s
2026-10-12
Quelle geprüft
102GLM-5.1Zhipu2026-04-0760 t/s
2026-10-12
Quelle geprüft
103Claude Sonnet 4.6 (Adaptive Reasoning, Max Effort)Anthropic2026-02-1760 t/s
2026-10-12
Quelle geprüft
104GPT-5.4 (low)OpenAI2026-03-0560 t/s
2026-10-12
Quelle geprüft
105Command ACohere2026-03-1560 t/s
2026-10-12
Quelle geprüft
106Granite 4.2 8BOther2026-08-2559 t/s
2026-10-12
Quelle geprüft
107Claude Opus 4.8Anthropic2026-05-2858 t/s
2026-10-12
Quelle geprüft
108Kimi K2.5Moonshot2026-01-2757 t/s
2026-10-12
Quelle geprüft
109Grok 4.5xAI2026-07-0857 t/s
2026-10-12
Quelle geprüft
110Grok 4.6xAI2026-08-1257 t/s
2026-10-12
Quelle geprüft
111Qwen3.6 27B (Non-reasoning)Alibaba2026-04-2256 t/s
2026-10-12
Quelle geprüft
112Qwen3.6 PlusAlibaba2026-04-0256 t/s
2026-10-12
Quelle geprüft
113Qwen 3.7 PlusAlibaba2026-06-0255 t/s
2026-10-12
Quelle geprüft
114Qwen3.6 27B (Reasoning)Alibaba2026-04-2255 t/s
2026-10-12
Quelle geprüft
115Claude Opus 5 (Adaptive Reasoning, Max Effort)Anthropic2026-07-2454 t/s
2026-10-12
Quelle geprüft
116Claude Opus 5 (Adaptive Reasoning, Low Effort)Anthropic2026-07-2454 t/s
2026-10-12
Quelle geprüft
117Claude Opus 5 (Adaptive Reasoning, High Effort)Anthropic2026-07-2453 t/s
2026-10-12
Quelle geprüft
118Claude Opus 5 (Adaptive Reasoning, Xhigh Effort)Anthropic2026-07-2453 t/s
2026-10-12
Quelle geprüft
119Claude Opus 4.5 (Reasoning)Anthropic2025-11-2453 t/s
2026-10-12
Quelle geprüft
120Claude Opus 5 (Adaptive Reasoning, Medium Effort)Anthropic2026-07-2452 t/s
2026-10-12
Quelle geprüft
121Qwen3.8-Flash-NextAlibaba2026-08-2651 t/s
2026-10-12
Quelle geprüft
122Llama 4 MaverickMeta2026-04-0550 t/s
2026-10-12
Quelle geprüft
123Claude Opus 4.7Anthropic2026-04-1650 t/s
2026-10-12
Quelle geprüft
124MiMo-V2.6-FlashXiaomi2026-09-2249 t/s
2026-10-12
Quelle geprüft
125Qwen3.8 27BAlibaba2026-08-1446 t/s
2026-10-12
Quelle geprüft
126Claude Opus 4.5Anthropic2025-11-2446 t/s
2026-10-12
Quelle geprüft
127Claude 4.5 Sonnet (Reasoning)Anthropic2025-09-2945 t/s
2026-10-12
Quelle geprüft
128Claude Sonnet 4.6Anthropic2026-02-1744 t/s
2026-10-12
Quelle geprüft
129Claude Opus 4.7 (Non-reasoning, High Effort)Anthropic2026-04-1644 t/s
2026-10-12
Quelle geprüft
130GLM-4.7 (Reasoning)Zhipu2025-12-2244 t/s
2026-10-12
Quelle geprüft
131Kimi K2.6Moonshot2026-04-2043 t/s
2026-10-12
Quelle geprüft
132Kimi K3 (low)Moonshot2026-07-1643 t/s
2026-10-12
Quelle geprüft
133Claude Sonnet 4.6 (Non-reasoning, Low Effort)Anthropic2026-02-1742 t/s
2026-10-12
Quelle geprüft
134Kimi K2.6 (Non-reasoning)Other2026-04-2042 t/s
2026-10-12
Quelle geprüft
135Kimi K3Moonshot2026-07-1642 t/s
2026-10-12
Quelle geprüft
136MiMo-V2.6-ProXiaomi2026-09-2240 t/s
2026-10-12
Quelle geprüft
137Claude Opus 4.6 (Adaptive Reasoning, Max Effort)Anthropic2026-02-0540 t/s
2026-10-12
Quelle geprüft
138Claude Opus 4.6Anthropic2026-02-0538 t/s
2026-10-12
Quelle geprüft
139Qwen3.8 2.4T A95BAlibaba2026-08-1237 t/s
2026-10-12
Quelle geprüft
140MiMo-V2.5Xiaomi2026-04-2236 t/s
2026-10-12
Quelle geprüft
141Qwen3.8 MaxAlibaba2026-08-0336 t/s
2026-10-12
Quelle geprüft
142Gemma 4 31B ITGoogle2026-03-0135 t/s
2026-10-12
Quelle geprüft
143MiMo-V2.5-Pro (Non-reasoning)Xiaomi2026-04-2234 t/s
2026-10-12
Quelle geprüft
144DeepSeek R1DeepSeek2025-01-2031 t/s
2026-10-12
Quelle geprüft
145MiMo-V2.5-ProXiaomi2026-04-2230 t/s
2026-10-12
Quelle geprüft
146Ling 3.0 TinyOther2026-08-0630 t/s
2026-10-12
Quelle geprüft
147A.X-K2Other2026-08-120 t/s
2026-09-28
Quelle geprüft
148Apodex 1.1Other2026-08-300 t/s
2026-09-28
Quelle geprüft
149Claude 3 OpusAnthropic2024-03-040 t/s
2026-09-28
Quelle geprüft
150Claude 4 Opus (Reasoning)Anthropic2025-05-220 t/s
2026-09-28
Quelle geprüft
151Claude 4.1 Opus (Reasoning)Anthropic2025-08-050 t/s
2026-09-28
Quelle geprüft
152DeepSeek Coder V2DeepSeek2024-05-150 t/s
2026-09-28
Quelle geprüft
153DeepSeek V3.2 (Reasoning)DeepSeek2025-12-010 t/s
2026-09-28
Quelle geprüft
154DiffusionGemma 26B A4BGoogle2026-06-100 t/s
2026-09-28
Quelle geprüft
155EXAONE 4.5 33BOther2026-04-090 t/s
2026-09-28
Quelle geprüft
156G9v3-39A5BOther2026-08-030 t/s
2026-09-28
Quelle geprüft
157G9v3-3BOther2026-07-230 t/s
2026-09-28
Quelle geprüft
158Gemini 1.0 UltraGoogle2024-02-080 t/s
2026-09-28
Quelle geprüft
159Gemini 3 ProGoogle2025-11-180 t/s
2026-09-28
Quelle geprüft
160Gemini 3 Pro Preview (low)Google2025-11-180 t/s
2026-09-28
Quelle geprüft
161GLM 5V Turbo (Reasoning)Zhipu2026-04-010 t/s
2026-09-28
Quelle geprüft
162GLM-5-TurboZhipu2026-03-150 t/s
2026-09-28
Quelle geprüft
163GPT-5.2 (medium)OpenAI2025-12-110 t/s
2026-09-28
Quelle geprüft
164GPT-5.4 ProOpenAI2026-03-050 t/s
2026-09-28
Quelle geprüft
165GPT-5.5 Instant (May 2026)OpenAI2026-05-050 t/s
2026-09-28
Quelle geprüft
166GPT-5.5 ProOpenAI2026-04-230 t/s
2026-09-28
Quelle geprüft
167Granite 4.1 30BOther2026-04-290 t/s
2026-09-28
Quelle geprüft
168Grok 4.20 0309 (Reasoning)xAI2026-03-100 t/s
2026-09-28
Quelle geprüft
169Hy3-preview (Non-reasoning)Other2026-04-230 t/s
2026-09-28
Quelle geprüft
170Hy3-preview (Reasoning)Other2026-04-230 t/s
2026-09-28
Quelle geprüft
171JT-35B-FlashOther2026-05-140 t/s
2026-09-28
Quelle geprüft
172JT-4.1 Flash 236B A21BOther2026-07-090 t/s
2026-09-28
Quelle geprüft
173JT-MINIOther2026-04-150 t/s
2026-09-28
Quelle geprüft
174K-EXAONE 2.0 0803Other2026-08-120 t/s
2026-09-28
Quelle geprüft
175KAT Coder Pro V2Other2026-03-270 t/s
2026-09-28
Quelle geprüft
176LFM2.5-8B-A1BLiquid2026-06-080 t/s
2026-09-28
Quelle geprüft
177Ling 2.6 FlashOther2026-04-210 t/s
2026-09-28
Quelle geprüft
178Ling-2.6-1TOther2026-04-230 t/s
2026-09-28
Quelle geprüft
179MiMo-V2-Flash (Feb 2026)Xiaomi2025-12-160 t/s
2026-09-28
Quelle geprüft
180MiMo-V2-Flash (Reasoning)Xiaomi2025-12-160 t/s
2026-09-28
Quelle geprüft
181MiMo-V2-OmniXiaomi2026-03-190 t/s
2026-09-28
Quelle geprüft
182MiMo-V2-Omni-0327Xiaomi2026-03-270 t/s
2026-09-28
Quelle geprüft
183MiMo-V2-ProXiaomi2026-03-180 t/s
2026-09-28
Quelle geprüft
184MiniCPM-V 4.6 1.3BOpenBMB2026-05-110 t/s
2026-09-28
Quelle geprüft
185MiniCPM5-1B (Non-reasoning)OpenBMB2026-05-250 t/s
2026-09-28
Quelle geprüft
186MiniCPM5-1B (Reasoning)OpenBMB2026-06-040 t/s
2026-09-28
Quelle geprüft
187MiniCPM5-2BOpenBMB2026-09-070 t/s
2026-09-28
Quelle geprüft
188Motif 3Other2026-08-120 t/s
2026-09-28
Quelle geprüft
189Motif 3 (Beta)Other2026-07-210 t/s
2026-09-28
Quelle geprüft
190Muse SparkOther2026-01-010 t/s
2026-09-28
Quelle geprüft
191Nex-N2-ProOther2026-06-020 t/s
2026-09-28
Quelle geprüft
192o3-proOpenAI2025-06-100 t/s
2026-09-28
Quelle geprüft
193OpenAI o1OpenAI2024-09-120 t/s
2026-09-28
Quelle geprüft
194Qwen3 Max ThinkingAlibaba2026-01-260 t/s
2026-09-28
Quelle geprüft
195Qwen3.6 Max PreviewAlibaba2026-04-200 t/s
2026-09-28
Quelle geprüft
196Solar Open2 250BOther2026-08-120 t/s
2026-09-28
Quelle geprüft
Methode

Was er abdeckt

Dieser Benchmark gehört zur Familie performance. Sein Format: Streaming-Generierung nach erstem Token; Median der letzten 72 Stunden im AA-Harness. Der Score sollte immer mit Aufgabenformat, Bewertungsmethode, Quelldatum und Benchmark-Version gelesen werden.

Score-Obergrenze

Wo er an Grenzen stösst

Noch ist keine Obergrenze erfasst. Wenn sich Scores oben bündeln, kann der Benchmark Frontier-Modelle möglicherweise nicht mehr trennen.

Tools, die ihn ausweisen

Belege

Quellen und weiterführende Lektüre

Fragen zu diesem Benchmark

Jede Antwort unten stammt aus den datierten Feldern dieser Seite. Nichts davon ist zusätzlich für Suchmaschinen geschrieben.

Was misst AA output speed?

Medianer Output-Tokens pro Sekunde nach dem ersten Chunk, gemessen am Default-API-Provider jedes Modells mit ~1k Input-Tokens (AA-Medium-Workload).

Was beweist ein hoher AA output speed-Wert nicht?

Ein starkes AA output speed-Ergebnis sagt nichts aus über:

  • IDE- oder Chat-App-Latenz — nur First-Party-API-Routen, die AA als Default-Provider trackt.
  • Qualität oder Reasoning-Tiefe — nur Speed. Ein schnelles Modell kann schwere Aufgaben trotzdem verfehlen.

Wie wird AA output speed bewertet?

Mehr Tokens/s ist schneller. AA nutzt OpenAI tiktoken o200k_base für Token-Zählung. Aufgabenformat: Streaming-Generierung nach erstem Token; Median der letzten 72 Stunden im AA-Harness.

Ist AA output speed gesättigt?

AA output speed ist im Atlas derzeit als Aktiv markiert.

Können AA output speed-Ergebnisse durch Trainingsdaten verunreinigt sein?

Das Kontaminationsrisiko für AA output speed ist als Kontamination unbekannt eingestuft. Behandle jede Zeile auf dieser Seite als öffentliche Angabe mit Quelle und Datum, nicht als kontrolliertes Experiment.

The Pack · Redaktionsnewsletter

Erfahre, wenn sich die Regeln ändern.

Eine kurze E-Mail, wenn eine Hochschule ihre KI-Regel für Abschlussarbeiten ändert oder ein Recherche-Tool Preise oder Datenschutz anpasst. Kein Tracking, keine Drittanbieter-Analytics. Abmeldung mit einem Klick.