VerdictPal
Beitreten

Modelle / Google

Gemini 1.5 Ultra (2024)

Gemini 1.5 · Release 2024-02-15

Gemini 1.5 Ultra 2024. MMLU 90,0 % (CoT@32) im öffentlichen Ledger. MMMU 59,4 %. Flaggschiff vor Gemini 2.

Legacy-Ultra-Tier für Multimodal- und Wissens-Benchmarks — von Gemini 3.x abgelöst.

Composite90
Kontext1M
Input / 1M—
Output / 1M—
Wissensstichtag2023-11-01
Statuslightweight
Gemini
Noch nicht genug Familien abgedeckt.Mehr Benchmark-Zeilen für Gemini 1.5 Ultra (2024) eintragen, damit das Familienprofil erscheint.
Benchmark-Platzierungen

Wo Gemini 1.5 Ultra (2024) auf jeder öffentlichen Benchmark-Quelle mit Zeile steht. Rang zählt jedes Modell mit neuester Zeile im selben Test — kein universeller Qualitätsscore.

BenchmarkFamilyRangScoreQuelleDatum
MMLUKnowledge#6/ 2290Gemini technical report2023-12-06
Family-Kontext

Die drei höchstscorierenden kartierten Modelle pro Capability-Family. Wo Gemini 1.5 Ultra (2024) auftaucht, ist es hervorgehoben.

KnowledgeGemini 1.5 Ultra (2024) · 90
  1. 1
    GPT 5.5
    91
  2. 2
    Claude Opus 4.8
    91
  3. 3
    Claude Sonnet 4.6
    91
Family-Abdeckung

Ein hoher Composite, der eine schwache Family versteckt, ist eine Falle. Diese Balken zeigen Families ohne öffentlichen Test — und wo das Modell führt.

Wissen90
Preis vs. Performance
0255075100$0.10$0.30$1$3$10$30Input-USD / 1M Tokens · log-Skala →← Intelligenz

Hover auf einen Punkt zeigt Name, Score und Input-Preis. Per Tastatur: die zwölf besten mit Tab durchgehen oder die Rangliste unten nutzen.

AnthropicOpenAIMistralAlibabaDeepSeekGoogleMoonshotMetaMiniMaxxAIZhipuXiaomiOtherMeituanCohereNVIDIA

Volles Benchmark-Ledger

Jeder Katalog-Benchmark für Gemini 1.5 Ultra (2024). Scores verlinken zur Originalquelle; Lücken heißen: noch keine öffentliche Zeile.

1 Quell-Zeilen

1 von 37 Katalog-Benchmarks haben eine belegte Zeile für Gemini 1.5 Ultra (2024).

Knowledge

Quellen