GPT-4o vs Gemini 1.5 Pro: Den store benchmark-sammenligningen
Vi setter de to storste frontiermodellene opp mot hverandre pa koding, matematikk, skriving og analyse.
GPT-4o vs Gemini 1.5 Pro
Koding
Vinner: GPT-4o Pa HumanEval-benchmarken scorer GPT-4o 90.2% mot Gemini 1.5 Pros 84.1%.
I praksis er GPT-4o mer konsistent og gjor farre logiske feil pa komplekse algoritmer.
Matematikk
Vinner: GPT-4o MATH-benchmark: GPT-4o 76.6% vs Gemini 1.5 Pro 67.7%.
Skriving og kreativitet
Uavgjort Svaret avhenger av spraket. Gemini er sterkere pa ikke-engelske europeiske sprak. GPT-4o er sterkere pa engelsk kreativ skriving.
Lange dokumenter
Vinner: Gemini 1.5 Pro (ikke engang naer) Med 1 million token kontekstvindu mot GPT-4os 128 000 er Gemini uslaabar pa lange dokumenter.
Hastighet
Vinner: GPT-4o GPT-4o er raskere pa korte sporsmal. Gemini er raskere pa lange dokumenter (parallell prosessering).
Multimodalitet
Uavgjort GPT-4o horer bedre. Gemini ser video. Kvitt.
Konklusjon
For koding og matematikk: GPT-4o. For lange dokumenter: Gemini 1.5 Pro.