GPT-4o Mini-Version erreicht Spitzenplatz in der LMSYS-Großmodell-Arena und teilt sich den ersten Platz mit der Vollversion, übertrifft Claude 3.5. Dieses Ergebnis begeisterte CEO Altman, der erklärte, dass GPT-4o Mini eine vergleichbare Leistung wie die Vollversion zeigt, aber nur 1/20 des Preises kostet.
Die LMSYS-Großmodell-Arena verwendet eine Bewertungsmethode, bei der Benutzer selbstständig Fragen stellen und abstimmen, was näher an der realen Benutzererfahrung liegt. GPT-4o Mini lag in diesem Ranking nur 7 Punkte hinter der Vollversion, beide werden als gemeinsame Erstplatzierte betrachtet. Dicht dahinter folgen Claude 3.5 und die Gemini-Serie.
OpenAI kündigte auch an, die Feinabstimmungsfunktion von GPT-4o Mini schrittweise freizugeben, beginnend mit Tier 4 und Tier 5 Benutzern. Von heute bis zum 23. September können täglich 2 Millionen Trainings-Tokens kostenlos genutzt werden.
Die Mini-Version setzt auf ein gutes Preis-Leistungs-Verhältnis, mit Preisen von 15 Cent für Eingabe und 60 Cent für Ausgabe pro Million Tokens, weniger als die Hälfte von GPT-3.5 Turbo. Im Vergleich zur text-davinci-003 Version von GPT-3 vor zwei Jahren sind die Preise um 99% gesunken.
Neben OpenAI haben auch Google, Anthropic, Hugging Face, Mistral und Apple kleine Modelle eingeführt. Kleine Modelle gewinnen zunehmend an Aufmerksamkeit, da sie Nutzungsanforderungen erfüllen und gleichzeitig wirtschaftlicher sind und möglicherweise Vorteile bei der Edge-Ausführung bieten.