GPT-4o mini versión alcanza la cima en la arena de grandes modelos lmsys, empatando en el primer lugar con la versión completa y superando a Claude 3.5. Este logro emocionó al CEO Altman, quien afirmó que el rendimiento de GPT-4o mini es comparable al de la versión completa, pero a un precio de solo 1/20.
La arena de grandes modelos lmsys utiliza un método de evaluación donde los usuarios proponen preguntas y votan, lo que se acerca más a la experiencia real del usuario. GPT-4o mini obtuvo una puntuación solo 7 puntos por debajo de la versión completa en este ranking, considerándose ambos empatados en el primer lugar. Claude 3.5 y la serie Gemini les siguen de cerca.
OpenAI también anunció que abrirá gradualmente la función de ajuste fino de GPT-4o mini, actualmente disponible para usuarios de nivel 4 y 5. Desde ahora hasta el 23 de septiembre, se pueden usar 2 millones de tokens de entrenamiento gratis diariamente.
La versión mini se enfoca en la relación calidad-precio, con un costo de 15 y 60 centavos por millón de tokens de entrada/salida respectivamente, menos de la mitad que GPT-3.5 Turbo. Comparado con la versión text-davinci-003 de GPT-3 de hace dos años, el precio ha disminuido un 99%.
Además de OpenAI, empresas como Google, Anthropic, Hugging Face, Mistral y Apple también están lanzando modelos pequeños. Estos modelos pequeños están ganando atención por satisfacer las necesidades de uso mientras ofrecen mayor economía y posibles ventajas de ejecución en dispositivos.