GPT-4o miniバージョンがlmsys大規模言語モデル競技場でトップに立ち、フルバージョンと同列の1位となり、Claude 3.5を上回りました。この結果にCEOのオルトマンは興奮し、GPT-4o miniの性能がフルバージョンと同等であるにもかかわらず、価格は1/20に過ぎないと述べました。
lmsys大規模言語モデル競技場では、ユーザーが自主的に問題を出題し、投票する方式で評価を行っており、より実際のユーザー体験に近いものとなっています。GPT-4o miniはこのランキングでフルバージョンに僅か7ポイント差で、両者は同列1位とみなされています。その後にClaude 3.5とGeminiシリーズが続いています。
OpenAIはさらに、GPT-4o miniのファインチューニング機能を段階的に開放すると発表し、現在はtier 4とtier 5のユーザーに開放されています。本日から9月23日まで、毎日200万トレーニングトークンを無料で使用できます。
miniバージョンはコストパフォーマンスを重視しており、100万入力/出力トークンあたりの価格はそれぞれ15セントと60セントで、GPT-3.5 Turboの半分以下です。2年前のGPT-3のtext-davinci-003バージョンと比較すると、価格は99%低下しています。
OpenAI以外にも、Google、Anthropic、Hugging Face、Mistral、Appleなどの企業も小型モデルを次々と発表しています。小型モデルは使用ニーズを満たしつつ、より高い経済性と可能なエッジでの実行の利点を持つため、ますます注目を集めています。