Metaは、これまでで最も性能の高いオープンソースの大規模モデルLlama 3.1 405Bをリリースしました。128Kトークンのコンテキスト長をサポートし、15兆トークンで訓練されています。Llamaモデルの総ダウンロード数は3億回を超え、性能はGPT-4などのトップモデルに匹敵します。
Metaのこの動きは、オープンソースとクローズドソースの争いの転換点とみなされています。ザッカーバーグはオープンソースAIの重要性を強調し、これが業界標準になると考えています。OpenAIが技術の詳細を秘密にしているのに対し、Metaは詳細な技術論文を公開しています。
OpenAIはその後、低価格のGPT-4o miniバージョンを対抗して発表しました。これはシリコンバレーのAI価格戦争の激化を示しており、各大手企業がGPT-4よりも安価なモデルを次々と発表しています。
小規模モデルはAI企業のコスト削減と効率向上の武器となっています。これらは単純なタスクの処理が速く、ストレージとエネルギー消費の要求が低く、価格も安くなっています。一般ユーザーにとって、小規模モデルは大規模モデルの「代替品」であり、コストパフォーマンスが高いです。
低価格はコスト削減によるものです。OpenAIなどの企業は、AIの使用コストを大幅に削減することで、AIの使用範囲を拡大することを望んでいます。小規模モデルはAI分野の新たなトレンドになる可能性があります。