GPT-4o mini版登顶lmsys大模型竞技场,与满血版并列第一,超越Claude 3.5。这一成绩引起了CEO奥特曼的激动,他表示GPT-4o mini表现与满血版相当,但价格仅为1/20。
lmsys大模型竞技场采用用户自主出题、投票的方式进行评测,更贴近真实用户体验。GPT-4o mini在该榜单上的成绩仅比满血版低7分,两者被视为并列第一。紧随其后的是Claude 3.5和Gemini系列。
OpenAI还宣布将逐步开放GPT-4o mini的微调功能,目前已向tier 4和tier 5用户开放。从即日起到9月23日,每天可免费使用200万训练token。
mini版本主打性价比,每百万输入/输出tokens的价格分别为15美分和60美分,不到GPT-3.5 Turbo的一半。与两年前GPT-3的text-davinci-003版相比,价格下降了99%。
除OpenAI外,谷歌、Anthropic、Hugging Face、Mistral和苹果等公司也纷纷推出小型模型。小模型在满足使用需求的同时,具有更高的经济性和可能的端侧运行优势,因此越来越受到关注。