7月19日消息， OpenAI宣布推出GPT-4o mini模型，并稱其為最具成本效益的小型模型。GPT-4o mini 可以替代 GPT-3.5 Turbo，對標(biāo)的是 Claude 3 Haiku 和 Gemini 1.5 Flash， OpenAI預(yù)計GPT-4o mini更加經(jīng)濟實惠，將能顯著擴大使用人工智能構(gòu)建的應(yīng)用范圍。
據(jù)悉，GPT-4o mini在MMLU上的得分為82%，目前在 LMSYS 排行榜的聊天方面分數(shù)優(yōu)于 GPT-4。
GPT-4o mini 的商用價格是每百萬輸入 token 15 美分，每百萬輸出 token 60 美分，比GPT-3.5 Turbo便宜60%以上。
GPT-4o-mini在API（應(yīng)用程序編程接口）中支持文本和視覺，并在未來支持文本、圖像、視頻和音頻輸入和輸出。該模型具有 128K token 的上下文窗口，知識截至 2023 年 10 月。得益于與 GPT-4o 共享的改進版 tokenizer，處理非英語文本能力也更加經(jīng)濟高效。
GPT-4o mini在文本智能和多模式推理的學(xué)術(shù)基準(zhǔn)上超越了GPT-3.5 Turbo和其他小型模型，并支持與GPT-4o相同的語言范圍。
GPT-4o mini還展示了函數(shù)調(diào)用的強大性能，這使開發(fā)人員能夠構(gòu)建獲取數(shù)據(jù)或與外部系統(tǒng)進行操作的應(yīng)用程序，與GPT-3.5 Turbo相比，它還提高了長上下文性能。
GPT-4o mini已經(jīng)在多個關(guān)鍵基準(zhǔn)測試中進行了評估：
推理任務(wù)：GPT-4o mini在涉及文本和視覺的推理任務(wù)中優(yōu)于其他小型模型，在文本智能和推理基準(zhǔn)MMLU上的得分為82.0%，而Gemini Flash的得分為77.9%，Claude Haiku的得分為73.8%。
數(shù)學(xué)和編碼能力：GPT-4o mini在數(shù)學(xué)推理和編碼任務(wù)方面表現(xiàn)出色，優(yōu)于市場上其他小型模型。在測量數(shù)學(xué)推理的MGSM上，GPT-4o mini的得分為87.0%，而Gemini Flash的得分為75.5%，Claude Haiku的得分為71.7%。
GPT-4o mini在衡量編碼性能的HumanEval上的得分為87.2%，而Gemini Flash的得分為71.5%，Claude Haiku的得分為75.9%。
多模態(tài)推理：GPT-4o mini在多模態(tài)推理評估MMMU上也表現(xiàn)出色，得分為59.4%，而Gemini Flash和Claude Haiku的得分分別為56.1%和50.2%。
安全性方面，GPT-4o mini 內(nèi)置了與 GPT-4o 相同的安全緩解措施，OpenAI 根據(jù) Preparedness Framework 和自愿承諾，通過自動和人工評估對其進行了仔細評估。70 多名社會心理學(xué)和錯誤信息等領(lǐng)域的外部專家對 GPT-4o 進行了測試，以確定潛在風(fēng)險，這些問題的解決方法會在即將發(fā)布的 GPT-4o system card 和 Preparedness 記分卡中分享。這些專家評估得出的見解有助于提高 GPT-4o 和 GPT-4o mini 的安全性。
GPT-4o-mini現(xiàn)在可以作為文本和視覺模型在 Assistant API、Chat Completions API 和 Batch API 中使用。開發(fā)人員每 100 萬輸入 token 價格為 15 美分，每 100 萬輸出 token（大約相當(dāng)于一本標(biāo)準(zhǔn)書的 2500 頁）價格為 60 美分。
從今天開始，在ChatGPT中，F(xiàn)ree、Plus和Team用戶能夠訪問GPT-4o mini，以代替取代 GPT-3.5 Turbo。企業(yè)用戶將從下周開始獲得訪問權(quán)限。
原創(chuàng)文章，作者：AI，如若轉(zhuǎn)載，請注明出處：http://leeannwhittemore.com/article/668260.html
