《中國大模型市場主流產品評估，2024》報告發(fā)布

AIGC行業(yè)資訊1年前 (2024)發(fā)布 zhang

6月12日，國際數(shù)據(jù)公司IDC發(fā)布《中國大模型市場主流產品評估，2024》。IDC此次采取實測的方式，成立產品測試團隊，通過多個維度對基礎大模型及相關產品進行評測，并邀請外部專家團隊深入分析各個產品答案準確性、合理性等，在審核委員會的監(jiān)督下，最終得出各廠商的評估結果，供用戶選型參考。

在基礎能力評測中，大模型產品在問答理解類、推理類和創(chuàng)作表達類的成熟度較高。百度文心大模型在當前關注度高的多模態(tài)、安全、文本風格遷移等細類評估中表現(xiàn)出色，體現(xiàn)出強大的基礎模型能力。在數(shù)學類和代碼類等考驗模型邏輯、推理等能力的評測中，百度文心大模型體現(xiàn)出強大的體系化思維、邏輯思維和抽象思維能力。在代碼類所有6個細分維度中，百度均入圍優(yōu)勢廠商。據(jù)了解，基于文心大模型百度研制了智能代碼助手Comate，目前整體采納率已達46%，新增代碼中生成比例已達27%。

應用能力評測主要評估大模型產品在辦公工具、生活助手等toC通用場景類和toB特定行業(yè)類的表現(xiàn)。評測結果顯示，百度文心大模型在搜索、寫郵件、文生圖表等辦公場景和衣食住行、生活服務、閑聊創(chuàng)意等生活助手場景中具備優(yōu)勢。此外，文心大模型已經(jīng)在能源、金融、媒體、醫(yī)療、通信、制造、交通、互聯(lián)網(wǎng)等行業(yè)形成廣泛的落地應用生態(tài)，通過大模型解決諸多場景的實際問題。

此外報告顯示，在行業(yè)落地上，百度智能云推出千帆大模型平臺，以一站式企業(yè)級大模型開發(fā)及服務運行平臺服務大眾。2024年5月底，百度宣布文心大模型的兩款主力模型ERNIE Speed、ERNIE Lite免費。

IDC認為，從2024年二季度開始，中國市場迎來了一波基礎大模型及產品的更新升級。IDC中國大模型產品測試團隊表示，2024年產業(yè)界更加關注大模型和生成式AI的落地，技術供應商需持續(xù)優(yōu)化生成質量，提高生成速度并降低大模型使用成本，加快大模型技術的應用與普及。