【資料圖】
日前，天津大學和信創(chuàng)海河實驗室舉辦“大模型技術(shù)與評測研討會”，會上天津大學發(fā)布首份《大模型評測報告》，對國內(nèi)外主流的14個大語言模型進行綜合能力評測，結(jié)果顯示，中美大模型正在形成兩強領(lǐng)跑的格局。
天津機器學習重點實驗室負責人、天津大學胡清華教授表示，“基礎(chǔ)智能模型有望重塑人工智能的發(fā)展模式，國內(nèi)外大模型如雨后春筍般大量涌現(xiàn)。全面準確評價此類模型是推動和規(guī)范其健康發(fā)展的基礎(chǔ)，為使用者在選擇和應用大模型時提供參考?？梢钥吹?，百度文心一言在評測中展現(xiàn)了國產(chǎn)大模型的強大實力，中國的大語言模型在短期內(nèi)取得巨大發(fā)展，正在逐步趕超國際類似的模型，甚至在某些指標上實現(xiàn)了局部超越。未來，期待國產(chǎn)大模型能夠取得更大突破，可以賦能社會經(jīng)濟發(fā)展，助力我國科技高質(zhì)量自立自強?！?/p>
參與本次評測的大模型包括GPT-4、ChatGPT gpt-3.5-turbo、Claude-instant、Sage gpt-3.5-turbo等國外大模型，以及百度文心一言、阿里通義千問、訊飛星火認知大模型、ChatGLM-6B、360智腦、MOSS-16B、MiniMax、baichuan-7B等國產(chǎn)大模型。評測使用一套涵蓋知識問答、語言表達、邏輯推理、常識問答、文本問答、機器翻譯等不同領(lǐng)域知識、包含多種題型的綜合性試題，通過多維度得分結(jié)果，清楚了解不同模型的擅長領(lǐng)域和綜合能力優(yōu)劣。
天津大學方面發(fā)布，國產(chǎn)大模型以文心一言為代表，在知識問答、語言表達、邏輯推理、常識問答等方面表現(xiàn)出色。此外，本次評測中，文心一言在計算機、醫(yī)學、法律和教育等領(lǐng)域的得分率高，為大語言模型在相關(guān)行業(yè)的落地提供了技術(shù)基礎(chǔ)。（天津日報記者 岳付玉）
