中文通用大模型基準正式發布訊飛星火認知大模型國內第一

互聯網時間： 2023-05-11 11:32:22

昨天（5月9日），中文通用大模型基準（SuperCLUE）正式發布，該基準測試主要是評測在當前通用大模型大力發展的情況下，中文大模型的效果情況。包括但不限于：這些模型哪些相對效果情況、相較于國際上的代表性模型做到了什么程度、這些模型與人類的效果對比如何？

該模型可通過多個層面，考驗市面上主流的中文GPT大模型的能力：

基礎能力：包括了常見的有代表性的模型能力，如語義理解、對話、邏輯推理、角色模擬、代碼、生成與創作等10項能力。

專業能力：包括了中學、大學與專業考試，涵蓋了從數學、物理、地理到社會科學等50多項能力。

中文特性能力：針對有中文特點的任務，包括了中文成語、詩歌、文學、字形等10多項能力。

該機構利用SuperCLUE測試基準，對市面上主流的支持中文的通用大模型進行了評測與排名。從排名中我們可以看出，GPT-4一騎絕塵，已經非常接近人類的能力。國產大模型中科大訊飛研發的星火認知大模型總排名第三，國內排名第一。

以下為該機構公布的各個子項目的具體得分。排行榜會定期更新，并于以下網站進行公示。

總榜單

基礎能力表

中文特性表達能力表

訊飛星火中文通用大模型基準

本文標題：中文通用大模型基準正式發布訊飛星火認知大模型國內第一

本文地址： http://www.huatuwangxiao.com/brand/news-dec88f8ec.html

內容均來源于網絡，錯誤糾正或刪除請發郵件，收件郵箱kefu@huangye88.com

熱門分類

人工智能搜索引擎虛擬現實汽車芯片手機