新利平台 > 即時新聞 > 國內

通用認知智能大模型有了能力評測體係 包含7大能力維度、481個細分任務類型

發布時間:2023-06-12 15:12:00來源: 科技日報

  ◎本報記者 吳長鋒

  通用認知智能大模型評測體(ti) 係根據底層認知智能能力的智能湧現對通用認知智能大模型的能力進行分析,從(cong) 而製定通用認知智能大模型的評測標準與(yu) 評測方法,更科學地衡量通用認知智能大模型各個(ge) 方麵的能力和水平。

  王士進 認知智能全國重點實驗室副主任

  6月3日,以“AI大模型時代的長三角數字化之路”為(wei) 主題的長三角企業(ye) 家聯盟產(chan) 業(ye) 數字化峰會(hui) 在安徽合肥舉(ju) 行。會(hui) 上,認知智能全國重點實驗室、中國科學院人工智能產(chan) 學研創新聯盟和長三角人工智能產(chan) 業(ye) 鏈聯盟共同發布了通用認知智能大模型評測體(ti) 係,旨在形成一套覆蓋多任務的大模型能力客觀評測體(ti) 係,引導中國認知智能大模型技術和產(chan) 業(ye) 健康發展。

  認知智能大模型或迎爆發式增長

  伴隨著人工智能技術的進步,認知智能大模型或成為(wei) 實現通用人工智能的“曙光”。

  未來幾年,隨著業(ye) 界長期係統性推進人工智能的技術研發,認知智能大模型或將迎來爆發式增長,傳(chuan) 統的內(nei) 容生產(chan) 及傳(chuan) 播方式或被改寫(xie) ,人機協作將進一步改變人們(men) 的生產(chan) 生活方式,甚至將改寫(xie) 現有的產(chan) 業(ye) 生態格局——一些傳(chuan) 統產(chan) 業(ye) 將“被迫”進行轉型升級,認知智能技術將創造出新的職業(ye) 、崗位,為(wei) 整個(ge) 信息產(chan) 業(ye) 和數字經濟帶來新的發展契機。

  5月6日,科大訊飛股份有限公司(以下簡稱科大訊飛)正式發布訊飛星火認知大模型。僅(jin) 一個(ge) 月後,科大訊飛宣布,星火認知大模型“牽手”工業(ye) 互聯網平台,實現在“產(chan) 、供、銷、服、管”等各流程的知識學習(xi) 與(yu) 人工智能賦能,有效助力企業(ye) 降本增效。

  從(cong) 各大互聯網企業(ye) 的發展路徑可以看出,工業(ye) 互聯網建設和企業(ye) 數字化轉型等或是實現認知智能大模型規模化落地應用的重要切入口。

  然而,如何提前研判認知智能大模型給各行各業(ye) 帶來的顛覆性改變和創新性發展機遇,使得企業(ye) 能夠及時且有針對性地作出相應的調整?這就需要一套科學、係統的客觀評測體(ti) 係,既可以綜合判斷現階段的技術進展,還能夠明確認知智能大模型多維度的發展路徑。認知智能大模型領域“百花齊放”,效果度量和評價(jia) 成為(wei) 重點,覆蓋多維度、多任務的客觀評測成為(wei) 驗證認知智能大模型能力的重要手段。

  科學研判通用認知智能大模型

  針對現實需求,認知智能全國重點實驗室牽頭設計,與(yu) 中國科學院人工智能產(chan) 學研創新聯盟、長三角人工智能產(chan) 業(ye) 鏈聯盟一起,從(cong) 產(chan) 學研源頭技術創新和產(chan) 業(ye) 鏈應用落地兩(liang) 方麵出發,組織多輪評測標準研討會(hui) 議,邀請中國科學院科技戰略谘詢研究院、中科寒武紀科技股份有限公司、科大訊飛等產(chan) 學研各界代表探討交流,共同形成了通用認知智能大模型評測體(ti) 係。

  “評測體(ti) 係根據底層認知智能能力的智能湧現對通用認知智能大模型的能力進行分析,從(cong) 而製定通用認知智能大模型的評測標準與(yu) 評測方法,更科學地衡量通用認知智能大模型各個(ge) 方麵的能力和水平。”認知智能全國重點實驗室副主任王士進介紹說。

  王士進表示,本次發布的評測體(ti) 係覆蓋內(nei) 容生成、語言理解、知識問答、邏輯推理、數學能力、編程能力、多模態7大能力維度,共計481個(ge) 細分任務類型,力求為(wei) 大模型的研究、行業(ye) 標準的製定提供參考和借鑒。

  他表示,未來評測體(ti) 係將致力於(yu) 讓認知智能大模型技術真正解決(jue) 社會(hui) 剛需,助力長三角打造具有全球影響力的通用人工智能科技創新策源地和新興(xing) 產(chan) 業(ye) 聚集地。“圍繞推動通用人工智能評測體(ti) 係共建,下一步,認知智能全國重點實驗室希望與(yu) 長三角企業(ye) 家聯盟單位基於(yu) 通用評測體(ti) 係持續合作優(you) 化,共同推動行業(ye) 評測方案落地,促進技術和產(chan) 業(ye) 健康發展。”王士進說。

(責編:陳濛濛)

版權聲明:凡注明“來源:新利平台”或“新利平台文”的所有作品,版權歸高原(北京)文化傳(chuan) 播有限公司。任何媒體(ti) 轉載、摘編、引用,須注明來源新利平台和署著作者名,否則將追究相關(guan) 法律責任。