(資料圖片)

6月3日，以“AI大模型時(shí)代的長三角數(shù)字化之路”為主題的長三角企業(yè)家聯(lián)盟產(chǎn)業(yè)數(shù)字化峰會(huì)在安徽合肥舉行。記者從會(huì)上了解到，由認(rèn)知智能全國重點(diǎn)實(shí)驗(yàn)室、中科院人工智能產(chǎn)學(xué)研創(chuàng)新聯(lián)盟和長三角人工智能產(chǎn)業(yè)鏈聯(lián)盟三方共同發(fā)布了《通用認(rèn)知智能大模型評測體系》，旨在形成一套覆蓋多任務(wù)的大模型能力客觀評測體系，引導(dǎo)認(rèn)知大模型技術(shù)和產(chǎn)業(yè)健康發(fā)展。

當(dāng)前，伴隨著認(rèn)知大模型帶來的技術(shù)階段躍升和快速進(jìn)化，通用認(rèn)知大模型領(lǐng)域逐步“百花齊放”，效果度量和評價(jià)成為重要關(guān)注點(diǎn)，而覆蓋多維度多任務(wù)的客觀評測，成為驗(yàn)證通用大模型能力的有效方法。

據(jù)了解，由認(rèn)知智能全國重點(diǎn)實(shí)驗(yàn)室牽頭設(shè)計(jì)，并與中國科學(xué)院人工智能產(chǎn)學(xué)研創(chuàng)新聯(lián)盟和長三角人工智能產(chǎn)業(yè)鏈聯(lián)盟一起協(xié)調(diào)，從產(chǎn)學(xué)研源頭技術(shù)創(chuàng)新和產(chǎn)業(yè)鏈應(yīng)用落地兩方面出發(fā)，組織多輪測評標(biāo)準(zhǔn)研討，共同探討形成了《通用認(rèn)知智能大模型評測體系》。評測體系根據(jù)底層認(rèn)知智能能力的智能涌現(xiàn)對通用認(rèn)知智能大模型的能力進(jìn)行分析，從而制定生成類通用認(rèn)知智能大模型的評測標(biāo)準(zhǔn)與評測方法，實(shí)現(xiàn)更科學(xué)地衡量通用認(rèn)知智能大模型各個(gè)方面的能力和水平。

據(jù)介紹，本次發(fā)布的評測體系覆蓋內(nèi)容生成、語言理解、知識問答、邏輯推理、數(shù)學(xué)能力、編程能力、多模態(tài)7大能力維度，共計(jì)481個(gè)細(xì)分任務(wù)類型，力求為大模型的研究、行業(yè)標(biāo)準(zhǔn)的制定提供參考和借鑒。未來，該評測體系將致力于讓認(rèn)知大模型技術(shù)真正解決社會(huì)剛需，助力通用人工智能產(chǎn)業(yè)聚集。

關(guān)鍵詞：