中化新網(wǎng)訊 近日在廣州舉行的2024中國移動全球合作伙伴大會上，中國移動聯(lián)合中國電子技術(shù)標(biāo)準(zhǔn)化研究院、中國電信、國家電網(wǎng)、中國石油等產(chǎn)業(yè)各方共同發(fā)布《通用大模型評測標(biāo)準(zhǔn)》。

據(jù)介紹，大模型評測是助力人工智能賦能行業(yè)應(yīng)用的重要一環(huán)，當(dāng)前眾多企業(yè)已啟動大模型建設(shè)，亟需建立配套的通用大模型和行業(yè)大模型評測體系。電子標(biāo)準(zhǔn)院聯(lián)合中國移動及中國電信、國家電網(wǎng)、中國石油等16家重點央企共同開展大模型評測體系建設(shè)工作，第一階段將圍繞通用大模型領(lǐng)域和石油、電力、交通和物流等4個重點行業(yè)應(yīng)用領(lǐng)域，從評測標(biāo)準(zhǔn)的精心制定、評測基地的科學(xué)建設(shè)，到評測試點的應(yīng)用實踐等多個層面全方位展開。

《通用大模型評測標(biāo)準(zhǔn)》內(nèi)容基于“2—4—6”框架，其中，“2”代表兩類評測視角，以重點行業(yè)實際使用需求為導(dǎo)向，評測任務(wù)劃分為理解和生成兩類視角；“4”代表四類評測要素，從評測全生命周期中提取出評測工具、評測數(shù)據(jù)、評測方式和評測指標(biāo)四類關(guān)鍵要素，確保評測工作可實施性；“6”代表六大評測維度，綜合考慮大模型應(yīng)用過程中的核心能力，設(shè)定功能性、準(zhǔn)確性、可靠性、安全性、交互性和應(yīng)用性六大維度。該標(biāo)準(zhǔn)緊密結(jié)合央企行業(yè)特色場景的實際需求，將為通用大模型全面評估提供客觀依據(jù)，為人工智能賦能千行百業(yè)提供保障。