5月6日 記者獲悉，國(guó)內(nèi)權(quán)威的大模型評(píng)測(cè)機(jī)構(gòu)SuperCLUE發(fā)布《中文大模型基準(zhǔn)測(cè)評(píng)2024年度4月報(bào)告》。其中，騰訊混元大模型位列國(guó)內(nèi)大模型第一梯隊(duì)，在基礎(chǔ)和場(chǎng)景應(yīng)用上均處于領(lǐng)先位置，位于卓越領(lǐng)導(dǎo)者象限。

　　SuperCLUE是國(guó)內(nèi)權(quán)威的通用大模型綜合性測(cè)評(píng)基準(zhǔn)，其前身是知名的第三方中文語(yǔ)言理解測(cè)評(píng)基準(zhǔn)CLUE(The Chinese Language Understanding Evaluation)。SuperCLUE基于通用大模型在學(xué)術(shù)、產(chǎn)業(yè)與用戶側(cè)的廣泛應(yīng)用，構(gòu)建了多層次、多維度的綜合性測(cè)評(píng)基準(zhǔn)，由十大基礎(chǔ)任務(wù)組成，包括邏輯推理、代碼、語(yǔ)言理解、長(zhǎng)文本、角色扮演等。

　　報(bào)告選取了國(guó)內(nèi)外具有代表性的32個(gè)大模型4月份的版本，通過多維度綜合性測(cè)評(píng)，真實(shí)準(zhǔn)確地反映了國(guó)內(nèi)外大模型在中文領(lǐng)域的綜合能力和發(fā)展現(xiàn)狀。測(cè)評(píng)報(bào)告的總分排名上，騰訊混元大模型位列前三，體現(xiàn)了領(lǐng)先的模型實(shí)力。

　　在十大能力得分中，騰訊混元大模型的各項(xiàng)能力較為均衡，在語(yǔ)義理解能力上，以75.4的高分排名國(guó)內(nèi)第一;在角色扮演、安全能力、計(jì)算、邏輯推理、工具使用、長(zhǎng)文本能力上，也均處于位于國(guó)內(nèi)一流水平。

　　整體來(lái)看，國(guó)內(nèi)大模型的第一梯隊(duì)已達(dá)到或接近國(guó)際一流的水平，其中既有騰訊混元、文心一言、通義千問等來(lái)自大廠的大模型，也有GLM-4、Baichuan3、Moonshot和Minimax等大模型創(chuàng)業(yè)公司的代表。

　　作者：宋婧　　來(lái)源：中國(guó)電子報(bào)、電子信息產(chǎn)業(yè)網(wǎng)