11月25日消息，在最新的中文語言理解領(lǐng)域權(quán)威榜單CLUE中，阿里AI以86.685的總分成績(jī)創(chuàng)造了新紀(jì)錄，這是該榜單誕生近三年以來，AI首次超越人類成績(jī)（86.678），意味著AI模型的中文語言理解水平達(dá)到了新的高度。此次參評(píng)的AI模型為阿里通義大模型系列的AliceMind（以下簡(jiǎn)稱“阿里通義AliceMind”）， 其基礎(chǔ)模型已在ModelScope平臺(tái)開放。

CLUE最新榜單：阿里通義AliceMind總分超越人類成績(jī)

作為業(yè)界最權(quán)威的中文自然語言理解榜單之一，CLUE從文本分類、閱讀理解、自然語言推理等9項(xiàng)任務(wù)中全面考核AI模型的語言理解能力。過去三年，該榜單吸引了眾多國(guó)內(nèi)頂尖NLP團(tuán)隊(duì)的參與，盡管榜首位置多次易主，但參評(píng)AI模型一直未能超越人類成績(jī)。根據(jù)最新的結(jié)果，阿里通義AliceMind在4項(xiàng)任務(wù)中的表現(xiàn)超過人類水平，同時(shí)實(shí)現(xiàn)了總榜平均分的首次超越。

中文語言理解是AI業(yè)界亟待攻克的難題之一。為提升AI模型對(duì)詞語、句子以及語言整體的理解力，在預(yù)訓(xùn)練階段，達(dá)摩院沿用超大規(guī)模模型訓(xùn)練所使用的海量高質(zhì)量中文文本，同時(shí)對(duì)模型結(jié)構(gòu)和訓(xùn)練技術(shù)進(jìn)行了一系列優(yōu)化，如使用激活函數(shù)GLU、字詞混合的大詞表等獲得更強(qiáng)的文本建模能力，使用StrongHold訓(xùn)練加速技術(shù)縮短迭代周期、節(jié)約算力成本，進(jìn)而獲得性能的顯著提升。在精調(diào)階段，面對(duì)文本分類、閱讀理解、自然語言推理等下游任務(wù)，達(dá)摩院采用了遷移學(xué)習(xí)、數(shù)據(jù)增強(qiáng)、特征增強(qiáng)等技術(shù)，進(jìn)一步提升模型表現(xiàn)。

以CLUE榜單的CHID成語閱讀理解填空任務(wù)為例，該任務(wù)需要AI模型選出正確的成語進(jìn)行填空。阿里通義AliceMind可通過海量文本數(shù)據(jù)的學(xué)習(xí)達(dá)到“博聞強(qiáng)識(shí)”的效果，在預(yù)訓(xùn)練階段掌握選詞填空所依賴的語義理解能力，并將其進(jìn)行成語數(shù)據(jù)的領(lǐng)域遷移訓(xùn)練，最終模型在測(cè)試任務(wù)中的成績(jī)遠(yuǎn)超人類。

作為最早投入預(yù)訓(xùn)練語言模型研究的團(tuán)隊(duì)之一，達(dá)摩院研發(fā)了阿里通義AliceMind，該體系涵蓋預(yù)訓(xùn)練模型、多語言預(yù)訓(xùn)練模型、超大中文預(yù)訓(xùn)練模型等，具備閱讀理解、機(jī)器翻譯、對(duì)話問答、文檔處理等多種能力，該模型體系已斬獲36項(xiàng)冠軍。目前，相關(guān)技術(shù)已應(yīng)用于醫(yī)療、電商、法律等領(lǐng)域，在跨境電商領(lǐng)域，達(dá)摩院的機(jī)器翻譯系統(tǒng)能提供214種語言的互譯服務(wù)，每天為國(guó)內(nèi)200萬中小商家翻譯上億文字，助力國(guó)貨走向全世界。

【推廣】：以上內(nèi)容為廣告推廣信息，所涉及內(nèi)容不代表本網(wǎng)觀點(diǎn)，不構(gòu)成投資建議、消費(fèi)建議。