亚洲一线av|久久久精品毛片|最近最新中文字幕在线第一页|亚洲综合色就色在线观看,国产成人精品三区,久久亚洲男人天堂,黄片大全.cvvv

數(shù)字報
小程序
公眾號
清華團隊新發(fā)現(xiàn):AI大模型看“塊頭”更要看“密度”
2025-11-24 17:07:56
來源:新華網(wǎng)  作者: 魏夢佳

近年來,AI的發(fā)展遵循著一個簡單直接的規(guī)則——模型越大、能力越強。這個被稱為“規(guī)模法則”的路徑,催生了今天我們看到的各種強大的AI大模型。但同時,隨著模型參數(shù)量的增大,模型訓(xùn)練的成本、使用的成本也隨之飆升,一定程度上制約了大模型的產(chǎn)業(yè)應(yīng)用進程。

清華大學(xué)的一項最新研究成果——大模型“密度法則”20日在國際期刊《自然·機器智能》上作為封面文章發(fā)表,為AI發(fā)展指出了一個新方向:AI大模型變強,不應(yīng)只靠“體型”,更要靠“密度”。

“過去,我們往往關(guān)心一個AI模型的‘塊頭’有多大,即參數(shù)量有多大,其實我們更應(yīng)該關(guān)心模型的‘能力密度’,即每個單位的參數(shù)能展現(xiàn)出的智能水平。”論文第一作者、清華大學(xué)計算機科學(xué)與技術(shù)系助理研究員肖朝軍說,“這就好比評價一個武林高手,不是看他塊頭有多大,而是看他一招一式里蘊含了多少功力。”

研究人員表示,實現(xiàn)這樣的“能力密度”,不能靠“模型壓縮”。研究發(fā)現(xiàn),強行壓縮一個大模型,就像是把一本厚厚的字典強行塞進小本子里,很多內(nèi)容會丟失,導(dǎo)致“智力”下降,因此需要采用更先進的“數(shù)據(jù)+算力+算法”體系,才能培養(yǎng)出“高密度”的精干小模型。

通過研究過去幾年發(fā)布的51個開源大模型,研究人員發(fā)現(xiàn):AI大模型的“能力密度”正以指數(shù)級速度增長,大約每3.5個月就翻一倍。

這意味著什么?打個比方,如果今天我們需要一個體育館大小的“大腦”才能完成某項復(fù)雜任務(wù),那么約3個半月后,我們只需要一個客廳大小的“大腦”就夠了;再過3個半月,這個“大腦”可能只需要一個背包大小。

據(jù)了解,目前,清華大學(xué)已與AI企業(yè)面壁智能的團隊合作推出了系列“高密度”模型,已應(yīng)用于手機、汽車、智能家居等生活領(lǐng)域。

“AI模型不是越大越好,‘精煉’‘高效’是其未來發(fā)展的方向。”肖朝軍說,強大的AI大模型在未來將會更廣泛地在手機、電腦、汽車等終端上運行。當芯片的計算能力和AI的智能密度這兩條快車道交匯時,“端側(cè)智能”的時代或?qū)砼R。屆時,個人設(shè)備有望擁有前所未有的智能,不僅反應(yīng)更快,還能更好地保護個人隱私。

編輯:韓夢晨
相關(guān)閱讀:
高新視頻 更多
高新熱榜 全部本月
編輯推薦 更多

友情鏈接: 政府 高新園區(qū)合作媒體

Copyright 1999-2025 中國高新網(wǎng)chinahightech.com All Rights Reserved.京ICP備14033264號-5

電信與信息服務(wù)業(yè)務(wù)經(jīng)營許可證060344號主辦單位:《中國高新技術(shù)產(chǎn)業(yè)導(dǎo)報》社有限責任公司