阿里達(dá)摩院實(shí)現(xiàn)全球最大AI預(yù)訓(xùn)練模型

11月8日消息，今日，阿里巴巴達(dá)摩院公布多模態(tài)大模型M6最新進(jìn)展，其參數(shù)已從萬(wàn)億躍遷至10萬(wàn)億，規(guī)模遠(yuǎn)超谷歌、微軟此前發(fā)布的萬(wàn)億級(jí)模型，成為全球最大的AI預(yù)訓(xùn)練模型。同時(shí)，M6做到了業(yè)內(nèi)極致的低碳高效，使用512 GPU在10天內(nèi)即可訓(xùn)練出具有可用水平的10萬(wàn)億模型。相比去年發(fā)布的大模型GPT-3，M6實(shí)現(xiàn)同等參數(shù)規(guī)模的能耗僅為其1%。