前往首頁(yè) 聯(lián)系我們 網(wǎng)站地圖
浪潮信息發(fā)布"源2.0-M32"開(kāi)源大模型。"源2.0-M32"在基于"源2.0"系列大模型已有工作基礎(chǔ)上,創(chuàng)新性地提出和采用了"基于注意力機(jī)制的門(mén)控網(wǎng)絡(luò)"技術(shù),構(gòu)建包含32個(gè)專(zhuān)家(Expert)的混合專(zhuān)家模型(MoE),并大幅提升了模型算力效率,模型運(yùn)行時(shí)激活參數(shù)為37億,在業(yè)界主流基準(zhǔn)評(píng)測(cè)中性能全面對(duì)標(biāo)700億參數(shù)的... (來(lái)源:新聞?lì)l道)
浪潮信息 源2.0-M32 開(kāi)源大模型 2024-5-31 14:04
中電網(wǎng) 中國(guó)電子行業(yè)研發(fā)工程師一站式服務(wù)平臺(tái)
關(guān)于中電網(wǎng) 廣告招商 聯(lián)系我們 招聘信息 友情鏈接 中電網(wǎng)導(dǎo)航 手機(jī)中電網(wǎng) 中電網(wǎng)官方微博
Copyright © 2000-2025 中電網(wǎng) 版權(quán)所有 京ICP備19016262號(hào)-2 京公網(wǎng)安備 11010802037127號(hào)
Tel: 010-53682288, 0755-33322333 Fax: 0755-33322099