南京人工智能計(jì)算中心全自主運(yùn)行“大模型”
南京人工智能計(jì)算中心近日對(duì)外公布,中心成功實(shí)現(xiàn)LLaMA、ChatGLM-6B、BLOOM、鵬程·盤(pán)古α等主流NLP(自然語(yǔ)言處理)大模型上線。這些大模型均為目前人工智能產(chǎn)學(xué)界最前沿、最受關(guān)注的技術(shù)“寵兒”,可針對(duì)用戶需求提供相對(duì)準(zhǔn)確的答案和建議,應(yīng)用廣泛。
江北科投集團(tuán)副總經(jīng)理、先進(jìn)計(jì)算產(chǎn)業(yè)發(fā)展有限公司總經(jīng)理戴曉玉介紹,該中心實(shí)現(xiàn)從芯片到系統(tǒng)再到應(yīng)用部署層全棧自主可控。他解釋,大模型在算力中心成功適配,意味著使用中心算力服務(wù)的企業(yè)及院校機(jī)構(gòu)都可以在國(guó)產(chǎn)生態(tài)中“跑”起大模型。
今年以來(lái),人工智能算力需求呈現(xiàn)爆發(fā)式增長(zhǎng),被稱為算力之源的GPU(圖形處理器)是人工智能大模型發(fā)展的關(guān)鍵基礎(chǔ)設(shè)施。目前,全球GPU巨頭企業(yè)英偉達(dá),在人工智能訓(xùn)練芯片領(lǐng)域占據(jù)很高的市場(chǎng)份額,不少算力中心都采用其芯片運(yùn)行。
據(jù)介紹,昇思MindSpore是華為開(kāi)源推出的首個(gè)業(yè)界全場(chǎng)景AI框架。該中心基于這一框架,將主流NLP大模型適配到本地環(huán)境中,實(shí)現(xiàn)高效運(yùn)行。目前,一家互聯(lián)網(wǎng)電商企業(yè)在測(cè)試中,使用適配后的大模型運(yùn)營(yíng)自己的平臺(tái),運(yùn)行情況良好。
沿著江心洲大橋駛?cè)虢毙聟^(qū),南京人工智能計(jì)算中心正立于一側(cè)。這個(gè)算力中心的“大腦”位于這座大廈二樓的機(jī)房?jī)?nèi),機(jī)柜上一個(gè)個(gè)排列整齊的“黑匣子”泛出藍(lán)光,那是算力中心的核心模塊,24小時(shí)不間斷運(yùn)轉(zhuǎn)。中心一期計(jì)算能力達(dá)40PFLOPS(每秒4億億次浮點(diǎn)運(yùn)算次數(shù)),于去年5月對(duì)外提供服務(wù),如今分配率為100%,算力已全部供應(yīng)給企業(yè)、院校機(jī)構(gòu),使用率峰值達(dá)85%左右。將于9月上線的二期項(xiàng)目預(yù)計(jì)擴(kuò)容100PFLOPS算力,部分算力服務(wù)已被預(yù)訂。
在算力中心穩(wěn)定運(yùn)行后,一批省內(nèi)重點(diǎn)高校主動(dòng)邀約合作,探路用全自主的“算力”跑起屬于自己的科研大模型。去年11月,南京大學(xué)、江北科投集團(tuán)、華為公司三方簽約,共同孵化“金陵·女?huà)z”科研大模型。這一大模型可幫助研究人員從基因出發(fā)探究生命體的新規(guī)律,為罕見(jiàn)病診斷以及藥物設(shè)計(jì)提供支撐。“為了發(fā)現(xiàn)可能藥物或有效靶標(biāo),原本需要做千萬(wàn)次嘗試,有了大模型的輔助,只需做十分之一甚至百分之一的工作量。”戴曉玉解釋。
當(dāng)下,東南大學(xué)毫米波國(guó)家重點(diǎn)實(shí)驗(yàn)室、南農(nóng)作物遺傳與種質(zhì)創(chuàng)新國(guó)家重點(diǎn)實(shí)驗(yàn)室、中科院自動(dòng)化所等科研機(jī)構(gòu)都在該中心進(jìn)行科研大模型的孵化,未來(lái)可應(yīng)用于人工智能生物學(xué)、EDA、智能制造和智慧育種等產(chǎn)業(yè)。(許雯斐)
南京人工智能計(jì)算中心近日對(duì)外公布,中心成功實(shí)現(xiàn)LLaMA、ChatGLM-6B、BLOOM、鵬程·盤(pán)古α等主流NLP(自然語(yǔ)言處理)大模型上線。這些大模型均為目前人工智能產(chǎn)學(xué)界最前沿、最受關(guān)注的技術(shù)“寵兒”,可針對(duì)用戶需求提供相對(duì)準(zhǔn)確的答案和建議,應(yīng)用廣泛。
江北科投集團(tuán)副總經(jīng)理、先進(jìn)計(jì)算產(chǎn)業(yè)發(fā)展有限公司總經(jīng)理戴曉玉介紹,該中心實(shí)現(xiàn)從芯片到系統(tǒng)再到應(yīng)用部署層全棧自主可控。他解釋,大模型在算力中心成功適配,意味著使用中心算力服務(wù)的企業(yè)及院校機(jī)構(gòu)都可以在國(guó)產(chǎn)生態(tài)中“跑”起大模型。
今年以來(lái),人工智能算力需求呈現(xiàn)爆發(fā)式增長(zhǎng),被稱為算力之源的GPU(圖形處理器)是人工智能大模型發(fā)展的關(guān)鍵基礎(chǔ)設(shè)施。目前,全球GPU巨頭企業(yè)英偉達(dá),在人工智能訓(xùn)練芯片領(lǐng)域占據(jù)很高的市場(chǎng)份額,不少算力中心都采用其芯片運(yùn)行。
據(jù)介紹,昇思MindSpore是華為開(kāi)源推出的首個(gè)業(yè)界全場(chǎng)景AI框架。該中心基于這一框架,將主流NLP大模型適配到本地環(huán)境中,實(shí)現(xiàn)高效運(yùn)行。目前,一家互聯(lián)網(wǎng)電商企業(yè)在測(cè)試中,使用適配后的大模型運(yùn)營(yíng)自己的平臺(tái),運(yùn)行情況良好。
沿著江心洲大橋駛?cè)虢毙聟^(qū),南京人工智能計(jì)算中心正立于一側(cè)。這個(gè)算力中心的“大腦”位于這座大廈二樓的機(jī)房?jī)?nèi),機(jī)柜上一個(gè)個(gè)排列整齊的“黑匣子”泛出藍(lán)光,那是算力中心的核心模塊,24小時(shí)不間斷運(yùn)轉(zhuǎn)。中心一期計(jì)算能力達(dá)40PFLOPS(每秒4億億次浮點(diǎn)運(yùn)算次數(shù)),于去年5月對(duì)外提供服務(wù),如今分配率為100%,算力已全部供應(yīng)給企業(yè)、院校機(jī)構(gòu),使用率峰值達(dá)85%左右。將于9月上線的二期項(xiàng)目預(yù)計(jì)擴(kuò)容100PFLOPS算力,部分算力服務(wù)已被預(yù)訂。
在算力中心穩(wěn)定運(yùn)行后,一批省內(nèi)重點(diǎn)高校主動(dòng)邀約合作,探路用全自主的“算力”跑起屬于自己的科研大模型。去年11月,南京大學(xué)、江北科投集團(tuán)、華為公司三方簽約,共同孵化“金陵·女?huà)z”科研大模型。這一大模型可幫助研究人員從基因出發(fā)探究生命體的新規(guī)律,為罕見(jiàn)病診斷以及藥物設(shè)計(jì)提供支撐。“為了發(fā)現(xiàn)可能藥物或有效靶標(biāo),原本需要做千萬(wàn)次嘗試,有了大模型的輔助,只需做十分之一甚至百分之一的工作量。”戴曉玉解釋。
當(dāng)下,東南大學(xué)毫米波國(guó)家重點(diǎn)實(shí)驗(yàn)室、南農(nóng)作物遺傳與種質(zhì)創(chuàng)新國(guó)家重點(diǎn)實(shí)驗(yàn)室、中科院自動(dòng)化所等科研機(jī)構(gòu)都在該中心進(jìn)行科研大模型的孵化,未來(lái)可應(yīng)用于人工智能生物學(xué)、EDA、智能制造和智慧育種等產(chǎn)業(yè)。(許雯斐)