北京2018年2月22日電 /美通社/ -- 近年來,以深度學習為代表的人工智能產業熱潮開始席卷全球。為了緊跟行業發展趨勢、推動人工智能科研與技術創新,中國石油大學(華東)啟動了深度學習平臺的建設,并使用浪潮深度學習管理平臺 AI Station 來搭建管理系統,在實現深度學習環境快速部署的同時,提高了對深度學習訓練任務的管理能力,從而為深度學習技術創新搭建了一個優秀的平臺。
拓展深度學習,滿足計算力需求是燃眉之急
中(zhong)國石油大學(華(hua)東)直(zhi)(zhi)屬教育部,是國家“211工程(cheng)”和(he)(he)(he)“985工程(cheng)優勢(shi)學科(ke)創新平臺”高(gao)校(xiao),2017年(nian)被確定為國家“雙一(yi)流”建設高(gao)校(xiao)。其中(zhong),計(ji)(ji)算機(ji)與通信(xin)學院(yuan)(簡稱:計(ji)(ji)通學院(yuan))依托于學校(xiao)雄(xiong)厚的(de)資源(yuan)和(he)(he)(he)實(shi)力(li),在(zai)計(ji)(ji)算機(ji)領域擁有不俗實(shi)力(li),學院(yuan)也一(yi)直(zhi)(zhi)在(zai)進行深度(du)學習(xi)的(de)相關研究和(he)(he)(he)人才培養。在(zai)人工智能產業(ye)爆(bao)發(fa)的(de)背景下,學院(yuan)緊(jin)跟行業(ye)發(fa)展(zhan)方向(xiang),決(jue)定建設深度(du)學習(xi)平臺,方便學院(yuan)研究人員和(he)(he)(he)學生使用,加速(su)學院(yuan)在(zai)深度(du)學習(xi)領域的(de)研究。
業界普遍認為,深度學習能夠發展迅速的三個要素包括強大的計算力、高效的算法以及足夠大量的訓練數據,其中,計算力的局限在深度學習的發展過程中體現得尤(you)為明顯:深度(du)學習的核心是(shi)(shi)矩陣預算,也(ye)就是(shi)(shi)浮點運算。深度(du)神經(jing)網(wang)絡由于層數多(duo)、結構復(fu)雜、節點數多(duo)、訓練數據集大等特點,訓練過(guo)程所(suo)需的時間特別長,通常(chang)以數日、數周、甚至(zhi)數月(yue)來計(ji)算,這對計(ji)算能力提出了極為苛(ke)刻(ke)的要求(qiu)。
對于中國(guo)石油大(da)學(xue)(xue)(xue)(xue)(華東(dong))計通學(xue)(xue)(xue)(xue)院(yuan)來(lai)說(shuo),其(qi)擁有雄(xiong)厚的(de)人(ren)才儲備和技術研(yan)發能力(li)(li)(li),在深(shen)度(du)(du)(du)(du)學(xue)(xue)(xue)(xue)習(xi)相關(guan)算法及模(mo)型(xing)以(yi)及訓(xun)練數據方(fang)(fang)面(mian)(mian)擁有巨大(da)的(de)優勢,因(yin)此滿足計算力(li)(li)(li)的(de)需求就成了學(xue)(xue)(xue)(xue)院(yuan)在搭建深(shen)度(du)(du)(du)(du)學(xue)(xue)(xue)(xue)習(xi)平臺過(guo)程中首要解決的(de)問題。另一方(fang)(fang)面(mian)(mian),學(xue)(xue)(xue)(xue)院(yuan)作為(wei)研(yan)究與教學(xue)(xue)(xue)(xue)機構,并不希望投入(ru)過(guo)多的(de)人(ren)力(li)(li)(li)物力(li)(li)(li)在深(shen)度(du)(du)(du)(du)學(xue)(xue)(xue)(xue)習(xi)環境的(de)搭建上(shang),而是更(geng)希望將精力(li)(li)(li)用于深(shen)度(du)(du)(du)(du)學(xue)(xue)(xue)(xue)習(xi)算法和模(mo)型(xing)的(de)研(yan)究與構建上(shang),因(yin)此學(xue)(xue)(xue)(xue)院(yuan)希望部署一套功能強大(da)、方(fang)(fang)便(bian)易用的(de)深(shen)度(du)(du)(du)(du)學(xue)(xue)(xue)(xue)習(xi)管理系統,來(lai)管理深(shen)度(du)(du)(du)(du)學(xue)(xue)(xue)(xue)習(xi)平臺的(de)資源以(yi)及訓(xun)練任務。
開啟智慧教育新模式,浪潮提供AI端到端解決方案
針對中(zhong)國石油大學(xue)(華東)的(de)需求,浪潮(chao)提(ti)供(gong)了(le)面向人(ren)工智能(neng)的(de)端到(dao)端解決方案。為(wei)提(ti)升平臺的(de)計(ji)算(suan)能(neng)力,浪潮(chao)在硬(ying)件選(xuan)擇上為(wei)學(xue)校推薦了(le)全(quan)新應用優化的(de)旗艦2U雙(shuang)路機架產品(pin)NF5280M4,搭配2塊(kuai)當時(shi)(shi)最(zui)新架構的(de)GPU卡 NVIDIA Tesla P100,每塊(kuai)卡能(neng)夠(gou)提(ti)供(gong)高(gao)達9.3萬億次的(de)單精(jing)度計(ji)算(suan)能(neng)力。同時(shi)(shi)配置256G超(chao)(chao)大內(nei)存和高(gao)速SAS硬(ying)盤,用戶做深度學(xue)習訓練的(de)GB級(ji)超(chao)(chao)大數(shu)據集(ji)可以全(quan)部直(zhi)接(jie)加載到(dao)內(nei)存中(zhong),避(bi)免了(le)數(shu)據集(ji)IO瓶頸,為(wei)用戶帶(dai)來極致性能(neng)。
在至關重要的深度學習管理系統部署方面,浪潮采用了最新的深度學習管理平臺 AI Station 來構建整個深度學習平臺。 AI Station 是一個深(shen)度(du)學(xue)習集群和訓練任(ren)(ren)務管(guan)理軟(ruan)件,可以快速部署深(shen)度(du)學(xue)習環(huan)(huan)境,管(guan)理深(shen)度(du)學(xue)習訓練任(ren)(ren)務,為深(shen)度(du)學(xue)習提供(gong)高效(xiao)便利的(de)運行(xing)環(huan)(huan)境。
軟件采用(yong)(yong)(yong)全容(rong)(rong)器化運行,應(ying)用(yong)(yong)(yong)與(yu)用(yong)(yong)(yong)戶之間相互隔離;通過(guo)(guo) AI Station 的模板創建容(rong)(rong)器,可以一鍵生成包含(han)運行環境(jing)的容(rong)(rong)器,省去了用(yong)(yong)(yong)戶自行部署(shu)深(shen)度學習(xi)環境(jing)的繁(fan)瑣。AI Station 還(huan)支持GPU動(dong)態調度、按需分(fen)配,較大(da)化GPU的利用(yong)(yong)(yong)率,讓用(yong)(yong)(yong)戶完成更多的計算任務(wu)。中國石油(you)大(da)學(華東)通過(guo)(guo) AI Station 可以管理可視化的訓(xun)練(lian)任務(wu)、管理訓(xun)練(lian)進程,及(ji)時偵測到模型訓(xun)練(lian)問題,加速訓(xun)練(lian)過(guo)(guo)程。
在浪潮 AI Station 的幫助下,中國石油大學(華東)極大地降低了深度學習平臺的搭建時間,使得學校的師生能夠在深度學習技術日新月異的背景下,快速追趕并引領深度學習的技術創新浪潮。AI Station還有效地提(ti)升了中(zhong)國石油大(da)學(xue)(華東(dong))深度(du)學(xue)習平臺的運(yun)行效(xiao)率,以(yi)較低的建(jian)設成(cheng)本實(shi)現了較高的運(yun)行效(xiao)率,讓資源(yuan)得到了充分利(li)用。自深度(du)學(xue)習平臺搭建(jian)以(yi)來,中(zhong)國石油大(da)學(xue)(華東(dong))在深度(du)學(xue)習領(ling)域(yu)取(qu)得了多(duo)項重要的科研(yan)成(cheng)果,夯實(shi)了在人工智能教育與科研(yan)領(ling)域(yu)的優勢。
中國石油大學(華東)計通學院(yuan)負責人(ren)表(biao)示:“浪潮(chao) AI Station 表(biao)現讓(rang)我(wo)們印(yin)象深刻,幫助(zhu)我(wo)們快速(su)搭建了高性(xing)能、使用(yong)運維簡捷的(de)(de)深度(du)學習平臺(tai)(tai)。此外,浪潮(chao)的(de)(de)應用(yong)研(yan)發和調優專(zhuan)(zhuan)家多次(ci)親自上門為我(wo)院(yuan)調試(shi) AI Station 及集群,實現了對我(wo)院(yuan)原有(you)設備的(de)(de)整合,其(qi)專(zhuan)(zhuan)業的(de)(de)服務和高超(chao)的(de)(de)專(zhuan)(zhuan)業技(ji)能讓(rang)我(wo)們非常滿意(yi)。希望此次(ci)雙(shuang)方的(de)(de)合作不僅(jin)能夠(gou)為我(wo)院(yuan)深度(du)學習的(de)(de)科研(yan)提供(gong)強大助(zhu)力,也對國內其(qi)他高校和科研(yan)機構(gou)深度(du)學習平臺(tai)(tai)的(de)(de)建立提供(gong)借鑒(jian)。”