北京2019年7月10日 /美通社/ -- 截至目前，通信行業都開啟了自己的人工智能業務，人工智能已經成為運營商發力數字化新業務的著力點。而在平臺AI核心能力層，將產生大量語音、圖像、視頻以及其他結構化數據，算力的進步也為深度學習集群方案提供了后盾支持。

為了提高網絡運營、服務和管理等全鏈條的智能化水平、運用信息通信技術更好地支撐和服務人工智能產業以及各行業的智能化轉型。近日，曙光通過多年通信行業的深耕經驗，以(yi)深度(du)學習集群方案(an)保障高效計算(suan)，滿足(zu)通信行業智能(neng)語音(yin)、市場營銷(xiao)、網絡智能(neng)化、客戶服(fu)務(wu)智能(neng)運用等業務(wu)層需求。

曙光深度學習集群方案是如何支撐起通信行業AI智能運用的呢？

從整體來看

曙光深度學習集群方案從計算、存儲、網絡、軟件等部分，組(zu)成了合理、符(fu)合通信行業用(yong)戶應用(yong)特點、沒(mei)有性(xing)能與功(gong)能短板的一套集群方案(an)。

從計算層角度

GPU服務(wu)器為深度(du)(du)學習提供強勁的(de)算(suan)(suan)力(li)支持。GPU的(de)眾核(he)體系結構包含了(le)(le)大(da)量(liang)(liang)的(de)流處理器，矢量(liang)(liang)運算(suan)(suan)可(ke)以并(bing)行(xing)(xing)進(jin)行(xing)(xing)，對于矩陣運算(suan)(suan)的(de)加速效果非常明顯，而深度(du)(du)網絡(luo)在訓(xun)練(lian)過程中需要進(jin)行(xing)(xing)大(da)量(liang)(liang)的(de)矩陣運算(suan)(suan)，這無疑成(cheng)了(le)(le)深度(du)(du)模(mo)型訓(xun)練(lian)方面的(de)首(shou)選方案之一，利(li)用GPU訓(xun)練(lian)深度(du)(du)網絡(luo)可(ke)以充分(fen)的(de)發(fa)揮(hui)計算(suan)(suan)核(he)心的(de)并(bing)行(xing)(xing)計算(suan)(suan)能力(li)，在海量(liang)(liang)訓(xun)練(lian)數(shu)據(ju)的(de)情況下(xia)，耗(hao)費時間短，使用服務(wu)器數(shu)量(liang)(liang)也(ye)變得更少。

針對不(bu)同深度學習場景，可以搭載多顆GPU的不(bu)同類(lei)型GPU服(fu)務(wu)器(qi)，在整(zheng)個(ge)計算(suan)層中成為了的核心計算(suan)單元。同時，在計算(suan)層中針對集群管理和(he)桌面服(fu)務(wu)等(deng)非核心計算(suan)部(bu)分采用通用機架服(fu)務(wu)器(qi)支(zhi)撐。

從網絡層角度

網絡層主要包括物理網絡傳輸、集群管理調度、人工智能平臺三個部分。

網絡傳輸部分，對于(yu)深度學(xue)習網(wang)絡(luo)模型訓練，除了提(ti)供強大(da)計(ji)算能力還需(xu)要保證(zheng)PCI-E的傳(chuan)輸(shu)帶(dai)寬，對于(yu)多機(ji)情(qing)況，需(xu)要能提(ti)供更(geng)好網(wang)絡(luo)帶(dai)寬的網(wang)絡(luo)設備來(lai)保證(zheng)整個系統的數據傳(chuan)輸(shu)效率，減少網(wang)絡(luo)數據傳(chuan)輸(shu)帶(dai)來(lai)的影響；

集群管理調度需要對計(ji)算集群(qun)整體狀態(tai)和計(ji)算節(jie)點的(de)實時(shi)狀態(tai)進行監控和分析，并(bing)形成(cheng)實時(shi)的(de)可視(shi)化數(shu)據報表；

人工智能平臺需(xu)要提(ti)供對深度(du)學習(xi)開發(fa)環(huan)境(jing)的快速部署；并(bing)要針對深度(du)學習(xi)開發(fa)，對運算(suan)資源按照訓練(lian)任(ren)務進行(xing)分割和分發(fa)。

從存儲層角度

存(cun)儲(chu)層主要(yao)用(yong)于存(cun)放計(ji)算(suan)(suan)數據，在高性能計(ji)算(suan)(suan)中(zhong)，數十個或者上百個計(ji)算(suan)(suan)節(jie)點(dian)需(xu)要(yao)有(you)一(yi)(yi)個統(tong)一(yi)(yi)映像的共享存(cun)儲(chu)，使用(yong)并(bing)行文件(jian)系(xi)(xi)(xi)統(tong)把(ba)所(suo)有(you)的存(cun)儲(chu)陣列統(tong)一(yi)(yi)為一(yi)(yi)個大的存(cun)儲(chu)，而并(bing)行文件(jian)系(xi)(xi)(xi)統(tong)能夠滿足用(yong)戶(hu)需(xu)求(qiu)。針對深(shen)度學習解決方案，曙光ParaStor系(xi)(xi)(xi)列采(cai)用(yong)分布式(shi)集(ji)群架構，提供充足的I/O聚合帶(dai)寬，存(cun)儲(chu)系(xi)(xi)(xi)統(tong)穩定可靠(kao)、具有(you)線(xian)性擴展能力。

隨著物(wu)聯網(wang)、5G等通信(xin)技術的(de)(de)應用，連接規模必將指數(shu)級地增長(chang)。當(dang)這(zhe)張連接一(yi)切的(de)(de)網(wang)絡和被(bei)連接的(de)(de)單(dan)元都被(bei)賦(fu)予智能后，智能化的(de)(de)生(sheng)產(chan)和生(sheng)活將無處不在(zai)，將給(gei)全社會帶來天(tian)翻地覆的(de)(de)變化和全新的(de)(de)體驗。