北京2023年7月3日 /美通社/ -- 當前,以大模型為代表的生成式AI技術正在加速發展并革新各行業智能轉型路徑,"千模百態"帶動"千行百業"走向新一輪發展浪潮,數實相融迎來了新紀元。新型智算產業變革之下,日趨豐富的人工智能應用對多元化算力的需求激增,驅動人工智能計算系統向多元算力計算架構轉化。日前,浪潮信息元腦伙伴北京傳奇天地,通過元腦生態AIStation資源平臺,助力某創新軟件技術有限公司構建高性能、高可靠、可擴展的軟硬件系統架構,實現AI訓練場景下算力資源的統一管理與智能化調度。
AI視(shi)頻(pin)(pin)分(fen)析(xi)(xi)意(yi)為(wei)利用技術對(dui)視(shi)頻(pin)(pin)片(pian)段進(jin)行數字化分(fen)析(xi)(xi),通過檢測(ce)精(jing)度(du)和分(fen)類能力的(de)提升(sheng)進(jin)而來增加(jia)對(dui)于(yu)(yu)關(guan)鍵(jian)事件和可(ke)(ke)疑活動(dong)的(de)識(shi)(shi)別(bie)。基于(yu)(yu)技術層面(mian),大致可(ke)(ke)分(fen)為(wei)"物(wu)體檢測(ce)"、"物(wu)體識(shi)(shi)別(bie)"、"目標跟(gen)蹤"、"實時視(shi)頻(pin)(pin)分(fen)析(xi)(xi)",面(mian)向交通、旅游、生(sheng)產(chan)制(zhi)造、城市管理、環(huan)保等領域場景,提供"車(che)牌自動(dong)識(shi)(shi)別(bie)、交通監控、車(che)流量(liang)統(tong)計"等預警識(shi)(shi)別(bie)。基于(yu)(yu)此,相較于(yu)(yu)圖像(xiang)識(shi)(shi)別(bie),視(shi)頻(pin)(pin)識(shi)(shi)別(bie)則面(mian)向于(yu)(yu)一個分(fen)布(bu)范圍更廣、應用場景更多的(de)任務。
近年來(lai),得(de)益于人工智(zhi)能與(yu)深度(du)學習(xi)技術的(de)(de)(de)進步與(yu)飛躍式的(de)(de)(de)產業變革,基于視頻識(shi)別(bie)的(de)(de)(de)算(suan)法與(yu)精度(du)調優取(qu)得(de)了較佳提升,如 TSM、SlowFast、I3D 等(deng),由此一(yi)來(lai),則對底層算(suan)力(li)系統(tong)提出了更(geng)高(gao)的(de)(de)(de)要求(qiu)。以及,當模型與(yu)應用走向真正的(de)(de)(de)場景部署時,用戶使用多元(yuan)AI芯(xin)片系統(tong)時則會(hui)碰到系統(tong)適配、芯(xin)片驅(qu)動(dong)、互聯互通(tong)、功(gong)耗管理(li)、安全傳輸、易用性(xing)(xing)等(deng)各(ge)類瓶頸問(wen)題,利用軟件(jian)平臺對算(suan)力(li)實(shi)現更(geng)精細的(de)(de)(de)調度(du),成為(wei)滿(man)足算(suan)力(li)增長需求(qiu)的(de)(de)(de)另(ling)一(yi)個關鍵(jian)要素:通(tong)過構(gou)建高(gao)性(xing)(xing)能、高(gao)可(ke)靠(kao)、可(ke)擴展的(de)(de)(de)軟硬件(jian)系統(tong)架構(gou),實(shi)現AI訓(xun)練(lian)場景下算(suan)力(li)資源(yuan)的(de)(de)(de)統(tong)一(yi)管理(li)與(yu)智(zhi)能化調度(du)。
浪潮(chao)信息元腦生(sheng)態(tai)(tai)平(ping)臺(tai)(tai),旨(zhi)在通過連接左(zuo)右(you)手(shou)伙伴(ban)的(de)(de)能(neng)(neng)力(li)協同,盡己所長,形成優勢互(hu)補(bu),面(mian)向生(sheng)態(tai)(tai)復(fu)雜離散、產(chan)業(ye)AI落地(di)困(kun)難的(de)(de)行(xing)業(ye)挑(tiao)戰(zhan),以持續共(gong)贏的(de)(de)主張,聚合具備AI開發核心能(neng)(neng)力(li)的(de)(de)左(zuo)手(shou)伙伴(ban)和(he)具備行(xing)業(ye)AI整體方案交付能(neng)(neng)力(li)的(de)(de)右(you)手(shou)伙伴(ban),提(ti)供(gong)"AI算(suan)力(li)平(ping)臺(tai)(tai)、AI資源平(ping)臺(tai)(tai)、AI算(suan)法平(ping)臺(tai)(tai)"全面(mian)融合的(de)(de)生(sheng)態(tai)(tai)全棧能(neng)(neng)力(li),加(jia)速行(xing)業(ye)智能(neng)(neng)的(de)(de)構建,助力(li)最(zui)終用戶實現業(ye)務的(de)(de)智能(neng)(neng)轉型升級。
基于AI資源平臺層面,浪潮信息AIStation通過訓練與推理兩大平臺,實現異構算力集群的統一池化管理和多策略調度,進而保證客戶"視頻識別分析、目標檢測與跟蹤"等模型應用場景的算力資源使用和調度,提(ti)升整體利用率;在保(bao)障(zhang)全生(sheng)命周期管理方(fang)面,提(ti)升故障(zhang)容錯、集群監控運維等一體化(hua)能力,實(shi)現大(da)(da)規模分布式訓(xun)練(lian)任務的(de)健壯性(xing)、穩定(ding)性(xing)要求,降(jiang)低大(da)(da)模型訓(xun)練(lian)門檻和(he)成本(ben)。
作為(wei)元腦生(sheng)態(tai)的左手伙(huo)伴,北京(jing)傳奇天地深(shen)耕于(yu)云計算(suan)領域多年(nian),立(li)足(zu)于(yu)元腦生(sheng)態(tai)的全棧協同優勢,為(wei)某創新(xin)軟件技術(shu)公(gong)司提(ti)(ti)(ti)供(gong)"一站式(shi)智能識別監控 "解決(jue)方案,針對視頻識別的業務端海量(liang)數據處(chu)理、模型(xing)訓(xun)練、模型(xing)應(ying)用等環節實(shi)現全鏈條(tiao)全面提(ti)(ti)(ti)速,通過多種資(zi)源的高效(xiao)管理和(he)調度策(ce)略,幫助某創新(xin)軟件技術(shu)有限(xian)公(gong)司實(shi)現資(zi)源使用率(lv)(lv)與分(fen)配效(xiao)率(lv)(lv)的全線提(ti)(ti)(ti)升(sheng),實(shi)現萬(wan)卡集群的毫(hao)秒(miao)級調度,整體資(zi)源利用率(lv)(lv)提(ti)(ti)(ti)升(sheng)至75%以(yi)上。
基于(yu)視頻識(shi)別(bie)(bie)"高(gao)(gao)實(shi)時、高(gao)(gao)準(zhun)(zhun)確、高(gao)(gao)擴(kuo)(kuo)展(zhan)、高(gao)(gao)安全(quan)"的(de)多方面屬(shu)性需求,要求平(ping)(ping)臺(tai)系統在實(shi)現數(shu)(shu)據(ju)安全(quan)與隱私并行的(de)原則之下,實(shi)現大量數(shu)(shu)據(ju)的(de)實(shi)時處理(li)與數(shu)(shu)據(ju)的(de)準(zhun)(zhun)確識(shi)別(bie)(bie)及信息提(ti)取。從擴(kuo)(kuo)展(zhan)性看(kan),平(ping)(ping)臺(tai)也需隨(sui)著監(jian)控系統的(de)規(gui)模(mo)和(he)需求變化(hua)而變化(hua)。方案基于(yu)AIStation平(ping)(ping)臺(tai),通過有效(xiao)的(de)數(shu)(shu)據(ju)緩存機制為(wei)模(mo)型后續訓練鋪平(ping)(ping)道路,實(shi)現200%-300%的(de)效(xiao)率(lv)提(ti)升,利用視覺算法庫對視頻進行編解(jie)碼處理(li)、圖像(xiang)去噪、增強(qiang)等預處理(li),并打標簽(qian)形成訓練樣本庫。
在模型(xing)訓(xun)練方面,保障(zhang)"健(jian)壯性"與(yu)"穩定性"是模型(xing)定制開發(fa)時的首要強要求。對此(ci),針對模型(xing)定制訓(xun)練當中所(suo)遇算力網絡搭(da)建、數據加(jia)速(su)、網絡通信優化等瓶頸,AIStation通過提供TensorFlow,Caffe,MXnet等深度學(xue)習框架鏡(jing)像,實現鏡(jing)像分發(fa)加(jia)速(su)與(yu)資(zi)源(yuan)動(dong)態(tai)彈性伸(shen)縮(suo),在提高(gao)計算資(zi)源(yuan)利(li)用率的同時加(jia)速(su)整個訓(xun)練過程。
千模聚集的"百團大戰"仍在繼續,語音、圖像和視頻識別與分析仍亟需算力作為基底,智能算力市場龐大,人工智能應用的高效落地將成為智能算力產業發展的重要推手,驅動智能算力規模高速增長。"在場景中創新,在創新中再謀新",浪潮(chao)信息始(shi)終致力于與(yu)合作伙伴(ban)攜手,共同推動(dong)多(duo)元算力的(de)融合及新興市場的(de)開拓,構建融合開放的(de)基礎架構,實現計算產業發(fa)展方(fang)式的(de)轉(zhuan)型(xing),開創(chuang)智算產業新格局。