北(bei)京(jing)2016年7月26日電(dian) /美通社(she)/ --
為了進一步完善大數據(ju)平臺，企(qi)業級基礎云(yun)服務商(shang)青云(yun)QingCloud（qingcloud.com）日前宣布(bu)新增分(fen)布(bu)式實時計算系(xi)統Storm和(he)(he)基于Hadoop的(de)數據(ju)倉(cang)庫工具Hive，這是繼月初(chu)推(tui)出(chu)Elasticsearch全文搜索(suo)引擎服務后(hou)QingCloud推(tui)出(chu)的(de)又一重要功能。隨著數據(ju)在(zai)企(qi)業商(shang)業決策(ce)和(he)(he)產(chan)品功能中起到(dao)的(de)作用越(yue)(yue)來(lai)越(yue)(yue)重要，大數據(ju)技術正(zheng)在(zai)越(yue)(yue)來(lai)越(yue)(yue)多的(de)企(qi)業中發(fa)揮出(chu)更(geng)大價值。QingCloud正(zheng)在(zai)不斷(duan)完善大數據(ju)平臺，幫助用戶降低技術門檻。目前，兩個新功能已經(jing)分(fen)別在(zai)QingCloud控制臺的(de)大數據(ju)平臺和(he)(he)映像市場上(shang)線(xian)。
Storm是一個(ge)開源的(de)分(fen)布式(shi)(shi)實(shi)時計(ji)算(suan)系統，通常被比作“實(shi)時的(de)Hadoop”。Storm為實(shi)時計(ji)算(suan)提供(gong)了一些簡單優美的(de)原(yuan)語，支持多種編程語言，并內(nei)建流式(shi)(shi)窗口API及分(fen)布式(shi)(shi)緩存API，極(ji)大簡化了流式(shi)(shi)數據處理過程。Storm不僅(jin)高可靠(kao)、易擴(kuo)展，而且(qie)處理速(su)度極(ji)快，每個(ge)計(ji)算(suan)節點每秒(miao)能處理上百萬條元(yuan)組信息（Tuple），因此常被用于實(shi)時分(fen)析、在(zai)線機器學(xue)習、連續(xu)計(ji)算(suan)、分(fen)布式(shi)(shi)RPC、ETL等(deng)。QingCloud提供(gong)的(de)Storm 集(ji)群采用Master/Slave 架構，提供(gong)了在(zai)線伸縮(suo)、監控告警等(deng)功能，幫助用戶更(geng)好地管(guan)理集(ji)群。
通(tong)常(chang)包括Storm在(zai)內(nei)的(de)(de)大(da)數據(ju)平臺的(de)(de)運維都是非常(chang)繁(fan)瑣的(de)(de)，但在(zai)QingCloud上，用戶可以在(zai)２到３分(fen)鐘創(chuang)建一個Storm集群。集群支持(chi)橫向(xiang)與縱向(xiang)在(zai)線(xian)伸(shen)縮，還提供(gong)了監控告警(jing)等(deng)功能(neng)(neng)，使(shi)得管理集群異常(chang)方便(bian)。集群運行于100%二層隔離的(de)(de)私(si)有網絡內(nei)，結合QingCloud提供(gong)的(de)(de)高(gao)性(xing)(xing)能(neng)(neng)硬(ying)盤，在(zai)保障高(gao)性(xing)(xing)能(neng)(neng)的(de)(de)同時(shi)兼顧用戶的(de)(de)數據(ju)安(an)全。
Hive是基(ji)于Hadoop的(de)(de)一個主流的(de)(de)針對海量數據做離(li)線分析(xi)的(de)(de)數據倉(cang)庫，可以將(jiang)結構化的(de)(de)數據文件映(ying)射為(wei)數據庫表，并(bing)提供簡(jian)潔的(de)(de)類SQL(稱為(wei)HQL)查詢功(gong)能，將(jiang)HQL語句轉換(huan)為(wei)MapReduce任(ren)務后(hou)運(yun)行。 其優點是學習成本低，可通過HQL語句快(kuai)速實現簡(jian)單(dan)的(de)(de)MapReduce統計(ji)，大部分場(chang)景不必開(kai)(kai)發專門(men)的(de)(de)MapReduce應用，十(shi)分適合基(ji)于數據倉(cang)庫的(de)(de)統計(ji)分析(xi)。另外，也可通過MapReduce開(kai)(kai)發擴展新功(gong)能函數。
QingCloud提供的(de)Hive映像包含了Hive Client和Hive Server的(de)所有功能。用(yong)(yong)戶在(zai)Hive Client端發(fa)起(qi)HQL任務(wu)，通過Hive Server實現HQL到(dao)MapReduce任務(wu)的(de)轉換，然后調用(yong)(yong)Hadoop集(ji)群執行。在(zai)QingCloud上，用(yong)(yong)戶可以在(zai)２到(dao)３分鐘內創建一個Hive服(fu)務(wu)，并完(wan)成與其他(ta)大數據(ju)集(ji)群連接的(de)配置。Hive服(fu)務(wu)支持縱向在(zai)線伸縮， 提供了監控(kong)告警等功能，使得(de)服(fu)務(wu)管理(li)非常方便。
青(qing)云QingCloud CTO甘泉（Reno Gan）表示：“Storm、Hive服(fu)務(wu)的(de)推(tui)出標志著QingCloud大(da)數(shu)據(ju)基礎(chu)平臺(tai)的(de)進一步(bu)完善，結合(he)已(yi)經推(tui)出的(de)Spark、Hadoop、ZooKeeper、消(xiao)息隊列（Kafka）、Elasticsearch等(deng)(deng)服(fu)務(wu)，QingCloud的(de)大(da)數(shu)據(ju)平臺(tai)服(fu)務(wu)已(yi)經能(neng)夠(gou)滿足用戶的(de)各種需求。很(hen)快我(wo)們(men)還將(jiang)會上線HBase存儲(chu)集群服(fu)務(wu)，提升整個大(da)數(shu)據(ju)生(sheng)命周期使(shi)用效率的(de)各類平臺(tai)管理(li)服(fu)務(wu)——包括(kuo)但不(bu)限于(yu)日志服(fu)務(wu)、計算引擎(qing)靈(ling)活切換、對象(xiang)存儲(chu)集成(cheng)、服(fu)務(wu)編(bian)排等(deng)(deng)，以(yi)及基于(yu)主(zhu)流機器(qi)學習(xi)平臺(tai)的(de)智(zhi)能(neng)分析服(fu)務(wu)。此外，全新(xin)的(de)容器(qi)技術將(jiang)會大(da)幅度提升大(da)數(shu)據(ju)平臺(tai)的(de)整體性能(neng)。”
