北(bei)京2016年(nian)8月8日電 /美通社(she)/ -- 8月4-6日,Strata Hadoop World 展(zhan)會(hui)(hui)在(zai)北(bei)京召(zhao)開,天云大數(shu)(shu)據(ju) (BeagleData) 出席了本次盛會(hui)(hui)。Strata Hadoop World 作為致力于(yu)聚(ju)集(ji)大數(shu)(shu)據(ju)領域最(zui)有影(ying)響力的產業(ye)(ye)決策者、戰(zhan)略(lve)專家、架構師(shi)、開發人員(yuan)和(he)分(fen)析師(shi)的國際性(xing)會(hui)(hui)議,從硅谷首(shou)次走進中國,旨在(zai)匯聚(ju) Hadoop 生態前沿科(ke)學與(yu)新興(xing)商(shang)業(ye)(ye)基礎的相(xiang)互碰(peng)撞,共(gong)同打造產業(ye)(ye)和(he)技(ji)術的未來(lai)。
天云(yun)大數據自(zi)成立以來,一直(zhi)致力于 Hadoop 中間件平臺的研發與建設,并成功推出了公司(si)核心(xin)產品 -- BeagleData Platform (BDP),這是一款基于 Hadoop 分(fen)布式(shi)計算(suan)機架構的企業(ye)級大數據平臺。
在(zai)大數(shu)據(ju)技(ji)術發展(zhan)的(de)(de)今天(tian),從 JAVA 到 Hadoop,正在(zai)經歷一個從流程(cheng)驅(qu)動(dong)到數(shu)據(ju)驅(qu)動(dong)的(de)(de)演(yan)進變(bian)革。中(zhong)間件概念(nian)的(de)(de)提(ti)出,是為了解決多種(zhong)異(yi)構開源資源之(zhi)間互(hu)聯互(hu)通,提(ti)供(gong)標(biao)(biao)準接口、協議,屏(ping)蔽(bi)實現(xian)細節(jie),提(ti)高應用(yong)(yong)系統(tong)易(yi)移植性(xing)。例(li)如(ru),J2EE 是 JAVA 的(de)(de)中(zhong)間件,使(shi) JAVA 從一個編(bian)程(cheng)語言演(yan)變(bian)為網絡應用(yong)(yong)架構,成為應用(yong)(yong)服務平臺的(de)(de)事實標(biao)(biao)準。
Hadoop 技(ji)術(shu)是(shi)公認(ren)的(de)(de)大數(shu)據(ju)(ju)(ju)代表技(ji)術(shu),然而,用戶面對眾(zhong)多的(de)(de) Hadoop 生(sheng)態技(ji)術(shu),必(bi)須要考(kao)慮多種開源版本與計算框(kuang)架的(de)(de)整(zheng)合問題(ti),因此,大數(shu)據(ju)(ju)(ju)技(ji)術(shu)的(de)(de)發(fa)展(zhan)趨勢,需要中(zhong)間件技(ji)術(shu),屏(ping)蔽底層框(kuang)架技(ji)術(shu)的(de)(de)異構性,提供(gong)大數(shu)據(ju)(ju)(ju)技(ji)術(shu)的(de)(de)應用能力(li)。
天云 Hadoop 中間件支持多種開源版本與計算框架的整合
Hadoop Core 經過(guo)幾年發展(zhan)(zhan),成(cheng)為分布式(shi)底層(ceng)標準,在(zai)此標準上,發展(zhan)(zhan)出面向(xiang)不同(tong)應(ying)用場(chang)景的(de)開(kai)源計算框架,如(ru)內存計算、流計算等,形(xing)成(cheng)了一個完整的(de)開(kai)源生(sheng)(sheng)態(tai)系統。Hadoop 開(kai)源生(sheng)(sheng)態(tai)解決了海量數據的(de)存儲計算問(wen)題,面對(dui)一個如(ru)此龐(pang)大的(de)生(sheng)(sheng)態(tai)體系,如(ru)何實現企業(ye)化落地式(shi)大數據時代企業(ye)面臨的(de)較大挑戰。
天云大數據(ju) Hadoop 中(zhong)間(jian)件(jian)平臺(tai),降低了 Hadoop 技(ji)術(shu)(shu)(shu)門檻,屏蔽(bi)底層(ceng)(ceng)技(ji)術(shu)(shu)(shu)復雜性,提供更高層(ceng)(ceng)的 API 接(jie)口(JAVA、SQL)和圖形化界面封裝,較大程度利用現有(you)技(ji)術(shu)(shu)(shu)人員即可實現 Hadoop 企業落(luo)地。天云大數據(ju) Hadoop 中(zhong)間(jian)件(jian)平臺(tai)具有(you)開(kai)(kai)放性架構特點,對 Hadoop 組件(jian)的功(gong)能(neng)優化通過開(kai)(kai)放先(xian)進的 Restful 接(jie)口以插件(jian)的形式整合到平臺(tai)服務層(ceng)(ceng),實現對開(kai)(kai)源社區的松耦合嵌套,較大程度上同步開(kai)(kai)源社區實現對開(kai)(kai)源新技(ji)術(shu)(shu)(shu)的兼(jian)容支撐。
同時,企業化(hua)的(de)功能可(ke)以保(bao)持中(zhong)間件(jian)層與(yu)底(di)層同步更新,實現安全(quan)審計、雙活容災等功能。同時支持多(duo)集(ji)(ji)群(qun)管理,平臺通過中(zhong)間件(jian)技術接管原生態 Apache、CDH 等多(duo)樣化(hua)版(ban)本的(de) Hadoop 集(ji)(ji)群(qun),提供了開源 Hadoop 向(xiang)企業級大數(shu)據集(ji)(ji)群(qun)升級路徑,解決第(di)三方 Hadoop 集(ji)(ji)群(qun)環境的(de)成長升級的(de)問題。
天云 BDTQ 組件模糊查詢交易獲得企業生產系統成功驗證
天(tian)云在 Hadoop 生(sheng)態組件基礎上,提供(gong)了獨立研發(fa)的(de)(de)企業級組件產品 BDTQ (BeagleData Transaction Query),彌補了 SPARK 的(de)(de)事務級一(yi)致性缺(que)失和高并發(fa)的(de)(de)性能(neng)短(duan)板,在銀行核(he)心業務實踐中,其(qi)高并發(fa)的(de)(de)模(mo)糊(hu)查詢交易,與 MQ 的(de)(de)事務性一(yi)致性同步,獲(huo)得企業生(sheng)產系統的(de)(de)成功驗證(zheng)。
天云 Hadoop 中間件產品的策略,為企(qi)業(ye)級(數據(ju)中心(xin)級)客戶提(ti)供與開(kai)(kai)源(yuan)社區共成長的開(kai)(kai)放 IT 演(yan)進策略,確保與社區前沿科技(ji)同步(bu)的同時(shi),兼備企(qi)業(ye)級運(yun)營(ying)和關鍵業(ye)務支撐能力,在電信運(yun)營(ying)商、銀(yin)行(xing)、保險、政(zheng)府、廣電等行(xing)業(ye)落地了(le)多(duo)項標桿(gan)性大數據(ju)應用項目。
天云大數據自成立以來,秉承“從大數據的布道者,到踐(jian)行(xing)者”的企業使命,達成國家(jia)提倡的“自主(zhu)、安(an)全、可控”要求,引領國內大(da)數據中間件理念(nian)的前沿(yan)發展。