訂閱
糾錯
加入自媒體

華為云智能數據湖創(chuàng)新,“數據驅動業(yè)務”有的放矢

2020-09-02 11:57
云報
關注

我們正在邁入新的智能數據時代!

由大數據產業(yè)生態(tài)聯盟聯合《軟件和集成電路》雜志社、賽迪顧問股份有限公司、工信部賽迪智庫共同編制的《2020中國大數據產業(yè)生態(tài)地圖暨中國大數據產業(yè)發(fā)展白皮書》(以下簡稱《白皮書》)顯示,數據關鍵要素作用初步顯現,數據共享開放初見成效,數據治理成為關注重點;2020年,我國大數據產業(yè)規(guī)模將達到6670.2億元,增長率為23.6%。

隨著技術的演進,數據發(fā)生了巨大變化,不僅數據規(guī)模越來越大、數據種類呈現多樣性,而且人們對于數據處理的時效性,以及數據融合分析的要求也越來越高。華為云人工智能領域總裁賈永利表示,為了幫助企業(yè)從容應對數據智能時代的各種挑戰(zhàn),華為云推出了智能數據湖FusionInsight,圍繞客戶在使用數據、管理數據全生命周期方面提供整體解決方案,讓企業(yè)用戶更方便、快捷地用好數據的同時,加速數字化轉型進程,釋放數據紅利。

一切為了數據

在8月31日下午舉辦的華為云TechWave大數據專題日上,華為云大數據又有新動作,GaussDB(DWS)實時數倉登場亮相。

華為云智能數據湖創(chuàng)新,“數據驅動業(yè)務”有的放矢

華為云人工智能總裁賈永利發(fā)布GaussDB(DWS)實時數倉

隨著5G、人工智能、邊緣計算的興起,數據量越來越大,處理好數據、用好數據成為企業(yè)數字化轉型的一個首要目標。賈永利指出,從廣大政企客戶的需求來看,不斷增加的多樣性數據的統(tǒng)一處理,讓數據在處理過程中可管可控,并且可以更高效地協同不同組織變得越來越重要,而實時性處理、數據融合分析則是重中之重。

通過一站式的分析平臺,全局使用一份數據,更全面、更精準地分析數據,從海量數據中找到客戶真正想要的價值,是大數據廠商肩負的使命。華為云提出的智能數據湖解決方案正是以數據的使用和價值為核心,旨在實現數據全生命周期的高效管理!盎陂_放架構的華為云智能數據湖解決方案,真正做到了基于云原生的存算分離,讓數據規(guī)?晒芾、數據更好用。”賈永利如是說。

舉例來說,為了提升海量數據的實時處理能力,GaussDB(DWS)實時數倉增強了線性擴展能力,單節(jié)點每秒可以處理60萬條以上的數據;采用具有最廣泛開發(fā)者生態(tài)的數據分析語言,不管是流處理,還是實時分析,處理性能都會有數倍提升;GaussDB(DWS)的使用更簡單,減輕了程序員在開發(fā)、使用和運維等方面的工作量;GaussDB(DWS)還可以極大地節(jié)省客戶數據全生命周期管理的綜合成本。

GaussDB(DWS)實時數倉只是“冰山一角”,華為云大數據還有很多“黑科技”等待揭秘。

華為云智能數據湖的秘密

在8月26日揭曉的“2020中國大數據企業(yè)50強”榜單中,華為云大數據連續(xù)四年上榜。這是業(yè)界對華為云FusionInsight的技術創(chuàng)新能力和實踐應用成果的充分肯定。作為“最懂行”的大數據解決方案,華為云FusionInsight也再次引發(fā)廣泛關注。

趁熱打鐵,在華為云TechWave大數據專題日上,華為的“博士天團”重點揭秘了華為云FusionInsight的幾大核心能力——提供大集群、湖倉一體、實時數據湖等關鍵技術的MRS大數據,全局一份數據、秒級用數、T+0入湖的CarbonData數據存儲引擎,GaussDB(DWS)新一代全場景云數據倉庫和一站式云化數據運營平臺DAYU。

隨著5G、IoT新技術發(fā)展,數據規(guī)模、數據來源、業(yè)務場景將快速變化,這些變化給數據存儲、計算、分析和安全等帶來全新的挑戰(zhàn)和需求,大規(guī)模、多樣化的數據,需要實時、融合分析。華為云FusionInsight MRS大數據就是在不斷理解客戶場景需求,感受客戶使用痛點,積累豐富經驗,打造領先的大數據解決方案。

企業(yè)級大數據平臺FusionInsight MRS,為企業(yè)數據湖底座,堅持開放生態(tài),長達十年以上的大數據經驗積累,是全球60多個國家與地區(qū)3000多個政企客戶的共同選擇。

FusionInsight MRS支持超2萬節(jié)點超大規(guī)模單集群管理能力,業(yè)界最佳,提供企業(yè)級多租戶能力,讓一個企業(yè)一個湖成為現實;支持企業(yè)級能力讓大數據運維無憂,擁有成熟的在線升級能力,升級過程業(yè)務零中斷,業(yè)務永遠在線,并已在金融、政府等客戶在線升級實踐,得到行業(yè)高度認可;支持數據湖事務ACID,實現企業(yè)數據實時增量入湖,讓大數據分析從T+1到T+0,讓業(yè)務創(chuàng)新更敏捷;支持高性能交互式查詢引擎秒級供數,實現湖倉一體,數據不出湖,直接對接BI類業(yè)務,自助分析,數據供應鏈路短,效率提升2倍以上;支持跨源跨域的數據分析,打破地域數據墻,使得企業(yè)跨域分析效率從周提升到分鐘級。

CarbonData是一個高性能EB級別分析型數據倉庫,提供面向對象存儲上EB級數據的高性能明細查詢能力、交互式查詢能力,提供流數據接入、數據實時同步和更新能力,提供對主要ETL業(yè)務的支持和加速,以及機器學習、深度學習等AI引擎,生態(tài)發(fā)展越來越完善。

CarbonData自2015年進入Apache孵化器;2016年CarbonData正式從Apache孵化器畢業(yè),正式成為首個中國公司貢獻的Apache頂級項目;2020年重磅發(fā)布2.0里程碑版本,重新定義智能數據湖索引和事務能力。

CarbonData數據存儲引擎,面對復雜業(yè)務場景實現全局一份數據導出使用,免去數據搬遷的困擾;面對海量數據的查詢使用,針對性優(yōu)化了查詢加速,可實現PB級數據30秒內響應;在時間就是金錢的信息時代,時效性的突出優(yōu)勢被企業(yè)所看好,CarbonData支持數據更新,可實現數據T+0實時入湖,大大優(yōu)化了傳統(tǒng)T+1、T+2的可見時延。

數據倉庫是企業(yè)的“中樞系統(tǒng)”,也是業(yè)務創(chuàng)新的基礎,但長久以來一直受到“擴展性、實時性、可用性、易用性”等問題的困擾。華為云GaussDB(DWS)十年磨一劍,在核心技術上實現了突破,為新一代企業(yè)級數據倉庫系統(tǒng)樹立了標桿。

截至目前,全球超過500家大客戶已使用GaussDB(DWS)構建自己的核心數據倉庫系統(tǒng)。而GaussDB(DWS)之所以能如此快速贏得大企業(yè)客戶的信任,主要得益于其“大、快、穩(wěn)”的特點。

GaussDB(DWS)的“大”集中體現在,設計規(guī)模為2048節(jié)點,可支持PB級數據容量,隨著節(jié)點數增加,集群的性能和容量呈線性增長,線性比>0.9;GaussDB(DWS)導入和分析“快”如閃電,因為它采用了全并行計算架構,并支持新一代智能優(yōu)化器技術、高效的算子算法、動態(tài)編譯等核心技術;因為采用多層備份、多級保護技術,GaussDB(DWS)“穩(wěn)”如泰山,即使出現軟硬件故障,也能快速檢測和響應,并自動切換,確保業(yè)務持續(xù)可用。

1  2  下一頁>  
聲明: 本文由入駐維科號的作者撰寫,觀點僅代表作者本人,不代表OFweek立場。如有侵權或其他問題,請聯系舉報。

發(fā)表評論

0條評論,0人參與

請輸入評論內容...

請輸入評論/評論長度6~500個字

您提交的評論過于頻繁,請輸入驗證碼繼續(xù)

暫無評論

暫無評論

    掃碼關注公眾號
    OFweek人工智能網
    獲取更多精彩內容
    文章糾錯
    x
    *文字標題:
    *糾錯內容:
    聯系郵箱:
    *驗 證 碼:

    粵公網安備 44030502002758號