2022年5月26日,中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會(以下簡稱“數(shù)博會”)在貴陽召開,數(shù)博會“十佳大數(shù)據(jù)案例”揭曉,阿里云云原生一體化數(shù)倉入選。
為培育專業(yè)化、場景化的大數(shù)據(jù)解決方案,構建多層次的工業(yè)互聯(lián)網(wǎng)平臺、建設行業(yè)的大數(shù)據(jù)平臺,阿里云整合自研大數(shù)據(jù)產(chǎn)品MaxCompute、DataWorks、Hologres、Flink提出云原生一體化數(shù)倉,為企業(yè)提供一站式大數(shù)據(jù)處理平臺。此次入選國家工業(yè)信息安全發(fā)展研究中心在支撐工信部大數(shù)據(jù)產(chǎn)業(yè)發(fā)展試點示范項目的基礎上組織評選出的2022年數(shù)博會“十佳大數(shù)據(jù)案例”,代表阿里云大數(shù)據(jù)受到了產(chǎn)業(yè)和客戶的廣泛認可。
阿里云云原生一體化數(shù)倉可以解決企業(yè)在建設大數(shù)據(jù)平臺中對時效性、準確性、性價比、非結構化數(shù)據(jù)處理,通過精簡的架構,支撐分析決策、異構大數(shù)據(jù)平臺之上的全域數(shù)據(jù)分析需求。
云原生一體化數(shù)倉的核心技術包括離線實時一體、湖倉一體、分析服務一體、全鏈路數(shù)據(jù)治理四個方面,架構圖如下。
通過MaxCompute和實時數(shù)倉Hologres的深度融合,提供靈活的離線實時一體的數(shù)據(jù)交換能力。MaxCompute具備EB級海量數(shù)據(jù)加工能力,Hologres采用MPP引擎,支持秒級交互式分析,擅長高并發(fā)低延遲場景,MaxCompute和Hologres 之間支持百萬行/秒數(shù)據(jù)極速同步能力,離線數(shù)據(jù)快捷刷新在線服務數(shù)據(jù);兩個引擎在場景和技術上形成補充,相輔相成,最終滿足在線應用、數(shù)據(jù)大屏、運營看板、即席查詢等多種場景的要求。
湖倉一體旨在將數(shù)據(jù)湖和數(shù)據(jù)倉庫兩種不同的數(shù)據(jù)管理架構進行融合,從而讓企業(yè)構建大數(shù)據(jù)平臺時可兼顧數(shù)據(jù)湖的靈活性和數(shù)據(jù)倉庫的企業(yè)成長性。通過支持開放的數(shù)據(jù)湖文件格式以及對數(shù)據(jù)分析多樣化統(tǒng)一管理,支持湖倉一體能力。
通過一套數(shù)據(jù)架構同時支持自助多維分析和數(shù)據(jù)在線服務,實現(xiàn)分析服務一體的統(tǒng)一數(shù)據(jù)服務層;減少數(shù)據(jù)割裂,減少數(shù)據(jù)移動,構建統(tǒng)一數(shù)據(jù)服務出口。
通過DataWorks全鏈路數(shù)據(jù)治理,支撐數(shù)據(jù)集成、數(shù)據(jù)開發(fā)、數(shù)據(jù)管理、數(shù)據(jù)分析、數(shù)據(jù)服務等數(shù)據(jù)全生命周期管理,提供一站式數(shù)據(jù)開發(fā)治理服務。
目前阿里云云原生一體化數(shù)倉已經(jīng)被應用于工業(yè)制造、電商、物流、金融、政務等多個行業(yè)中,全面助力各行各業(yè)數(shù)字化轉型,驅動業(yè)務創(chuàng)新變革。
了解更多阿里云大數(shù)據(jù):https://www.aliyun.com/product/bigdata/apsarabigdata