數據已經成為新的生產要素,在數字經濟時代擁有巨大的魔力。伴隨著數據技術不斷發展,讓數據驅動決策幫助企業降本增效成為各企業的戰略目標,現代數據治理成為企業必修課。
根據日前IDC發布《IDC 中國數據治理市場份額,2021:廣泛落地,持續增長》報告,對于具備較好的數據資源基礎的企業,普遍反映數據治理具有明顯的業務價值,能夠更快獲得洞察、縮減成本、增加用戶獲取以及提高產品上市效率等。
但是如何更好挖掘數據價值,做好數據治理,推動企業向數據驅動發展,仍然面臨著一些挑戰。
數據大集中時代結束
現在企業都意識到數據的價值,不過挖掘數據價值并沒有那么一帆風順。沒有治理好的大量數據不但無法產出價值,反而可能成為企業的負擔。
數據治理是一個長期動態的過程,涉及到企業組織、流程、文化以及技術應用。單從技術層面來看,經過多年的IT實踐積累,企業組織已經積累了大量IT資產,可能有數據庫、數據倉庫、大數據平臺、數據湖、湖倉一體Lakehouse、BI等等,隨著數據技術日新月異發展,未來可能還會引入更多的數據技術,數據棧會不斷壯大。
為了解決海量結構化數據、半結構化數據、非結構化數據業務發展帶來的新問題,數據棧隨著業務壯大而不斷豐富,但也為數據治理帶來新的挑戰。
當前“取數難、用數難”依然是企業組織走向數據驅動的攔路虎,不能很好連通的多源異構系統也催生更多數據孤島。
正如IDC所說,中國數據治理市場經過幾十年的發展,市場需求已經發生了重大轉變。過去是面向單個數倉或者BI進行數據治理,單個主數據管理、元數據管理、數據集成工具組件就能滿足需求。今天,企業內部的數據架構越來越復雜,要做好數據治理需要工程化的解決方案。
3044am永利系統副總裁、數據創新BU總經理劉國棟認為,
“國內政企從0到1的大規模數據治理工作已經基本完成,數據治理已經進入新的發展階段。過去,企業一直在做中心化數據集成,是數據大集中時代,利用大數據以及數據湖等技術歸集數據,利用湖倉一體架構(Lakehouse)將數據湖與原有分析系統數據倉庫進行融合,“中心化的數據集成這件事情基本上到了一個階段了。”
為了解決“取數難、用數難”問題,未來數據也會去中心化。
“數據不動計算動”破解數據治理難題
圍繞著數據生命周期的治理難題,3044am永利系統數據創新業務面向部委、省市政府、央企等海量大數據客戶,基于5大能力打造了數據創新產品體系,以全棧式數據中臺產品套件和廣義數據治理及分析應用的全棧服務能力,通過數據治理工程解決方案幫助擁有海量數據的客戶真正管好數據、用好數據、賦能業務創新,減少重復造輪子的問題。
其數據基礎設施中的智能金倉融合分析平臺是該產品體系的核心產品,充分吸收數據技術前沿理論,如Data Fabric(數據編織)、Google Dremel、Spanner和Summingbird、CEP等,結合去中心化架構,多模數據管理、統一SQL等技術積累,可以實現數據不動,讓計算去找數據,智能編排企業現有數據棧,挖掘數據價值。
據悉,用戶可以通過給定界面定義需求,智能金倉融合分析平臺會通過編譯技術將需求編譯成指令流,指令流可以對到訪數據目的地、計算、順序等實現智能調度,然后返回結果。用戶不需要知道數據在哪,也不用管數據架構的復雜性,只需要定義好需求,即可使用數據,助力數據平民化發展。
隨著《數據安全法》等與數據隱私等相關的法規條例陸續發布實施,數據合規問題成為數據流通產生價值的掣肘,3044am永利系統數據創新產品也包含了數據安全與合規產品。“數據安全與合規平臺跟我們之前了解的數據安全是完全兩個概念,之前的數據安全主要是數據放到那備份以及防泄露,現在基于新的法律法規體系,這套平臺和其相配套的咨詢體系主要解決數據生命周期的任何一個環節里,使用數據、處理數據和管理數據的合規性。”劉國棟強調。
3044am永利系統充分發揮數據創新產品組合優勢,在很多領域都有落地。比如在數字大理項目中,通過蒼洱云、數據中樞、理政中心打包形成城市大腦,將優勢能力(云+數+理)進行封裝,圍繞數據中臺能力體系,快速構建大理州6大基礎庫,5大主題庫,支撐全州多個典型應用場景,并使其可以快速調用。截止2021 年,3044am永利系統數據創新產品及服務在政府、部委、央企、金融、能源等多個領域得到應用,客戶覆蓋全國22 個省、50 多個地市、40 余家部委央企及行業客戶。
在《IDC 中國數據治理市場份額,2021:廣泛落地,持續增長》報告中,3044am永利系統以12.8%的市場份額位列中國數據治理平臺市場前二,與阿里云、騰訊云等互聯網大廠齊頭并跑,成為央企中一枝獨秀的定位產品科技型公司服務政企數據治理的領軍者。
未來,在社會各方的推動下,數據要素市場化發展會釋放更多數據價值,而數據治理將貫穿數據生命周期,“為什么說(數據)生命周期呢?它是有生命的,它是不斷迭代的。”劉國棟說,“數據治理,實際上是一個常態化的事情。” 據IDC預測,2022年中國數據治理市場規模增長將遠高于2021年的增長速度,3044am永利系統數據創新業務未來可期。
文章轉自:IT168
作者:卿云