? ? 隨著社區及業內大數據技術框架的成熟與發展,基于Hadoop技術生態的數據存儲、數據倉庫、實時計算、綜合檢索等大數據產品和技術在政府、企業數字化變革中得到了深入的實踐與應用。未來,四方偉業大數據存儲計算平臺的研發,將會更多地聚焦如何助力數據消費和數據賦能,以驅動政府、企業及各行業用戶構建自己的大數據智能生態。在具體的工程實踐中,屏蔽底層多源異構數據差異、解耦并分離存儲與計算,基于廣泛異構數據信息快速構建數據視圖,構建輕量、靈活、獨立、高效的數據分析平臺將成為大數據技術新的發展趨勢。四方偉業智能分析引擎SDC Analysis Engine(簡稱:SDC AE)應運而生。
? ? 四方偉業SDC AE智能分析引擎面向數據在線分析和數據模型設計,以多源異構數據在線分析計算、物化視圖智能感知數據存儲、HOLAP多維立方體模型構建、圖形化模型設計與開發、百億規模數據快速地交互式查詢響應等核心產品能力,助力政府、企業及各行業大數據智能生態構建,真正實現數據的快速組織,面向分析與應用,釋放數據價值。
SDC?AE智能分析引擎能做什么?
1.快速地交互式查詢響應能力,助力敏捷報表及可視化系統
支持物化視圖預計算能力,減少Hadoop、Spark、MPP、RDBMS上百億規模數據的查詢延遲。對于大規模數據集的關聯、聚合、排序、過濾等復雜交互式查詢場景,實測最佳優化性能可提升上百倍。
2.物化視圖智能感知數據存儲,提供了更加輕量、靈活、高效、獨立的計算模式
通過預計算方式,SDC AE智能分析引擎可以將聚合數據物化成數據視圖,并調度分發到基于Hadoop,MPP的數據倉庫或者關系型數據庫、分布式數據庫中。通過SQL重寫智能感知聚合數據和明細數據,相對于傳統的模型設計工具,提供了更加輕量、靈活、高效、獨立的模型設計體驗。
3.多源異構數據在線分析計算,將數據“跨欄”變成數據“短跑”
相對于傳統的大數據分析處理流程來說,對于多源異構數據的分析計算就像110米跨欄一樣,針對每種不同的數據源都需要進行“卡位”,只有所有異構數據源“卡位”完成,才能進行異構數據的分析計算。而SDC AE智能分析引擎將數據“跨欄”變成了數據“短跑”,提供了“一次到位”的分析計算。
4.圖形化的模型設計界面,為用戶提供更加友好、簡單、易操作的數據分析和模型設計體驗
SDC AE智能分析引擎能夠應用于跨系統分析+報表與可視化呈現、統計呈現+詳情下鉆、交互式查詢分析等場景,為客戶提供更加靈活的存儲引擎選型,更加靈活、輕量、獨立的Cube模型設計。基于存儲與計算分離的架構設計思路,SDC AE智能分析引擎有效地降低了用戶的運維成本、學習成本和使用成本;同時,大規模提升了數據分析計算的處理效率。
四方偉業作為領先的大數據、人工智能產品及服務提供商,以振興民族軟件產業為己任,目前已擁有100+項大數據核心發明專利與著作權,具有自主知識產權的大數據產品在國內政府、能源、交通、金融、軍工、企業、運營商等社會各行業中廣泛應用。未來,四方偉業將繼續聚焦大數據和人工智能技術創新,助力我國社會各行業數字化轉型。