您好,歡迎來到易龍商務網!
發布時間:2020-12-31 08:24  
【廣告】





大數據中心建設的功能
數據管理
1.多源異構數據的統一管理、統一查詢等,支持字段級、行級權限控制
2.數據標簽管理,進行數據畫像及檢索應用
1.支持文件元數據定義, 及文件的上傳、預覽、導出控制
2.支持服務器磁盤、HDFS、Hbase等多種文件存儲方式
1. 數據有哪些、是什么、在哪里一目了然
2. 企業級結構化數據、非結構化數據統一的資源目錄,及數據查詢與申請

大數據中心建設的功能特性
數據質量管理
1. 質量規則零代碼可配置,包括僅一性、準確性、一致性、規范性等規則
2. 事前校驗、事后評估方式發現及監控數據質量,并進行低分預警
1.19 數據加工算法組件;20 計算函數開箱即用,無須代碼開發
2.拖拽式操作實現跨庫的、大數據的融合加工
1. 質量規則零代碼可配置,包括僅一性、準確性、一致性、規范性等規則
大數據中心建設——模型設計
模型設計指導理論:
模型層次:把表數據模型分為三層:操作數據層(ODS)、公共維度模型層(CDM)和應用數據層(ADS),其中公共維度模型層包括明細數據層(DWD)和匯總數據層(DWS)。
操作數據層(ODS):把操作系統數據幾乎無處理地存放在數據倉庫系統中。
同步:結構化數據增量或全量同步。
結構化:非結構化(日志)結構化處理并存儲。
累積歷史、清洗:根據數據業務需求及稽核和審計要求保存歷史數據、清洗數據。