以數據智能為核心理念的大數據應用數據管理平臺
集成數據接入、數據融合、數據標準、數據質量、數據安全、數據資產、數據服務等產品化的大數據全生命周期能力,幫助企業接入、存儲、管理、分析和應用全域數據,解決數據分散閑置、數據重復、標準化程度低、數據無法共享等痛點,以及數據找不到、讀不懂、獲取難、不可信等問題,從而盤活數據資產、服務數據消費、釋放數據價值,賦能企業數字化轉型。
平臺可輕松實現對業務及生產數據的管理,構建數據標準規范體系,建設全域數據資產,服務數據消費共享,進而提高數據治理效率,降低數據建設成本,激活數據商業價值,賦能企業運營與決策,優化企業業務流程,升級企業組織架構等,更好地服務于企業運營生產業務,幫助企業實現數字化運營。

核心價值
通過搭建工業數據管理平臺,打破傳統各系統煙囪式建設模式,實現跨專業、跨層級、跨主體、全過程的數據呈現、敏捷開發與能力嵌入,充分發揮大數據的核心資產能力與價值能力,持續推動透明管控、科學運營和價值創造。
降本增效
搭建工業數據管理平臺,降低了數據建設成本,提高數據治理效率,通過平臺多源異構數據的接入,降低了企業數字化轉型實施門檻,提升了數據智能平臺構建效率,賦能企業數據資產持續沉淀,從而數顯數據價值可續性釋放。
賦能創新
激活數據商業價值,賦能企業運營與決策,通過平臺搭建,數據的處理清洗,挖掘數據價值,實現應用創新及賦能業務。
基于平臺開發的面向業務場景的數據服務,構建滿足經營分析和業務創新的數據應用,支撐和助力業務體系實現數據價值驅動業務發展。
全域資產
將接入的多源異構數據資產化,建設全域數據資產。
將不同系統的數據采集接入平臺,數據匯聚一體,解決數據鼓孤島,實現數據的統一;數據資產建設,推進企業數據治理、數據質量的建設,形成統一的數據標準和管理口徑;數據服務構建,為全平臺用戶提供數據服務,數據的價值反哺業務端。
優化流程
建設企業數據服務平臺,改變企業數據服務和獲取方式,改變企業數據服務流程,升級企業組織架構。
隨著平臺在整個業務鏈條中的部署和應用,大數據進入決策階段,企業的業務流程逐漸快速、扁平化,業務從依賴人員經驗的流程驅動逐步轉向數據驅動,更是打通部門、事業群間的壁壘,提升企業組織的靈敏性。
產品特性
海量數據采集計算與存儲
- 支持關系型數據庫:Postgresql、Mysql、Oracle、SqlServer;
- 支持流式數據接入:Kafka;
- 支持MPP數據庫:Greenplum;
- 支持時序數據庫:IotDB;
- 支持iNoSQL數據庫:Hbase;
- 支持接口數據:支持RESTful API接入;
- 支持文本數據:支持CSV、Excel等文本數據的接入;
- 支持非結構化數據:文檔、圖片、音頻、視頻、其它;
- 支持通過腳本、Java程序、API、SQL等多種方式進行數據查詢分析;
- 支持數據的多源、多類型的導入與導出;
- 提供可視化的SQL執行IDE,支持OpenLooKeng的數據查詢及結果輸出;
- 支持Minio文件管理。
數據管理與安全
- 支持數據的血緣分析、影響分析,實現數據全生命周期的查看與溯源;
- 支持按照企業業務分類劃分數據,形成企業專屬的數據目錄;
- 支持數據信息收藏、分享、標簽管理、快速SQL查詢等操作,方便的進行數據定位分析;
- 支持數據權限查看,權限申請與審批等,方便數據分析師快速獲得數據權限;
- 支持隱私數據按照業務需求分類分級,支撐完善企業數據安全管理;
- 支持企業統一的質量規則庫管理,按照數據完整性、有效性、一致性、準確性、唯一性、及時性、自定義七大維度管理和查看規則;
- 支持自定義質量校驗任務,獲取任務執行記錄和日志;
- 支持表全面的質量分析,查看質量變化趨勢與每個規則校驗結果;
- 支持預覽質量規則對應的問題數據;
- 支持企業數據質量變化與檢測維度、檢查結果全面監控。
輕量化部署
- 支持彈性化容器化部署;
- 6小時完成平臺部署上線;
- 未采用Hadoop技術體系實現輕量化;
- 支持集群中節點的自動化配置,包括主機及在其上安裝的服務、客戶端等;
- 支持對集群各節點的可視化、圖形化、指標化監控,如CPU、存儲、硬盤、負載、網絡等;
- 支持基于整體平臺或獨立組件的版本升級,并保障數據的持續可用。
數據集成與調度
- 支持流數據接入;
- 支持不同類型數據庫之間的同步,數據的批量化、定時化處理與調度;
- 支持多數據源的數據集成與整合,包括Oracle、MySql、SqlServer等關系型數據庫、文件、Web服務等多種類型;
- 支持可視化方式的數據采集、轉換流程配置;
- 支持構建數據質量檢測規則、數據質檢任務的執行與調度。
數據服務
- 支持基于數據資產快速生成API接口;
- 支持數據目錄;
- 支持用戶快速查詢數據資產,進行資產訂閱。
資源管理
- 支持用戶權限的分配,審核與管理;
- 支持基于RBAC的權限管理,在項目中提供項目組成員、用戶組、角色的權限分配,支持批量或單一的權限授權,支持到表級的讀寫權限控制。
主要功能
從功能架構上分為數據接入、數據處理、數據治理、數據計算與存儲、數據查詢與分析、數據資產管理和數據服務。主要采用分布式技術,滿足計算能力線性擴展。工業數據管理平臺總體框架如下:
資產目錄
提供用戶查找、篩選數據資產的數據超市,基于業務資產分類,以卡片形式展示數據資產的基本信息、屬性信息、樣例數據、數據血緣,提供多維度檢索查詢、標簽過濾、資產訂閱、數據預覽、下載、導出、收藏等功能,以及基于資產名稱、更新時間、熱度的排序等。

數據接入
支持拖拽式構建、編排任務流程,支持離線批處理、實時流計算,從數據庫、本地文件抽取數據進行數據清洗、過濾、轉換、加工、同步等數據融合操作,滿足業務在數據分析、業務創新、決策支持方面的用數要求。

數據融合
支持拖拽式構建、編排任務流程,支持離線批處理、實時流計算,從數據庫、本地文件抽取數據進行數據清洗、過濾、轉換、加工、同步等數據融合操作,滿足業務在數據分析、業務創新、決策支持方面的用數要求。

數據服務
基于數據資產的API接口服務,是數據平臺能力的出口,可支持公司內部其它系統,或者公司合作伙伴,或者公司外部供應鏈系統集成使用,滿足數據消費者通過接口持續獲取數據的需求,支持基于數據服務進行數據分析與決策,以及業務智能應用。

數據標準
保障數據內外部使用和交換的一致性和準確性的規范性約束,基于數據標準統一業務部門之間、業務和技術之間、統計指標之間的認識與口徑,實現數據在跨系統間敏捷交互,減少數據清洗工作量,方便數據融合分析,為建立數據標準體系奠定基礎。

數據質量
借助質量計劃、質量規則、質量評估等提升質量的手段,提升數據質量的完整性、一致性、規范性、準確性、唯一性等指標,夯實數據應用基礎,發揮數據價值,進而更好地推進數據決策的落地。

數據脫敏
支持關系型數據資產的屬性進行脫敏處理與展示,對標定的敏感數據關聯脫敏規則,基于脫敏規則可以滿足安全審計及個人信息保護要求,保障敏感數據、高業務價值數據安全存儲和消費。
