華宇通用大數據管理(睿元)平台是面(miàn)向(xiàng)各行業大數據應用的開(kāi)發(fā)和運維人員提供集數據開(kāi)發(fā)、數據管理和運維管理于一體的一站式大數據平台。平台提供覆蓋“采、存、管、通、用”五大方面(miàn)的基礎能(néng)力,使各行業大數據聚焦于數據業務價值探索和應用開(kāi)發(fā),提高各行業大數據項目交付效率。
通用大數據平台基于MPP+Hadoop分布式混合技術架構實現結構化數據、半結構數據和非結構化數據的統一存儲和運算。通過(guò)數據治理平台實現從數據生産、采集、加工、存儲、應用、歸檔、到銷毀的全生命周期治理管控。實現各行業數據從資源到資産的轉變,達到數據的可信、可用、可靠、和可控。
睿元平台五大組成(chéng)部分包括:數據采集平台、大數據基礎支撐層、數據治理平台、共享交換平台和數據應用平台五大部分系統。
1、數據采集平台可實現對(duì)包括結構化數據、實時數據、文件數據、圖片數據、日志數據、互聯網數據、音視頻等在内的各類型數據的全量和增量采集,支持采集任務調度與監控。
2、大數據存儲計算平台采用MPP+Hadoop的數據平台結構,實現結構化、半結構化和非結構化多源異構海量數據的存儲和計算。提供全局範圍内各類數據的統一存儲計算服務,形成(chéng)标準、彈性、可靠的一套基礎支撐體系。平台提供完整的多租戶功能(néng),對(duì)于計算資源與存儲資源以及數據訪問資源進(jìn)行統一調度和控制管理;提供統一的可視化運維管理能(néng)力,實現平台組件的一鍵部署、在線擴容、服務啓停、配置管理、狀态監控和告警提醒等。
3、數據治理平台是依據國(guó)際數據管理知識體系(DAMA)建立的符合司法和政務行業數據特征的數據治理系統。通過(guò)平台提供的數據标準管理、數據資産管理、數據質量管理、元數據管理、主數據管理和數據安全管理六大子系統功能(néng),可對(duì)大數據平台中的數據資源進(jìn)行可視化的全生命周期管理和安全管控,提升數據質量,保障數據可信可用。
4、共享交換平台可提供統一的數據交換、數據共享和服務管理能(néng)力,可用于實現跨應用、跨部門、跨地域、跨層級的數據共享交換場景。平台支持基于數據庫庫表、文件、接口等方式的數據共享交換以及服務注冊、接口授權訪問等服務管理手段,提供全方位的監控審計、統計分析以及數據安全管控等方面(miàn)功能(néng)。
5、數據應用平台提供包括統一數據搜索、數據可視化、數據挖掘分析等方面(miàn)能(néng)力,幫助各行業應用快速構建面(miàn)向(xiàng)用戶的智能(néng)化數據應用。
通過(guò)利用數據資産,數據管理以及數據分析,數據可視化工具幫助喚醒沉睡的數據,實現數據價值的最大化。通過(guò)數據清洗,數據轉換,标準定義以及語義挖掘,實現雜亂無章的數據治理。通過(guò)數據同步、數據關聯、數據搜索、以及應用引擎,實現跨界數據融合與共享。