數據集成處理平臺的定位是滿足數據采集、轉換、裝載的整個數據處理流式作業過程中應用需求,解決跨區域、跨層級、跨協議、跨平臺、跨數據源的數據交換問題。系統提供ETL過程中的應用、開發、管理、監控等的配套工具集。工具集內容覆蓋從數據集成邏輯的設計、開發、調試、部署,到運行、管理、監控各個階段。平臺支持不同來源方式和數據類型的數據交換,由接入層、控制層、處理層、輸出層等組成。
1、支持大數據的處理引擎,支持主流數據源類型,且支持自定義擴展
2、通過模式注冊,解決數據校驗、兼容和版本問題
3、拖拽式、無代碼操作,即可靈活構建數據處理應用
4、支持離線批量數據處理,也支持流式數據處理
5、通過數據統一集成,解決快速獲取異構數據
6、封裝多種組件,可篩選、過濾、轉化、分析。
數據集成處理平臺是面向領域的應用,最終的價值體現是保持并提升中臺應用主體的運營效率和創新能力,其價值主要體現在以下幾個方面:
1、 形成數據資產,沉淀數據、流程與邏輯,加速數據到數據資產的形成,解決數據不一致問題,不斷發揮數據價值,進而支持業務的決策和優化。
2、 推動業務創新,由于具備快速編排、組合服務的能力,可更好地支持企業規模化創新,降低試錯成本,使企業自身能力與用戶的需求可以持續對接。
3、 避免重復開發,企業通過抽象、梳理、整合可復用的功能和場景,將其提煉為可被業務單元引用的基礎能力并下沉,避免重復造輪子,實現服務快速復用。
4、 提高整體效能,打通新舊業務的數據壁壘,解決了求穩與求變的矛盾,同時減少人員及部門間的溝通成本,提升企業整體運營和創新效能。
1、產品配套齊全。產品包含數據交換和服務調用全套產品,可以滿足當前數字政府、智慧城市、一網統管等各類應用場景。
2、即插即用。全套產品采用軟硬結合、嵌入式結構,系統軟件、數據庫等軟件實現微核化設計,即插即用,無需單獨購買通用服務器做為數據交換服務器、前置機服務器等,也不需要單獨購買,安裝系統軟件。
3、安全可靠性。提供了安全管理、數據安全、網絡安全、會話安全、物理安全五個安全措施,同時,提供長時間的數據存儲記錄,完整的數據恢復機制,保證每批數據可查,可恢復。
1.龍崗區大數據平臺:按照規劃、標準、建設、管理、運維、保障“六個統一”的思路,統籌信息化建設項目、軟硬件資源、數據資源、政府網站、網絡與信息安全等信息化建設各個方面,凡屬政府資金投資建設的系統,必須經過統一評審,規范數據共享接口,避免形成數據“孤島”,最終形成智慧龍崗建設全區“一盤棋”。
2.貴陽市大數據共享交換平臺:通過對城市信息資源共享的建設實踐,結合貴陽市信息化建設現狀和大數據產業發展勢頭,以對全市政府數據資源和社會數據資源的采集、融合、共享、開放和交易為首任。建立服務于政府和公眾的信息資源共享交換和服務開放交易機制,發揮貴陽市作為國家大數據產業核心示范區的引領作用。平臺基于科學、合理的設計理念,穩定的多層結構體系和成熟的共享交換產品來構建,能夠很好的保證應用系統的可伸縮性、可擴展性和易維護、易管理性和安全性。