據統計,政府擁有全社會80%的數據資源,通過運用大數據、雲計算等現代信息技術,形成「用數據決策、用數據管理、用數據服務」的公共管理與服務機制,能夠有效提升政府公共管理能力和國家治理能力,促進社會經濟的快速健康發展。近年來,數據開放共享已成為我國開展數據治理的重要議題,中央和地方政府在數據開放共享的頂層設計和制度化建設方面邁出了創新步伐。
億信華辰通過創新大數據處理技術,為新一代政務數據共享交換提供解決方案,以實現數據的統籌利用、統一接入、開放共享,形成數據存儲、交換、使用、共享的核心樞紐,推動跨地區、跨層級、跨部門的數據共享交換與應用,助推政務數據無縫共享新時代的開啟。
政務數據交換通用部署架構
事實上,實現政務信息系統的整合和共享,本質上是實現國務院各部門與地方政府之間、部門與部門之間、各業務系統之間的數據整合和共享。所以,構建統一、高效、安全可控的數據共享交換平臺至關重要。
目前,各地各部門已經陸續搭建了各自的政務數據交換平臺。在平臺建設過程中,逐漸形成了較為成熟的數據交換體系架構。其中,大部分較為通用的政務數據共享交換體系技術支撐由一個統一交換管理中心和多個交換節點子系統組成。信息庫系統由部門業務信息庫、交換信息庫等組成;信息交換系統由交換節點子系統、交換監控管理系統、資源目錄系統組成。政務信息資源交換體系技術總體架構如下圖所示。
其中交換節點子系統部署在各部門前置機中,主要打通物理隔離,將業務庫信息交換到數據交換平臺中,然後再交換到平臺內置交換信息庫,或者直接傳輸交換到其他前置機,進而交換到其他部門業務庫。
交換管理中心主要是包括資源目錄管理系統和交換監控管理系統。其中資源目錄管理系統主要是管理業務系統的數據信息資源,包括資源本身的屬性、特徵及其定位信息和獲取方式。交換監控管理系統主要是監控交換過程,同步節點信息,交換任務調度監控等,確保交換過程穩定、高效、安全進行。
政務數據交換常見場景
圍繞政務共享交換領域,以數據分類分級為基礎,以數據安全標籤為手段,針對數據共享交換場景和大數據應用場景打造數據安全治理整體解決方案,從前端業務系統到後端業務資料庫,從源頭到終端,對數據的獲取、處理和使用進行安全閉環監督管理。
政務數據交換的場景主要有幾類,有資源文件的交換,包括各種文本文件、Excel等,通常通過文件交換傳輸的方式如FTP、MQ等進行交換,也可以是從庫表交換到庫表,或者庫表到文件、文件交換到庫表、接口到文件到庫表等等多種靈活的數據交換方式,通過ETL方式實現數據交換,同時也可以對數據做一定的預處理。
政務數據交換過程中需要對數據交換全生命周期做監控,以便及時預警,主要包括交換節點監控、交換統計信息監控、調度情況監控等。其中對交換節點監控,主要是對節點狀態信息監控,節點連通情況監控,節點系統資源使用情況監控等。對交換統計信息監控,主要包括節點交換任務數、交換量、交換性能、交換結果、交換使用資源等監控。對調度情況監控,主要是對調度情況整體監控,包括調度任務數統計、異常任務監控、調度時間分布統計等。同時也支持日誌審計,每次在平臺所執行的操作和交換調度都會做日誌記錄,以便查核。
政務數據交換平臺落地成熟產品
目前,許多地方已經陸續建立了各自的政務數交平臺,技術體系已經比較成熟,有些數據服務公司已經總結了數交實施經驗而形成了穩定、成熟的數據交換產品,例如億信華辰公司的睿通數據交換產品,它是億信華辰公司自主研發的具有獨立自主智慧財產權、業界領先的企業級數據整合交換平臺。
億信華辰睿通數據交換產品支持廣泛的數據採集類型(資料庫、文件、表格等),適用於資料庫之間、文本之間、以及不同類型之間進行數據交換等數據交換場景,同時提供了多種數據變化捕獲方法完成數據的增量抽取,豐富的交換組件和清洗轉換規則支持,完成數據的採集、集中處理、分發、加載、傳輸,構造統一的數據及文件的傳輸交換,可以解決跨部門、跨區域、跨網絡的數據交換問題,全面支撐政務數據共享開放體系。
佛山某區利用睿通數據交換產品建設的政務服務數據管理平臺,基於人口庫、衛計、工商、流管數據,建立區大數據統籌局一庫三部門的統一技術和業務標準;開發區域數據交換平臺,完成三大部門數據的採集、傳輸,以及一庫三部門的交換共享,提供銜接順暢的數據申請、交換服務,並對交換日誌數據進行監控分析。重點匯集與治理衛計、工商、流管等部門數據,為各部門數據應用如自助填表系統、教育無紙化提供了高質量的數據支撐。