數(shù)據(jù)高鐵項目規(guī)劃

第一步：建設(shè)廳在政務(wù)云上開通數(shù)據(jù)倉庫資源，為該市的公積金分配數(shù)據(jù)倉庫數(shù)據(jù)庫用戶名、密碼以及相關(guān)訪問權(quán)限。

第二步：該公積金負管理中心負責將業(yè)務(wù)生產(chǎn)庫中的雙貫標表實時同步推送至省建設(shè)廳數(shù)據(jù)倉相應(yīng)的數(shù)據(jù)庫中。

第三步：省建設(shè)廳對公積金雙貫標數(shù)據(jù)進行檢查、分析，并做好與大數(shù)據(jù)局數(shù)據(jù)庫高鐵倉的對接。

解決方案規(guī)劃

為了確保數(shù)據(jù)的高速、完整歸集到“高鐵數(shù)據(jù)倉” ，美創(chuàng)科技通過自主研發(fā)的數(shù)據(jù)支撐平臺實現(xiàn)數(shù)據(jù)清洗、轉(zhuǎn)換、同步和加載工作。該平臺通過對業(yè)務(wù)系統(tǒng)數(shù)據(jù)進行標準化，向數(shù)據(jù)倉庫或大數(shù)據(jù)平臺提供高質(zhì)量數(shù)據(jù)，支持異構(gòu)數(shù)據(jù)遷移、基于數(shù)據(jù)庫日志的數(shù)據(jù)實時復(fù)制、ETL開發(fā)、分布式處理等功能。

具體方案如下：

一、準備一臺前置機，部署Oracle數(shù)據(jù)庫存放同步數(shù)據(jù)以及清洗后的29張表，同時部署數(shù)據(jù)挖掘同步系統(tǒng)，用來完成同步清洗工作。準備一臺服務(wù)器，部署Windows系統(tǒng)，主要用于對數(shù)據(jù)挖掘同步系統(tǒng)進行數(shù)據(jù)同步、抽取、轉(zhuǎn)換、清洗等工作任務(wù)的管理以及遠程運維。

二、在生產(chǎn)庫或者容災(zāi)庫上部署數(shù)據(jù)挖掘同步系統(tǒng)客戶端；通過數(shù)據(jù)挖掘同步系統(tǒng)對公積金庫進行按照數(shù)據(jù)庫日志級別進行實時挖掘同步，同時在數(shù)據(jù)挖掘同步系統(tǒng)上進行數(shù)據(jù)表篩選，篩選出建設(shè)廳所需的雙貫表。利用數(shù)據(jù)挖掘同步系統(tǒng)篩選的雙貫標信息，通過數(shù)據(jù)倉提供的接口，將雙貫標初始化寫入數(shù)據(jù)倉。

客戶收益

數(shù)據(jù)實時同步，促進數(shù)據(jù)共享的實時、鮮活、快速

美創(chuàng)數(shù)據(jù)支撐平臺采用數(shù)據(jù)基于日志的數(shù)據(jù)實時同步技術(shù)，實現(xiàn)數(shù)據(jù)秒級同步，結(jié)合獨有的數(shù)據(jù)比對技術(shù)，讓數(shù)據(jù)歸集具有高鐵般的速度。

數(shù)據(jù)質(zhì)量控制，保障數(shù)據(jù)共享的準確、優(yōu)質(zhì)、高效

美創(chuàng)數(shù)據(jù)支撐平臺可以實施數(shù)據(jù)質(zhì)量檢核規(guī)則，發(fā)現(xiàn)數(shù)據(jù)質(zhì)量問題，持續(xù)監(jiān)控各系統(tǒng)數(shù)據(jù)質(zhì)量波動情況以及數(shù)據(jù)質(zhì)量規(guī)則占比，定期生成關(guān)鍵數(shù)據(jù)質(zhì)量報告，掌握系統(tǒng)數(shù)據(jù)質(zhì)量狀況。讓數(shù)據(jù)應(yīng)用更加有成效，讓群眾得到更多實惠，服務(wù)更高效。