數(shù)據(jù)高鐵項(xiàng)目規(guī)劃

第一步：建設(shè)廳在政務(wù)云上開(kāi)通數(shù)據(jù)倉(cāng)庫(kù)資源，為該市的公積金分配數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)庫(kù)用戶名、密碼以及相關(guān)訪問(wèn)權(quán)限。

第二步：該公積金負(fù)管理中心負(fù)責(zé)將業(yè)務(wù)生產(chǎn)庫(kù)中的雙貫標(biāo)表實(shí)時(shí)同步推送至省建設(shè)廳數(shù)據(jù)倉(cāng)相應(yīng)的數(shù)據(jù)庫(kù)中。

第三步：省建設(shè)廳對(duì)公積金雙貫標(biāo)數(shù)據(jù)進(jìn)行檢查、分析，并做好與大數(shù)據(jù)局?jǐn)?shù)據(jù)庫(kù)高鐵倉(cāng)的對(duì)接。

解決方案規(guī)劃

為了確保數(shù)據(jù)的高速、完整歸集到“高鐵數(shù)據(jù)倉(cāng)” ，美創(chuàng)科技通過(guò)自主研發(fā)的數(shù)據(jù)支撐平臺(tái)實(shí)現(xiàn)數(shù)據(jù)清洗、轉(zhuǎn)換、同步和加載工作。該平臺(tái)通過(guò)對(duì)業(yè)務(wù)系統(tǒng)數(shù)據(jù)進(jìn)行標(biāo)準(zhǔn)化，向數(shù)據(jù)倉(cāng)庫(kù)或大數(shù)據(jù)平臺(tái)提供高質(zhì)量數(shù)據(jù)，支持異構(gòu)數(shù)據(jù)遷移、基于數(shù)據(jù)庫(kù)日志的數(shù)據(jù)實(shí)時(shí)復(fù)制、ETL開(kāi)發(fā)、分布式處理等功能。

具體方案如下：

一、準(zhǔn)備一臺(tái)前置機(jī)，部署Oracle數(shù)據(jù)庫(kù)存放同步數(shù)據(jù)以及清洗后的29張表，同時(shí)部署數(shù)據(jù)挖掘同步系統(tǒng)，用來(lái)完成同步清洗工作。準(zhǔn)備一臺(tái)服務(wù)器，部署Windows系統(tǒng)，主要用于對(duì)數(shù)據(jù)挖掘同步系統(tǒng)進(jìn)行數(shù)據(jù)同步、抽取、轉(zhuǎn)換、清洗等工作任務(wù)的管理以及遠(yuǎn)程運(yùn)維。

二、在生產(chǎn)庫(kù)或者容災(zāi)庫(kù)上部署數(shù)據(jù)挖掘同步系統(tǒng)客戶端；通過(guò)數(shù)據(jù)挖掘同步系統(tǒng)對(duì)公積金庫(kù)進(jìn)行按照數(shù)據(jù)庫(kù)日志級(jí)別進(jìn)行實(shí)時(shí)挖掘同步，同時(shí)在數(shù)據(jù)挖掘同步系統(tǒng)上進(jìn)行數(shù)據(jù)表篩選，篩選出建設(shè)廳所需的雙貫表。利用數(shù)據(jù)挖掘同步系統(tǒng)篩選的雙貫標(biāo)信息，通過(guò)數(shù)據(jù)倉(cāng)提供的接口，將雙貫標(biāo)初始化寫(xiě)入數(shù)據(jù)倉(cāng)。

客戶收益

數(shù)據(jù)實(shí)時(shí)同步，促進(jìn)數(shù)據(jù)共享的實(shí)時(shí)、鮮活、快速

美創(chuàng)數(shù)據(jù)支撐平臺(tái)采用數(shù)據(jù)基于日志的數(shù)據(jù)實(shí)時(shí)同步技術(shù)，實(shí)現(xiàn)數(shù)據(jù)秒級(jí)同步，結(jié)合獨(dú)有的數(shù)據(jù)比對(duì)技術(shù)，讓數(shù)據(jù)歸集具有高鐵般的速度。

數(shù)據(jù)質(zhì)量控制，保障數(shù)據(jù)共享的準(zhǔn)確、優(yōu)質(zhì)、高效

美創(chuàng)數(shù)據(jù)支撐平臺(tái)可以實(shí)施數(shù)據(jù)質(zhì)量檢核規(guī)則，發(fā)現(xiàn)數(shù)據(jù)質(zhì)量問(wèn)題，持續(xù)監(jiān)控各系統(tǒng)數(shù)據(jù)質(zhì)量波動(dòng)情況以及數(shù)據(jù)質(zhì)量規(guī)則占比，定期生成關(guān)鍵數(shù)據(jù)質(zhì)量報(bào)告，掌握系統(tǒng)數(shù)據(jù)質(zhì)量狀況。讓數(shù)據(jù)應(yīng)用更加有成效，讓群眾得到更多實(shí)惠，服務(wù)更高效。