隨著金融行業(yè)業(yè)務(wù)的快速發(fā)展變化,企業(yè)對(duì)業(yè)務(wù)系統(tǒng)的改造需求呈爆炸式增長(zhǎng),而且頻率越來(lái)越快,尤其是綜合業(yè)務(wù)系統(tǒng)已經(jīng)進(jìn)行常態(tài)化研發(fā)階段。業(yè)務(wù)系統(tǒng)頻繁變化通常會(huì)導(dǎo)致下游的數(shù)據(jù)管理系統(tǒng)隨之變化,產(chǎn)生高昂的開(kāi)發(fā)、維護(hù)成本,并影響下游系統(tǒng)用戶的使用。
數(shù)商云在行業(yè)調(diào)研中發(fā)現(xiàn),隨著綜合報(bào)表平臺(tái)使用的不斷深入,業(yè)務(wù)部門對(duì)數(shù)據(jù)利用的寬度和深度不斷擴(kuò)展,對(duì)業(yè)務(wù)數(shù)據(jù)分析職能的要求也越來(lái)越高:信貸、會(huì)計(jì)、風(fēng)險(xiǎn)管理、內(nèi)部審計(jì)等業(yè)務(wù)部門需要獲取標(biāo)準(zhǔn)一致、口徑統(tǒng)一的全業(yè)務(wù)數(shù)據(jù),對(duì)日常業(yè)務(wù)進(jìn)行統(tǒng)計(jì)、分析和監(jiān)控,根據(jù)查詢分析的結(jié)果有針對(duì)性地規(guī)范業(yè)務(wù)操作與管理流程,強(qiáng)化業(yè)務(wù)經(jīng)營(yíng)和管理能力;各級(jí)領(lǐng)導(dǎo)需要全面完整的、包含歷史信息的業(yè)務(wù)數(shù)據(jù)以便及時(shí)、準(zhǔn)確地掌握本行業(yè)務(wù)的運(yùn)行狀況,分析、預(yù)測(cè)業(yè)務(wù)發(fā)展變化趨勢(shì),為管理決策提供支持。
一、問(wèn)題及挑戰(zhàn)
一是缺乏統(tǒng)一的數(shù)據(jù)標(biāo)準(zhǔn)體系,無(wú)法建立全面、準(zhǔn)確、完整反映全行經(jīng)營(yíng)狀況的單一數(shù)據(jù)視圖,制約了數(shù)據(jù)共享;
二是數(shù)據(jù)質(zhì)量亟待提高;
三是數(shù)據(jù)管理?xiàng)l塊分割。
二、建設(shè)思路及方案
1、建設(shè)思路
充分借鑒業(yè)界先進(jìn)數(shù)據(jù)倉(cāng)庫(kù)建設(shè)成功經(jīng)驗(yàn),經(jīng)過(guò)分析證,決定采用先建數(shù)據(jù)集市、后建數(shù)據(jù)整合層的方案 進(jìn)行數(shù)據(jù)倉(cāng)庫(kù)建設(shè),搭建數(shù)據(jù)基礎(chǔ)平臺(tái),整合全行主要業(yè)務(wù)系統(tǒng)數(shù)據(jù),形成全行數(shù)據(jù)應(yīng)用統(tǒng)一出口。同時(shí)制 定一批得重要業(yè)務(wù)數(shù)據(jù)標(biāo)準(zhǔn),依據(jù)標(biāo)準(zhǔn)對(duì)數(shù)據(jù)進(jìn)行加工和整合,并通過(guò)標(biāo)準(zhǔn)的逐步完善,為解決數(shù)據(jù)管理和 數(shù)據(jù)質(zhì)量質(zhì)量問(wèn)題提供手段和依據(jù)。
2、總體方案
整體架構(gòu)包含了數(shù)據(jù)源、數(shù)據(jù)平臺(tái)、數(shù)據(jù)管理平臺(tái)和數(shù)據(jù)應(yīng)用四個(gè)部分。
(1)數(shù)據(jù)源
通過(guò)“數(shù)據(jù)管理平臺(tái)”的數(shù)據(jù)處理及數(shù)據(jù)調(diào)度,將數(shù)據(jù)源中的數(shù)據(jù)分別寫(xiě)入數(shù)據(jù)平臺(tái)。
(2) 數(shù)據(jù)平臺(tái)
數(shù)據(jù)平臺(tái)基于傳統(tǒng)的關(guān)系型數(shù)據(jù)庫(kù)構(gòu)建,對(duì)結(jié)構(gòu)化的業(yè)務(wù)數(shù)據(jù)進(jìn)行存儲(chǔ)、整合、加工和應(yīng)用。其數(shù)據(jù)來(lái)源于行內(nèi)各個(gè)業(yè)務(wù)系統(tǒng),為應(yīng)用提供全面數(shù)據(jù)支撐。
(3) 數(shù)據(jù)管理平臺(tái)
數(shù)據(jù)管理平臺(tái)對(duì)數(shù)據(jù)平臺(tái)的數(shù)據(jù)關(guān)系、數(shù)據(jù)質(zhì)量、ETL作業(yè)、生命周期等內(nèi)容進(jìn)行管理,是保障數(shù)據(jù)平臺(tái)的正常運(yùn)轉(zhuǎn),促進(jìn)數(shù)據(jù)倉(cāng)庫(kù)逐步完善,提升數(shù)據(jù)倉(cāng)庫(kù)的管理水平的重要手段。
(4) 數(shù)據(jù)應(yīng)用
面向最終用戶提供數(shù)據(jù)的應(yīng)用,包括統(tǒng)計(jì)報(bào)表、高管駕駛艙等數(shù)據(jù)應(yīng)用。
三、關(guān)鍵技術(shù)及創(chuàng)新
1、平臺(tái)化的數(shù)據(jù)倉(cāng)庫(kù)架構(gòu)設(shè)計(jì)
平臺(tái)化設(shè)計(jì)通過(guò)對(duì)數(shù)據(jù)平臺(tái)進(jìn)行需求分析,提煉需求共性特征并進(jìn)行分類,劃分出不同的平臺(tái),平臺(tái)功能既各有偏重,又相互協(xié)同,形成數(shù)據(jù)平臺(tái)的完整體系。
2、具有農(nóng)業(yè)政策性特點(diǎn)的基礎(chǔ)數(shù)據(jù)平臺(tái)
基礎(chǔ)數(shù)據(jù)平臺(tái)以成熟的行業(yè)模型TD-FSLDM為基礎(chǔ)進(jìn)行定制,在保留銀行業(yè)通用設(shè)計(jì)基礎(chǔ)上,依據(jù)農(nóng)發(fā)行自身業(yè)務(wù)特點(diǎn),對(duì)模型實(shí)體進(jìn)行細(xì)分和擴(kuò)充,形成體現(xiàn)農(nóng)發(fā)行政策性業(yè)務(wù)特點(diǎn)的模型設(shè)計(jì)。
3、自主可控的數(shù)據(jù)管理平臺(tái)
數(shù)據(jù)管理平臺(tái)包括數(shù)據(jù)調(diào)度、數(shù)據(jù)傳輸、數(shù)據(jù)生命周期、元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量檢核,各個(gè)子平臺(tái)間既獨(dú)立運(yùn)行,又相互協(xié)作,共同支撐數(shù)據(jù)倉(cāng)庫(kù)的整體運(yùn)轉(zhuǎn)。
四、平臺(tái)建設(shè)的價(jià)值:
數(shù)據(jù)平臺(tái)建成后,可將源系統(tǒng)中多業(yè)務(wù)、多角度、多格式的符合條件的所有業(yè)務(wù)數(shù)據(jù),按統(tǒng)一標(biāo)準(zhǔn)進(jìn)行整合,保存各類業(yè)務(wù)對(duì)象,最終形成全行全面的、一致的、統(tǒng)一的標(biāo)準(zhǔn)化數(shù)據(jù)視圖。下游系統(tǒng)只需通過(guò)數(shù)據(jù)平臺(tái),即可實(shí)現(xiàn)對(duì)所有業(yè)務(wù)數(shù)據(jù)的訪問(wèn),并可對(duì)數(shù)據(jù)進(jìn)行不同時(shí)期、不同角度的對(duì)比、分析和預(yù)測(cè)。在對(duì)外監(jiān)管方面能夠打破業(yè)務(wù)種類、部門之間的界限,提供口徑一致,信息一致的監(jiān)管報(bào)表;在對(duì)內(nèi)管理方面,能夠提供完整、統(tǒng)一的數(shù)據(jù)資源,滿足經(jīng)營(yíng)管理和客戶服務(wù)的需要。
同時(shí),數(shù)據(jù)平臺(tái)還將作為下游系統(tǒng)的唯一數(shù)據(jù)來(lái)源,為下游系統(tǒng)提供了穩(wěn)定可靠的數(shù)據(jù)基礎(chǔ)。當(dāng)源系統(tǒng)隨業(yè)務(wù)而變化時(shí),整合層抗源變化的特性確保整合層模型在大多數(shù)據(jù)情況下無(wú)需變化,下游系統(tǒng)通常也無(wú)需變化,或只需微調(diào)報(bào)表樣式或查詢條件,即可適應(yīng)源系統(tǒng)的變化。這樣避免了下游系統(tǒng)隨源系統(tǒng)變化而進(jìn)行頻繁的升級(jí)和調(diào)整,既減少應(yīng)用維護(hù)復(fù)雜性和工作量,節(jié)約開(kāi)發(fā)及維護(hù)成本,也減輕業(yè)務(wù)用戶的系統(tǒng)使用負(fù)擔(dān)。同時(shí),根據(jù)同業(yè)數(shù)據(jù)平臺(tái)的建設(shè)經(jīng)驗(yàn),源系統(tǒng)存在的數(shù)據(jù)質(zhì)量問(wèn)題對(duì)源系統(tǒng)、下游系統(tǒng)的業(yè)務(wù)準(zhǔn)確性將產(chǎn)生不同程度的干擾,影響著數(shù)據(jù)分析的準(zhǔn)確性、一致性。
因此,數(shù)商云在數(shù)據(jù)平臺(tái)建設(shè)過(guò)程中,將對(duì)源系統(tǒng)的數(shù)據(jù)質(zhì)量問(wèn)題進(jìn)行識(shí)別、定位、分析和處理,并將有質(zhì)量問(wèn)題的源數(shù)據(jù),以報(bào)表查詢或者分析報(bào)告的形式反饋至源系統(tǒng),使其能準(zhǔn)確識(shí)別和定位數(shù)據(jù)質(zhì)量問(wèn)題,并能從源頭上解決數(shù)據(jù)質(zhì)量問(wèn)題,從而改進(jìn)和提升源系統(tǒng)的數(shù)據(jù)質(zhì)量。源系統(tǒng)數(shù)據(jù)質(zhì)量的改進(jìn)和提升,又可進(jìn)一步保障數(shù)據(jù)平臺(tái)的數(shù)據(jù)質(zhì)量。通過(guò)如此迭代,最終使源系統(tǒng)、數(shù)據(jù)平臺(tái)都形成統(tǒng)一的、高質(zhì)量的數(shù)據(jù),從而進(jìn)一步保障業(yè)務(wù)數(shù)據(jù)應(yīng)用的準(zhǔn)確性和一致性。
<本文由數(shù)商云•云朵匠原創(chuàng),商業(yè)轉(zhuǎn)載請(qǐng)聯(lián)系作者獲得授權(quán),非商業(yè)轉(zhuǎn)載請(qǐng)標(biāo)明:數(shù)商云原創(chuàng)>
作者:云朵匠 | 數(shù)商云(微信ID:shushangyun_com)
【數(shù)商云www.zhimaihui.cn】專注為企業(yè)提供電商大數(shù)據(jù)商城網(wǎng)站建設(shè)服務(wù),長(zhǎng)期為大中型企業(yè)打造數(shù)據(jù)化、商業(yè)化、智能化的大數(shù)據(jù)解決方案,為傳統(tǒng)企業(yè)搭建一站式大數(shù)據(jù)自動(dòng)化營(yíng)銷平臺(tái)閉環(huán)體系,實(shí)現(xiàn)商城系統(tǒng)大數(shù)據(jù)互通、全鏈融合,綜合提升平臺(tái)運(yùn)營(yíng)效率與平臺(tái)收益。
評(píng)論