亚洲综合伊人,成人欧美一区二区三区视频不卡,欧美日韩在线高清,日韩国产午夜一区二区三区,大胆美女艺术,一级毛片毛片**毛片毛片,你瞅啥图片

首頁 > 專題 > 文思海輝-乘數(shù)據(jù)之舟-達(dá)價值彼岸 > 數(shù)據(jù)建設(shè)之道--企業(yè)級基礎(chǔ)數(shù)據(jù)平臺(西安站)

數(shù)據(jù)建設(shè)之道--企業(yè)級基礎(chǔ)數(shù)據(jù)平臺(西安站)
2014-11-28 11:38:53   評論:0 點(diǎn)擊:

  隨著中國金融市場的快速發(fā)展,互聯(lián)網(wǎng)金融對傳統(tǒng)金融行業(yè)的競爭,以及監(jiān)管力度的不斷加強(qiáng),IT咨詢服務(wù)公司對金融企業(yè)的商業(yè)智能方案也面臨不斷創(chuàng)新。如何提升金融機(jī)構(gòu)在管理、盈利、風(fēng)險控等多方位的能力?如何將國際經(jīng)驗(yàn)更好的為中國市場服務(wù)?如何通過解決方案將海量數(shù)據(jù)轉(zhuǎn)化為對經(jīng)營決策有價值的信息之路?如何將客戶智能分析成果行之有效地運(yùn)用于服務(wù)渠道,并最終轉(zhuǎn)換為銷售業(yè)績?為解決中國金融機(jī)構(gòu)在發(fā)展中所面臨的新問題,文思海輝在西安、蘇州、北京、成都、深圳五地舉辦了6場“乘數(shù)據(jù)之舟,達(dá)價值彼岸”系列活動。

  在主題為“乘數(shù)據(jù)之舟,達(dá)價值彼岸”的文思海輝商業(yè)智能解決方案系列研討會西安站現(xiàn)場,文思海輝商業(yè)智能事業(yè)部總監(jiān)杜嘯爭做了“數(shù)據(jù)建設(shè)之道--企業(yè)級基礎(chǔ)數(shù)據(jù)平臺”主題演講。



文思海輝商業(yè)智能事業(yè)部總監(jiān) 杜嘯爭

  以下為演講實(shí)錄:

  大家好,我叫杜嘯爭我在文思海輝是負(fù)責(zé)華北的股份制銀行和城商行這一塊的交付總監(jiān),今天很高興有這個機(jī)會代表文思海輝商業(yè)智能事業(yè)部將我們之前對于數(shù)據(jù)平臺這一塊的經(jīng)驗(yàn)或者說想法跟大家做分享。這個題目其實(shí)是很大的題目,在大數(shù)據(jù)時代整個企業(yè)及平臺很大,在這樣一個情況下我們今天更想看的是之前各大行已經(jīng)做過什么,之后對于城商行來講我們能夠借鑒的是什么,在講這個之前,我們首先看一下國內(nèi)的數(shù)據(jù)平臺整個的建設(shè)歷程。我們把國內(nèi)數(shù)據(jù)平臺從大的方面分成兩塊,上面是整個平臺的建設(shè),下面是整個管控的建設(shè),文思海輝是整個國內(nèi)業(yè)內(nèi)最早從事平臺建設(shè)的企業(yè),1999年上交所也是我們當(dāng)時做的主要業(yè)務(wù)之一。之后,銀行業(yè)間進(jìn)行探討,第一階段更多叫摸索和基礎(chǔ)建設(shè)階段,為什么這樣講?因?yàn)閿?shù)據(jù)倉庫當(dāng)時在國外是非常成熟的體系,但是引到國內(nèi)之后,不管從架構(gòu)體系還是數(shù)據(jù)模型上來說,對于國內(nèi)的銀行來講有很多不適應(yīng)的地方,這在第一個階段,也就是很多銀行包括民生、光大、工商、建行都進(jìn)行了大量的摸索,在這樣一個摸索階段形成了國內(nèi)數(shù)據(jù)倉庫的建設(shè)方法,在第一階段我們也可以看到應(yīng)用相對來說很有限,重要做的更多是客戶單一視圖以及一些簡單報表的應(yīng)用,這一部分主要是幾家股份制銀行和大行做試點(diǎn)。

  經(jīng)過這樣一些實(shí)驗(yàn)之后,對于數(shù)據(jù)倉庫的方法和摸索來講,相對來說形成了一些成型的建設(shè)方法,這就到了第二階段,我們把它總結(jié)為大規(guī)模應(yīng)用建設(shè)和管控階段,在這個階段它有一些明顯的特點(diǎn),第一個特點(diǎn)是隨著基礎(chǔ)建設(shè)的完成,到底數(shù)據(jù)平臺能發(fā)揮哪些價值,能夠幫助業(yè)務(wù)做什么,之前已經(jīng)建了倉庫的銀行,越來越受到業(yè)務(wù)部門的質(zhì)疑和詢問,在這種情況下一方面很多行開始反思在倉庫建設(shè)的原因和目的,另一方面很多行也在大規(guī)模推動應(yīng)用,包含相關(guān)的CRM,風(fēng)險類的簡單應(yīng)用,都在大規(guī)模的推動,這是我們說的第二階段特點(diǎn)。

  另外一個特點(diǎn)水隨著數(shù)據(jù)平臺的建設(shè)數(shù)據(jù)大規(guī)模的入倉,我們可以看到經(jīng)常面臨的問題是數(shù)據(jù)質(zhì)量的問題,其實(shí)數(shù)據(jù)倉庫另外一個說法是“進(jìn)垃圾處理垃圾”,你的數(shù)據(jù)質(zhì)量如果不好的話,造成的結(jié)果是你對業(yè)務(wù)的分析不但起不到好的效果,相反還有誤導(dǎo)的作用。所以在2008年各個行逐漸開始探討數(shù)據(jù)管控相關(guān)的內(nèi)容,尤其是數(shù)據(jù)質(zhì)量以及原數(shù)據(jù)相關(guān)的內(nèi)容,這是我們說的第二個階段,第三個階段我們可以歸納成風(fēng)險和大數(shù)據(jù)時代的數(shù)據(jù)平臺建設(shè),這一階段特征比較明顯,隨著新巴塞爾協(xié)議,要求各個行逐漸達(dá)標(biāo)的情況下,各個行對于數(shù)據(jù)的需求,尤其是歷史類的整合類的數(shù)據(jù)需求,要求越來越嚴(yán)格,甚至對五年七年的數(shù)據(jù)整合都有要求,這就要求各個行對于倉庫本身的建設(shè)更加重視,同時基于倉庫風(fēng)險數(shù)據(jù)集市建設(shè)也越來越多。這是第三階段的第一個特點(diǎn)。

  第二個特點(diǎn)是隨著銀行傳統(tǒng)平臺類的建設(shè),互聯(lián)網(wǎng)對銀行的沖擊越來越大,不管是淘寶還是阿里,他們其實(shí)也做了很多之前類似銀行這樣的業(yè)務(wù),而這樣的類似業(yè)務(wù)對銀行來說,有沖擊很大,銀行也在問,我能不能用他的技術(shù),能不能也學(xué)他那樣做我們的業(yè)務(wù)。

  我們看整個的發(fā)展階段,其實(shí)可以看到整個經(jīng)歷的從摸索到應(yīng)用實(shí)踐到大規(guī)模推廣階段,這是我們說的國內(nèi)大行的數(shù)據(jù)平臺整合建設(shè)過程,我們我看國內(nèi)的大行數(shù)據(jù)平臺建設(shè),對于我們城商行來講有什么借鑒意義?我們說數(shù)據(jù)平臺越早建設(shè),應(yīng)用收益越大,其實(shí)這個大家都知道,但是真正做到的并不多,我們可以看隨著現(xiàn)在風(fēng)險類的應(yīng)用,很多要求數(shù)據(jù)是五年七年,如果說你的平臺越早建設(shè),這樣的數(shù)據(jù)要求越高,這樣的數(shù)據(jù)要求你對那個數(shù)據(jù)的追加難度越大,這是第一。第二我們說數(shù)據(jù)平臺和管控結(jié)合的內(nèi)容,我們可以講在整個平臺建設(shè)過程中,初期的時候大行只重視了平臺建設(shè),只重視了數(shù)據(jù)如何存儲,如何調(diào)度,如何監(jiān)控,但是對于數(shù)據(jù)質(zhì)量初期重視并不是很高,但是隨著數(shù)據(jù)越來越多之后,大家慢慢發(fā)現(xiàn)在數(shù)據(jù)質(zhì)量問題越來越明顯,這個回過頭來又做調(diào)整,如果對于我們城商行來講,我們已經(jīng)看到了調(diào)整過程,我們做的過程中完全沒必要走他們的彎路,我們在初期建設(shè)數(shù)據(jù)平臺的時候,就搭著管控一塊兒做,這樣不管對數(shù)據(jù)質(zhì)量,還是對以后支持應(yīng)用來講,都有很大的作用,這是第二個借鑒點(diǎn)。

  第三個借鑒點(diǎn),不能為了建平臺而建平臺,一定要和應(yīng)用結(jié)合,這句話我們也是看了大量的案例,我們現(xiàn)在看國內(nèi)的平臺里頭其實(shí)有兩家我們比較推崇,一家是工行,一家是民生,工行在數(shù)據(jù)平臺建設(shè)之后,大規(guī)模的推它的應(yīng)用,尤其是查詢這一塊,最后工行這個業(yè)務(wù)支持力度很大,而民生從2003年開始做平臺,一直到2013年新核心改造之前,民生的整個平臺上搭了2600個應(yīng)用,而這些應(yīng)用我們可以看整個過程中行里對倉庫的認(rèn)可度非常高,我們說倉庫的真正存活或者真正發(fā)揮價值的原始驅(qū)動力一定是業(yè)務(wù)部門的使用,所以我們在做整個數(shù)據(jù)平臺的時候,特別是初期的時候,一定要考慮應(yīng)用,不能單純是技術(shù),不能為了建平臺而建平臺,這是第三個可以借鑒的點(diǎn)。

  第四個點(diǎn),隨著應(yīng)用的要求越來越高,平臺的整合性越來越強(qiáng),這樣的整合性其實(shí)也要求我們城商行在建這樣的數(shù)據(jù)平臺時,在初期的時候,對于數(shù)據(jù)整合一定也要考慮這方面的因素,一定要注意我們說的實(shí)體記錄相關(guān)客戶整合等等方面的內(nèi)容,這樣對于后面我們支持風(fēng)險類的應(yīng)用有很大的作用。

  我們看一下城商行自己也有很多特點(diǎn),我們這個團(tuán)隊(duì)做倉庫做了十多年,我們之前做城商行并不是很多,我們2010年是第一家城商行北京銀行是最大的,但我們陸續(xù)后面幾年發(fā)展很快,目前已經(jīng)做了幾十家城商行的數(shù)據(jù)平臺建設(shè)。我們在這個過程中,我們也走過一些曲折的路,因?yàn)樽铋_始的時候,大行里頭做倉庫,投入很大,不管人還是硬件軟件都投入很大,在投入的過程中,如果把這樣的模式復(fù)制到城商行來講可能是致命的,不管是科技部門還是業(yè)務(wù)部門,都根本無法承擔(dān)這樣一個投資。

  我們可以看城商行里頭有幾個特點(diǎn),第一個是投資小,見效快,我們在城商行的整個架構(gòu)模式中一定要考慮在盡可能滿足他需求的情況下,投資盡量的小,而且一定要有相應(yīng)的應(yīng)用搭著做,能夠快速的起到效果,這是第一個,第二個城商行之前對于應(yīng)用這一塊,很多也是監(jiān)管報送的需求,對于這樣的需求,以前都是分層級,或者分系統(tǒng)單獨(dú)建設(shè),但是隨著現(xiàn)在銀監(jiān)會人民銀行需求進(jìn)一步細(xì)化,特別去年我們報送提出要求各個行報相應(yīng)的明晰數(shù)據(jù),這樣的明晰數(shù)據(jù)需要和匯總數(shù)據(jù)核對,這要求我們不管從數(shù)據(jù)整合都提出了更高的要求,這也是經(jīng)常各個城商行建平臺的驅(qū)動力。

  第三個特點(diǎn)數(shù)據(jù)質(zhì)量差,這塊可能不太好聽,但實(shí)際情況我們之前做過大行之后,回過頭來做城商行,我們同來沒有想象到會遇到那么多數(shù)據(jù)質(zhì)量,而這直接影響到業(yè)務(wù)使用,試想一下出了一張報表,報表里頭有50%的字段是沒有數(shù)的,或者它的數(shù)是錯的,這個業(yè)務(wù)根本就沒有辦法確診出這樣一個情況,所以我們說這個數(shù)據(jù)質(zhì)量差,也是城商行的特點(diǎn),這就要求我們在建數(shù)據(jù)平臺時,一定要考慮相應(yīng)的質(zhì)量檢查規(guī)則,考慮后續(xù)的調(diào)整測試,能夠盡量的貼近業(yè)務(wù)的使用。

  最后一個總體架構(gòu)考慮不周的,之前我們碰到幾家城商行做交流,大家經(jīng)常提的問題是能不能三個月給我把倉庫上線,先不要考慮那么大的架構(gòu),先應(yīng)用來做,這一塊必須要強(qiáng)調(diào),總體架構(gòu)真的非常重要,因?yàn)閷τ谝粋BI類的項(xiàng)目,從開始到結(jié)束周期,或者見效可能需要三到五年時間,基礎(chǔ)平臺的搭建需要一到兩年的時間,在這樣的情況下,如果開始架構(gòu)考慮不是很清楚,如果開始沒有想好未來三到五年架構(gòu)里頭的原則,可能越做越迷盲,甚至做到一定程度你可能會反思我為什么做倉庫,所以在后續(xù)整個城商行平臺建設(shè)的時候,我們對于總體架構(gòu)的考慮一定要在一期提出明確的架構(gòu)規(guī)劃,這是城商行的特點(diǎn)。

  我們看倉庫的驅(qū)動力,我們無非從監(jiān)管系統(tǒng)要求,內(nèi)部分析要求系統(tǒng)建設(shè)要求,其中特別是對于監(jiān)管系統(tǒng)要求,我們可以看在銀監(jiān)會發(fā)布的新資本協(xié)議管理辦法里頭,其實(shí)提了明確的需求,就是建立數(shù)據(jù)倉庫,來達(dá)到數(shù)據(jù)的轉(zhuǎn)換清晰目的,在這個基礎(chǔ)上建立數(shù)據(jù)集市,此外央行也提出了統(tǒng)一數(shù)據(jù)集中的要求,可以說這個數(shù)據(jù)倉庫的建設(shè)不管內(nèi)外來講,都需要我們盡快去實(shí)施的項(xiàng)目,我們剛才提到了規(guī)劃的重要性,我們可以看一下,這是我們之前做的初步的規(guī)劃,我們對于一個平臺來講需要三到五年,一定要規(guī)劃清楚階段,我們一般分成這么幾個階段,一定是對于平臺的策略,這個平臺策略以及整個規(guī)劃方式包含了軟件硬件EIT工具調(diào)度工具,這個都是在這個平臺之前應(yīng)該做的。

  在正式選定的基礎(chǔ)上,把整個平臺建設(shè)可以分為三個階段,第一階段我們叫做基礎(chǔ)建設(shè)階段,這個階段重點(diǎn)是搭架子支持一個重點(diǎn)應(yīng)用,大家也可以看到,我們在規(guī)劃整個架構(gòu)的時候,我們都是把它分了三塊,平臺建設(shè),管控和應(yīng)用,這個其實(shí)也是剛才我們看到的目前之前各個大行走過的一些彎路,讓我們得到的借鑒,我們希望在整個規(guī)劃過程中,我們既能考慮到平臺建設(shè)的完整性,又能考慮到整個數(shù)據(jù)管控和應(yīng)用。

  第二階段需要逐漸發(fā)揮它更大的業(yè)務(wù)價值,包含需要支持更多應(yīng)用,風(fēng)險應(yīng)用,在管控層面,數(shù)據(jù)分析可以做。

  第三階段是全面推廣階段,在這個階段我們在這一塊做的內(nèi)容,其實(shí)是在各個平臺都已經(jīng)相對完善的情況下,我們這時候需要把我們的數(shù)據(jù)推給業(yè)務(wù)用戶,我們希望我們的業(yè)務(wù)用戶能夠從傳統(tǒng)推送的方式到拉動的轉(zhuǎn)換。

  結(jié)合這三個階段,對于城商行來講,我們希望能夠做到長期規(guī)劃,但是同時小步快跑,逐步見效,我們不要一下子有一個大而全的,我們更多希望每做一步踏踏實(shí)實(shí)的發(fā)揮它的價值。其實(shí)剛才說的三期,我們重點(diǎn)看一期有哪些內(nèi)容,我們總結(jié)下來分成這四分析內(nèi)容。第一是數(shù)據(jù)平臺建設(shè),這是最基礎(chǔ)的,它包含了統(tǒng)一的存儲結(jié)構(gòu),統(tǒng)一的角度結(jié)構(gòu),統(tǒng)一的監(jiān)控結(jié)構(gòu),數(shù)據(jù)交換結(jié)構(gòu),我們都會在這個基礎(chǔ)平臺建設(shè)里頭,我們可以講搭建基礎(chǔ)平臺是根本,因?yàn)橹挥杏辛诉@個平臺,我們才能談得上用處和后續(xù)的應(yīng)用,這是第一塊。第二塊我們說的重點(diǎn)內(nèi)容是模型建設(shè),其實(shí)大家應(yīng)該之前聽過倉庫方面的交流,我們對于數(shù)據(jù)架構(gòu)有完整的架構(gòu),我們認(rèn)為在數(shù)據(jù)架構(gòu)里面最重要是兩塊,整合層和匯總層,這就是我們在數(shù)據(jù)模型的建設(shè),其實(shí)對于之前大行的做法,最早是拿國外的模型產(chǎn)品對大行進(jìn)行客戶化,其實(shí)對于城商行來講,我們的方式跟它類似,只不過我們參考模型不是國外的,而是之前大行的,但是有一個問題,之前大行做的時候,是根據(jù)它的業(yè)務(wù)特點(diǎn),比如整合層有一些更加徹底,但是對于城商行來講在投資有限,時間要求比較緊的情況下,并不一定這樣的模型建設(shè)一定要嚴(yán)格按照大行的模式,我們需要在我們存儲效率和訪問效率之間做一個權(quán)衡,我們希望能夠在成本和效率之間做權(quán)衡,這個就是我們模型要做的工作,我們面向應(yīng)用的模型設(shè)立的權(quán)衡點(diǎn)是我們后續(xù)應(yīng)用擴(kuò)展的基礎(chǔ),這是第二塊。

  第三塊是應(yīng)用類,應(yīng)用類一般建議監(jiān)管報送,因?yàn)檫@樣的報送應(yīng)用具有強(qiáng)制性,后續(xù)在業(yè)務(wù)使用上更好推進(jìn),最后一塊是管控建設(shè)內(nèi)容,大行數(shù)據(jù)管控建設(shè)其實(shí)很多時候單獨(dú)成立項(xiàng)目,對于城商行來講,我們不是很建議,對城商行來講更希望能夠借鑒其它行的管控經(jīng)驗(yàn),直接在我們的項(xiàng)目實(shí)施過程中進(jìn)行相關(guān)落地,這個后面具體講。

  前面講到了整個平臺規(guī)劃,第一期的內(nèi)容,對于平臺的實(shí)施,其實(shí)這一塊我們認(rèn)為這個團(tuán)隊(duì)在方法論上非常成熟,我們把整個數(shù)據(jù)倉庫平臺實(shí)施,可以歸結(jié)為二四論理論,什么叫二四論呢?解釋一席,重點(diǎn)是四種架構(gòu)分析,我們要做好這個平臺,要對系統(tǒng)架構(gòu)、數(shù)據(jù)架構(gòu)、物理架構(gòu)、運(yùn)維架構(gòu)一定要在初期有一個清晰的定義。

  第二是兩層的模型重點(diǎn),一個是基礎(chǔ)層模型,一個是匯總層模型,尤其是匯總層模型它是更貼近業(yè)務(wù)使用的,我們在設(shè)計過程中一定要借鑒一些已有的經(jīng)驗(yàn)進(jìn)行相關(guān)復(fù)制和擴(kuò)展。

  此外說實(shí)施的關(guān)鍵點(diǎn),整個倉庫實(shí)施過程中有兩點(diǎn)比較重要,第一如何把模型內(nèi)容落地成腳本內(nèi)容,在以前的方式下這兩種經(jīng)常是脫節(jié)的,模型人員做模型,EQ人員做EQ,實(shí)際在現(xiàn)在情況下,我們更多是通過自動化工具,將整個模型完善落到腳本上,這個就是由自動化工業(yè)可以做。另外一個實(shí)施關(guān)鍵是數(shù)據(jù)標(biāo)準(zhǔn)的落地,我們剛才提到數(shù)據(jù)管控在城商行做的時候,不做大而全,做小而精,對于標(biāo)準(zhǔn)落地在一期時,一般建議是客戶整合落地,機(jī)構(gòu)的落地以及指標(biāo)落地,有些落地其實(shí)對對于城商行初期應(yīng)用來講,就已經(jīng)做的非常好。這一點(diǎn)也不太容易,后面會講到。

  另外六個基礎(chǔ)模塊,這個就偏技術(shù)一點(diǎn),包括ETL、交換的,調(diào)度的,數(shù)據(jù)安全和管控等等,此外是管控策略和方法問題,我如何管理我的需求,如何能夠在每一步有什么樣的輸出,這個都是整個過程中會涉及的,其實(shí)我們看整個過程已經(jīng)涉及了整個倉庫設(shè)計方法中所有一切關(guān)鍵點(diǎn)。

  我們接下來看整個設(shè)計過程中關(guān)鍵的內(nèi)容,第一我們一直強(qiáng)調(diào)架構(gòu)重要、規(guī)劃很重要,我們看一下一個企業(yè)基礎(chǔ)平臺的架構(gòu)到底是什么,合理的架構(gòu)是什么樣。講這個之前先講原則,我們在以前行業(yè)做的時候,很少講這個,為什么現(xiàn)在講的越來越多?我們現(xiàn)在看的不管在城商行還是股份制銀行,經(jīng)常做了一段時間之后,大家會反問一些問題,我的數(shù)據(jù)集市和平臺的關(guān)系,數(shù)據(jù)集市存儲力度是怎樣的,我的應(yīng)用和平臺里頭切分是什么,其實(shí)這個都是架構(gòu)應(yīng)該解決的問題,所以我們經(jīng)過這么多項(xiàng)目的總結(jié),包括我們之前在中信做新一代的企業(yè)數(shù)據(jù)平臺架構(gòu)咨詢規(guī)劃時,我們進(jìn)行了細(xì)致的梳理。

  我們認(rèn)為在整個整理架構(gòu)里頭,一定要考慮六個原則,第一我們說的數(shù)據(jù)集中和共享原則,我們做的企業(yè)及基礎(chǔ)數(shù)據(jù)平臺,它是公共的,是中性的,它的數(shù)據(jù)一定要做到集中和共享,否則就失去了它的意義。第二數(shù)據(jù)標(biāo)準(zhǔn)統(tǒng)一的原則,我們之前的時候各個集市做自己的,每個集市有自己的一套標(biāo)準(zhǔn),到我們基礎(chǔ)數(shù)據(jù)平臺之后,我們在能統(tǒng)一的地方一定要進(jìn)行統(tǒng)一,比如我們的機(jī)構(gòu)這個要求一定要統(tǒng)一的,我們盡量的少開這樣的口子給特殊的應(yīng)用做一套特殊的東西,因?yàn)檫@種口子一旦開了之后,你的架構(gòu)會越來越亂。第三塊數(shù)據(jù)管理策略統(tǒng)一原則。我們說的數(shù)據(jù)管理策略包含出局存儲周期,存放策略,比如我們偏應(yīng)用的特性的數(shù)據(jù)如何存放,共性的數(shù)據(jù)如何存放,這個原則其實(shí)我們一定要明確,我們大的方向是共性的數(shù)據(jù)一定要下沉,個性的數(shù)據(jù)逐漸上浮,也就是說共性數(shù)據(jù)都盡量落在基礎(chǔ)數(shù)據(jù)平臺上,個性數(shù)據(jù)可以逐漸落在各個集市上處理,此外還有減少數(shù)據(jù)復(fù)制的原則,這個很明顯,還有充分有限資源,這一塊比較重要的經(jīng)常我們做一些平臺時,大家都問,我們現(xiàn)在怎么辦,大家經(jīng)常觀點(diǎn)是推導(dǎo)重來,其實(shí)我們不是很建議這種方式,我們的原則是盡量利用現(xiàn)有的,現(xiàn)有的內(nèi)容盡量的吸取把它集中到我們平臺去,讓它發(fā)揮價值。

  此外就是長期和短期相結(jié)合的原則,在這樣的原則下,我們看一看一個完整的企業(yè)級基礎(chǔ)數(shù)據(jù)平臺是什么樣,這個圖看起來很復(fù)雜,我們分解一下,分了幾個部分,第一個部分叫數(shù)據(jù)存儲平臺,這一部分主要解決的是數(shù)據(jù)的存儲問題,它包含了相應(yīng)的數(shù)據(jù)架構(gòu),數(shù)據(jù)存儲策略以及應(yīng)用切分點(diǎn),這是第一塊,第二塊是應(yīng)用,這實(shí)際是在平臺上的應(yīng)用,大家都知道我們在倉庫上的應(yīng)用分了幾種模式,我們的報表,數(shù)據(jù)挖掘,系統(tǒng)應(yīng)用,這一塊應(yīng)用是基于整個平臺建設(shè)的內(nèi)容,這是第二塊內(nèi)容。第三塊是數(shù)據(jù)管控,我們的數(shù)據(jù)倉庫質(zhì)量管理辦法,比如數(shù)據(jù)標(biāo)準(zhǔn)等等,第四塊是數(shù)據(jù)交換采集調(diào)度平臺,這四塊其實(shí)是我們傳統(tǒng)情況下的數(shù)據(jù)平臺的點(diǎn)評架構(gòu),經(jīng)過我們這兩年進(jìn)一步的完善,特別是隨著我們對數(shù)據(jù)的需求,我們現(xiàn)在又?jǐn)U展了一塊,這塊包含了實(shí)施數(shù)據(jù)區(qū)、大數(shù)據(jù)處理去,歷史數(shù)據(jù)存儲區(qū),在這個架構(gòu)下,我們經(jīng)常叫混合架構(gòu),因?yàn)樗瓤紤]了傳統(tǒng)的結(jié)構(gòu)性數(shù)據(jù)的處理方法,也考慮了非結(jié)構(gòu)化數(shù)據(jù)處理方法。

  對于我們城商行來講,并不是一上來把所有內(nèi)容全實(shí)施完,但是我們需要強(qiáng)調(diào)的是在開始時,一定要有這么一張圖,能夠清晰的看到我們后續(xù)要發(fā)展成什么樣,我們不一定開始就去建設(shè)這樣一個實(shí)施數(shù)據(jù)區(qū)或者大數(shù)據(jù)處理區(qū),但是我們相應(yīng)的數(shù)據(jù)項(xiàng)目考慮,包括以后擴(kuò)展接口,在架構(gòu)里一定要考慮到。

  接下來談一下管控和數(shù)據(jù)平臺的關(guān)系,我們剛才講到對于城商行來講,在建設(shè)數(shù)據(jù)平臺時,千萬不要鼓勵建平臺,一定要和管控結(jié)合,我們提到數(shù)據(jù)管控,比如數(shù)據(jù)質(zhì)量,數(shù)據(jù)標(biāo)準(zhǔn)內(nèi)容,從我們這么多年的經(jīng)驗(yàn),我們認(rèn)為在城商行初級實(shí)施時,更容易落地的是數(shù)據(jù)標(biāo)準(zhǔn)和數(shù)據(jù)質(zhì)量的內(nèi)容。首先看數(shù)據(jù)標(biāo)準(zhǔn),數(shù)據(jù)標(biāo)準(zhǔn)的落地大家都知道,我們整個數(shù)據(jù)從業(yè)務(wù)系統(tǒng)產(chǎn)生到后臺分析系統(tǒng),標(biāo)準(zhǔn)最好的地方一定是源頭落地,對于后續(xù)整個數(shù)據(jù)問題是最好的解決,但是同時大家也知道,這是最難的,你要在整個業(yè)務(wù)系統(tǒng)里頭讓它改動做調(diào)整,其實(shí)這個推進(jìn)力度太大了,我們之前早年的時候在廣大改一個性別代碼花了四十多個人員做這件事,其實(shí)重點(diǎn)都是溝通協(xié)調(diào)工作,我們看到這樣一個情況后,現(xiàn)在越來越多的模式,把整個數(shù)據(jù)標(biāo)準(zhǔn)落地往后移,這樣推動更容易,當(dāng)然也有它的問題,源頭問題可能仍然沒有解決,但是從管理型應(yīng)用的方向來講,還是解決了很大一部分問題。

  對于數(shù)據(jù)標(biāo)準(zhǔn)來講,對于城商行來講,最容易落地而且最具有應(yīng)用價值的是客戶整合的落地,機(jī)構(gòu)代碼功能代碼的落地以及指標(biāo)體系的落地,這幾個都可以作為我們在城商行推時數(shù)據(jù)標(biāo)準(zhǔn)的落地點(diǎn)。這是我們說的標(biāo)準(zhǔn),我們有了標(biāo)準(zhǔn)才有數(shù)據(jù)質(zhì)量,因?yàn)闆]有標(biāo)準(zhǔn)談不上質(zhì)量,質(zhì)量無非是數(shù)據(jù)滿足業(yè)務(wù)需求使用的程度,我們有了這樣的標(biāo)準(zhǔn)之后,我們能夠用這樣的標(biāo)準(zhǔn)衡量數(shù)據(jù)怎樣,這樣不管從技術(shù)上的校驗(yàn)還是業(yè)務(wù)上的校驗(yàn),在整個平臺每一層可以做校驗(yàn)規(guī)則,在數(shù)據(jù)平臺里把數(shù)據(jù)質(zhì)量規(guī)則做到自動化的配置和相應(yīng)的校驗(yàn),生成報告來幫助我們解決問題。這是我們說的數(shù)據(jù)管控和平臺的關(guān)系。

  再看一下應(yīng)用,我們說有了平臺之后,我們最終的目的一定是支持業(yè)務(wù)應(yīng)用,業(yè)務(wù)應(yīng)用是平臺最大的生命力,經(jīng)過這么多年的積累之后,其實(shí)我們可以看,數(shù)據(jù)平臺的整個應(yīng)用,我們會把它分成四個大的模塊,第一個是營銷和客戶關(guān)系管理模塊,這個簡單講,更多的CRM相關(guān)的一些內(nèi)容,主要是從客戶的獲取管理細(xì)分價值提升等等部分的內(nèi)容,這是第一塊。第二塊是合規(guī)風(fēng)險管理,包含市場風(fēng)險,操作風(fēng)險,監(jiān)管報送體系內(nèi)容都在里頭。第三塊是財務(wù)績效,管理會計,F(xiàn)TP等等內(nèi)容都在這里,還有一塊是運(yùn)營管理,這樣一個平臺里最終希望支持的應(yīng)用包括四大塊內(nèi)容。

  但是現(xiàn)在很多行,包括已經(jīng)建了倉庫的銀行,比如廣大、民生,工行,其實(shí)很多應(yīng)用在之前倉庫上建了,但是現(xiàn)在很多系統(tǒng)都在重構(gòu),重構(gòu)的原因是什么,是因?yàn)樵谝恍┑胤阶龅倪不夠完善,如果后續(xù)做這樣應(yīng)用時,我們希望在我們點(diǎn)上更加注意,第一我們更加關(guān)注數(shù)據(jù)整合,之前看到很多大行做時,做著做著數(shù)據(jù)最后又分散,隨著數(shù)據(jù)的分散,后續(xù)的維護(hù)包括數(shù)據(jù)標(biāo)準(zhǔn)的統(tǒng)一會越來越困難,所以我們說關(guān)注數(shù)據(jù)的整合,實(shí)際在后期應(yīng)用里一定要特別注意。第二數(shù)據(jù)質(zhì)量的有效提升,有這么多應(yīng)用,應(yīng)用里一定要特別重視數(shù)據(jù)質(zhì)量,一旦發(fā)現(xiàn)數(shù)據(jù)質(zhì)量問題,特別是影響到業(yè)務(wù)使用時,一定要第一時間跟業(yè)務(wù)部門溝通做相關(guān)的解決辦法,這個是讓業(yè)務(wù)人員能夠持續(xù)性的倉庫,讓倉庫發(fā)揮價值的很重要一步。

  第三第四都是應(yīng)用之間的關(guān)聯(lián)關(guān)系,也就是說我們在建設(shè)應(yīng)用時,要考慮應(yīng)用之間的關(guān)系,比如說你要做產(chǎn)品定價,你要算產(chǎn)品的貢獻(xiàn)度,你要知道它的管理會計,F(xiàn)TP,這些應(yīng)用之間的關(guān)系,在初期一定要有清晰的梳理,否則一開始什么都沒有,就要算貢獻(xiàn)度,可能你的成本是沒有的,你的內(nèi)部專機(jī)價是沒有的,最后算出來的數(shù)只能是相對數(shù),這樣的數(shù)其實(shí)就業(yè)務(wù)來講意義并不是很大。應(yīng)用層面對于我們來講,希望在這幾點(diǎn)進(jìn)行有效的關(guān)注。

  從應(yīng)用模式上來講,我們有報表,應(yīng)用系統(tǒng),靈活查詢數(shù)據(jù)挖掘,這個實(shí)際是傳統(tǒng)的數(shù)據(jù)倉庫使用的四種模式,這個可能講了至少有五六年以上的時間。我們今天想說的是這四種模式,其實(shí)后續(xù)還仍然是使用的主要模式,但是我們作為數(shù)據(jù)倉庫后續(xù)主要的責(zé)任方,我們現(xiàn)在做倉庫,一定要把傳統(tǒng)的推式服務(wù)往拉式服務(wù)走,也就是說要把報表和應(yīng)用系統(tǒng)的支持,他數(shù)推給他使用的模式,逐漸的讓業(yè)務(wù)人員能夠主動喜歡用我們的平臺,能夠讓他自己有一個相應(yīng)空間或者模式,能夠主動使用這樣的平臺,有了這樣的模式之后,我們的倉庫價值可能才能發(fā)揮的更好,這個其實(shí)就是我們需要強(qiáng)調(diào)的,我們一定要在任何時候,要注重業(yè)務(wù)人員主動使用數(shù)據(jù)倉庫的模式。

  接下來簡單看一下大數(shù)據(jù)這塊,我們之前跟各行談的也比較多,也很熱,我們可以看各個行現(xiàn)在都在做這一塊的試點(diǎn),唯一能看到落地的廣大做了歷史數(shù)據(jù)查詢系統(tǒng),其它行更多是基于試點(diǎn)模式,對于我們城商行來講應(yīng)該如何應(yīng)對,我們之前銀行最多使用數(shù)據(jù)是結(jié)構(gòu)化數(shù)據(jù),對于非結(jié)構(gòu)化數(shù)據(jù),銀行之前并不是很多,無非是一些影像或者一些文本和語音,這樣的內(nèi)容很多時候我們要發(fā)掘出來花的成本很高,而對于傳統(tǒng)結(jié)構(gòu)性的數(shù)據(jù),我們又有很多沒發(fā)揮出來的地方,所以這些銀行更多關(guān)注是結(jié)構(gòu)化這塊,對于非結(jié)構(gòu)化內(nèi)容的出現(xiàn),應(yīng)該如何對待呢?我們認(rèn)為非結(jié)構(gòu)化數(shù)據(jù),只是拓展了數(shù)據(jù)范圍而已,我們可以把它作為我們結(jié)構(gòu)化數(shù)據(jù)的有效補(bǔ)充,所以當(dāng)面對這樣的大數(shù)據(jù)來臨時,我們先要反思結(jié)構(gòu)化數(shù)據(jù)是不是已經(jīng)用好了,是不是已經(jīng)用結(jié)構(gòu)化數(shù)據(jù)讓業(yè)務(wù)感覺到它的價值,所以對大數(shù)據(jù)這塊,我們理解成數(shù)據(jù)源的補(bǔ)充就可以。

  我們再看一下在大數(shù)據(jù)情況下的架構(gòu)趨勢,剛才講到混合架構(gòu)的模式,我們說這個在往后走,可能就是集團(tuán)制混合架構(gòu)的模式,什么叫集團(tuán)制?除了傳統(tǒng)的銀行業(yè)務(wù)之外,以后還有其它一體化的,非結(jié)構(gòu)化電子渠道互聯(lián)網(wǎng)信息,當(dāng)然這個是我們以后長久來說的發(fā)展模式,我們可以作為參考來講,我們可以講在這樣情況下,第一步搭建企業(yè)級基礎(chǔ)數(shù)據(jù)平臺,處理結(jié)構(gòu)化的數(shù)據(jù),才是我們的重中之重,只要有了這樣的架構(gòu)之后,我們后續(xù)的拓展才能在架構(gòu)上拓展。

  最后就基礎(chǔ)數(shù)據(jù)平臺,我們之前的經(jīng)驗(yàn)包括剛才講的內(nèi)容,做幾點(diǎn)分享。第一不要因?yàn)榇髷?shù)據(jù)擾亂我們建設(shè)的節(jié)奏原則,這個很重要,大家都對外談大數(shù)據(jù),但是一定要清晰認(rèn)識一點(diǎn),它只是一種數(shù)據(jù)模式,只是現(xiàn)在數(shù)據(jù)的補(bǔ)充,而不是把原有的推翻,我們說金融的本質(zhì)沒有改變,我們傳統(tǒng)的銀行業(yè)務(wù)也不會因?yàn)榘⒗锇桶偷某霈F(xiàn)完全顛覆掉,這個我們其實(shí)之前在很多場合還是研討會都可能聽到過,第二基礎(chǔ)平臺現(xiàn)在不是關(guān)注的重點(diǎn),我覺得我們這個團(tuán)隊(duì),是沒有什么問題,因?yàn)閯偛刨Z總也講到,目前凡是涉及到數(shù)據(jù)平臺的我們這個團(tuán)隊(duì)都做過,而且都有相關(guān)的成熟案例,而且對于技術(shù)這一塊比較成熟,不管數(shù)據(jù)庫還是ETL、調(diào)度還是數(shù)據(jù)交換,來回?zé)o非就那一種工具,所以對于這塊的情況,我們認(rèn)為不管選哪平臺還是工具,都不重要,重要的是最后數(shù)據(jù)能不能合理的存放,最后是數(shù)據(jù)能不能合理應(yīng)用。

  第三點(diǎn)原則和架構(gòu)是不變應(yīng)萬變的原則,前面我們已經(jīng)提到,在任何時候都不要放棄我們的原則和架構(gòu),在判斷數(shù)據(jù)是不是應(yīng)該在平臺來提供,是不是應(yīng)該做這樣的應(yīng)用時,都可以拿我們的原則和架構(gòu)做梳理,就能在任何時候讓我們清醒意識到,我現(xiàn)在的位置是什么,我以后往哪個方向發(fā)展,我之前做了什么,其實(shí)這幾點(diǎn)了解之后,我們在任何時候都能夠有信心知道,我們平臺的價值在哪里。

  第四個正確存儲的方法論決定了項(xiàng)目的質(zhì)量,剛才我們提到二四六理論里頭的實(shí)施方法論,對于每一步來講,不管是輸入輸出,還是中間貫穿的內(nèi)容包括模板,這些都有成熟案例,我們希望通過跟城商行一塊兒建數(shù)據(jù)平臺,不只是搭建一個平臺我們希望這套管理辦法,相關(guān)的模板流程能夠同時被城商行使用,建立一套他們對數(shù)據(jù)的管理體系。

  最后一點(diǎn)我們一定要有意識的逐步引導(dǎo)業(yè)務(wù)主動進(jìn)行數(shù)據(jù)分析和探索,在任何時候千萬不要把數(shù)據(jù)平臺定義成儲存,一定要有意識的告訴業(yè)務(wù),我有什么樣的數(shù)據(jù),你能夠發(fā)揮什么樣的業(yè)務(wù)價值,因?yàn)橹挥性谶@樣的情況下,你倉庫的生命力才會越來越強(qiáng),我今天講的內(nèi)容就這些,謝謝大家。

錯誤報告  分享到:
虹口区| 共和县| 仪征市| 怀柔区| 红安县| 大埔县| 阜平县| 长沙市| 天祝| 三门峡市| 密山市| 阿拉善右旗| 河北省| 宜阳县| 且末县| 莱芜市| 丹凤县| 芷江| 界首市| 习水县| 福建省| 景东| 都昌县| 京山县| 通渭县| 石棉县| 利津县| 林周县| 朝阳市| 花莲县| 龙口市| 蓬安县| 甘肃省| 陈巴尔虎旗| 岚皋县| 佛坪县| 宜宾县| 锦屏县| 招远市| 礼泉县| 茂名市|