97成人免费视频,97视频免费公开成人福利,免费视频99,99婷婷,国产伊人久久,亚洲视频欧美,国产精品福利久久

首頁(yè) > 專(zhuān)題 > 文思海輝-乘數據之舟-達價(jià)值彼岸 > 數據建設之道--企業(yè)級基礎數據平臺(西安站)

數據建設之道--企業(yè)級基礎數據平臺(西安站)
2014-11-28 11:38:53   評論:0 點(diǎn)擊:

  隨著(zhù)中國金融市場(chǎng)的快速發(fā)展,互聯(lián)網(wǎng)金融對傳統金融行業(yè)的競爭,以及監管力度的不斷加強,IT咨詢(xún)服務(wù)公司對金融企業(yè)的商業(yè)智能方案也面臨不斷創(chuàng )新。如何提升金融機構在管理、盈利、風(fēng)險控等多方位的能力?如何將國際經(jīng)驗更好的為中國市場(chǎng)服務(wù)?如何通過(guò)解決方案將海量數據轉化為對經(jīng)營(yíng)決策有價(jià)值的信息之路?如何將客戶(hù)智能分析成果行之有效地運用于服務(wù)渠道,并最終轉換為銷(xiāo)售業(yè)績(jì)?為解決中國金融機構在發(fā)展中所面臨的新問(wèn)題,文思海輝在西安、蘇州、北京、成都、深圳五地舉辦了6場(chǎng)“乘數據之舟,達價(jià)值彼岸”系列活動(dòng)。

  在主題為“乘數據之舟,達價(jià)值彼岸”的文思海輝商業(yè)智能解決方案系列研討會(huì )西安站現場(chǎng),文思海輝商業(yè)智能事業(yè)部總監杜嘯爭做了“數據建設之道--企業(yè)級基礎數據平臺”主題演講。



文思海輝商業(yè)智能事業(yè)部總監 杜嘯爭

  以下為演講實(shí)錄:

  大家好,我叫杜嘯爭我在文思海輝是負責華北的股份制銀行和城商行這一塊的交付總監,今天很高興有這個(gè)機會(huì )代表文思海輝商業(yè)智能事業(yè)部將我們之前對于數據平臺這一塊的經(jīng)驗或者說(shuō)想法跟大家做分享。這個(gè)題目其實(shí)是很大的題目,在大數據時(shí)代整個(gè)企業(yè)及平臺很大,在這樣一個(gè)情況下我們今天更想看的是之前各大行已經(jīng)做過(guò)什么,之后對于城商行來(lái)講我們能夠借鑒的是什么,在講這個(gè)之前,我們首先看一下國內的數據平臺整個(gè)的建設歷程。我們把國內數據平臺從大的方面分成兩塊,上面是整個(gè)平臺的建設,下面是整個(gè)管控的建設,文思海輝是整個(gè)國內業(yè)內最早從事平臺建設的企業(yè),1999年上交所也是我們當時(shí)做的主要業(yè)務(wù)之一。之后,銀行業(yè)間進(jìn)行探討,第一階段更多叫摸索和基礎建設階段,為什么這樣講?因為數據倉庫當時(shí)在國外是非常成熟的體系,但是引到國內之后,不管從架構體系還是數據模型上來(lái)說(shuō),對于國內的銀行來(lái)講有很多不適應的地方,這在第一個(gè)階段,也就是很多銀行包括民生、光大、工商、建行都進(jìn)行了大量的摸索,在這樣一個(gè)摸索階段形成了國內數據倉庫的建設方法,在第一階段我們也可以看到應用相對來(lái)說(shuō)很有限,重要做的更多是客戶(hù)單一視圖以及一些簡(jiǎn)單報表的應用,這一部分主要是幾家股份制銀行和大行做試點(diǎn)。

  經(jīng)過(guò)這樣一些實(shí)驗之后,對于數據倉庫的方法和摸索來(lái)講,相對來(lái)說(shuō)形成了一些成型的建設方法,這就到了第二階段,我們把它總結為大規模應用建設和管控階段,在這個(gè)階段它有一些明顯的特點(diǎn),第一個(gè)特點(diǎn)是隨著(zhù)基礎建設的完成,到底數據平臺能發(fā)揮哪些價(jià)值,能夠幫助業(yè)務(wù)做什么,之前已經(jīng)建了倉庫的銀行,越來(lái)越受到業(yè)務(wù)部門(mén)的質(zhì)疑和詢(xún)問(wèn),在這種情況下一方面很多行開(kāi)始反思在倉庫建設的原因和目的,另一方面很多行也在大規模推動(dòng)應用,包含相關(guān)的CRM,風(fēng)險類(lèi)的簡(jiǎn)單應用,都在大規模的推動(dòng),這是我們說(shuō)的第二階段特點(diǎn)。

  另外一個(gè)特點(diǎn)水隨著(zhù)數據平臺的建設數據大規模的入倉,我們可以看到經(jīng)常面臨的問(wèn)題是數據質(zhì)量的問(wèn)題,其實(shí)數據倉庫另外一個(gè)說(shuō)法是“進(jìn)垃圾處理垃圾”,你的數據質(zhì)量如果不好的話(huà),造成的結果是你對業(yè)務(wù)的分析不但起不到好的效果,相反還有誤導的作用。所以在2008年各個(gè)行逐漸開(kāi)始探討數據管控相關(guān)的內容,尤其是數據質(zhì)量以及原數據相關(guān)的內容,這是我們說(shuō)的第二個(gè)階段,第三個(gè)階段我們可以歸納成風(fēng)險和大數據時(shí)代的數據平臺建設,這一階段特征比較明顯,隨著(zhù)新巴塞爾協(xié)議,要求各個(gè)行逐漸達標的情況下,各個(gè)行對于數據的需求,尤其是歷史類(lèi)的整合類(lèi)的數據需求,要求越來(lái)越嚴格,甚至對五年七年的數據整合都有要求,這就要求各個(gè)行對于倉庫本身的建設更加重視,同時(shí)基于倉庫風(fēng)險數據集市建設也越來(lái)越多。這是第三階段的第一個(gè)特點(diǎn)。

  第二個(gè)特點(diǎn)是隨著(zhù)銀行傳統平臺類(lèi)的建設,互聯(lián)網(wǎng)對銀行的沖擊越來(lái)越大,不管是淘寶還是阿里,他們其實(shí)也做了很多之前類(lèi)似銀行這樣的業(yè)務(wù),而這樣的類(lèi)似業(yè)務(wù)對銀行來(lái)說(shuō),有沖擊很大,銀行也在問(wèn),我能不能用他的技術(shù),能不能也學(xué)他那樣做我們的業(yè)務(wù)。

  我們看整個(gè)的發(fā)展階段,其實(shí)可以看到整個(gè)經(jīng)歷的從摸索到應用實(shí)踐到大規模推廣階段,這是我們說(shuō)的國內大行的數據平臺整合建設過(guò)程,我們我看國內的大行數據平臺建設,對于我們城商行來(lái)講有什么借鑒意義?我們說(shuō)數據平臺越早建設,應用收益越大,其實(shí)這個(gè)大家都知道,但是真正做到的并不多,我們可以看隨著(zhù)現在風(fēng)險類(lèi)的應用,很多要求數據是五年七年,如果說(shuō)你的平臺越早建設,這樣的數據要求越高,這樣的數據要求你對那個(gè)數據的追加難度越大,這是第一。第二我們說(shuō)數據平臺和管控結合的內容,我們可以講在整個(gè)平臺建設過(guò)程中,初期的時(shí)候大行只重視了平臺建設,只重視了數據如何存儲,如何調度,如何監控,但是對于數據質(zhì)量初期重視并不是很高,但是隨著(zhù)數據越來(lái)越多之后,大家慢慢發(fā)現在數據質(zhì)量問(wèn)題越來(lái)越明顯,這個(gè)回過(guò)頭來(lái)又做調整,如果對于我們城商行來(lái)講,我們已經(jīng)看到了調整過(guò)程,我們做的過(guò)程中完全沒(méi)必要走他們的彎路,我們在初期建設數據平臺的時(shí)候,就搭著(zhù)管控一塊兒做,這樣不管對數據質(zhì)量,還是對以后支持應用來(lái)講,都有很大的作用,這是第二個(gè)借鑒點(diǎn)。

  第三個(gè)借鑒點(diǎn),不能為了建平臺而建平臺,一定要和應用結合,這句話(huà)我們也是看了大量的案例,我們現在看國內的平臺里頭其實(shí)有兩家我們比較推崇,一家是工行,一家是民生,工行在數據平臺建設之后,大規模的推它的應用,尤其是查詢(xún)這一塊,最后工行這個(gè)業(yè)務(wù)支持力度很大,而民生從2003年開(kāi)始做平臺,一直到2013年新核心改造之前,民生的整個(gè)平臺上搭了2600個(gè)應用,而這些應用我們可以看整個(gè)過(guò)程中行里對倉庫的認可度非常高,我們說(shuō)倉庫的真正存活或者真正發(fā)揮價(jià)值的原始驅動(dòng)力一定是業(yè)務(wù)部門(mén)的使用,所以我們在做整個(gè)數據平臺的時(shí)候,特別是初期的時(shí)候,一定要考慮應用,不能單純是技術(shù),不能為了建平臺而建平臺,這是第三個(gè)可以借鑒的點(diǎn)。

  第四個(gè)點(diǎn),隨著(zhù)應用的要求越來(lái)越高,平臺的整合性越來(lái)越強,這樣的整合性其實(shí)也要求我們城商行在建這樣的數據平臺時(shí),在初期的時(shí)候,對于數據整合一定也要考慮這方面的因素,一定要注意我們說(shuō)的實(shí)體記錄相關(guān)客戶(hù)整合等等方面的內容,這樣對于后面我們支持風(fēng)險類(lèi)的應用有很大的作用。

  我們看一下城商行自己也有很多特點(diǎn),我們這個(gè)團隊做倉庫做了十多年,我們之前做城商行并不是很多,我們2010年是第一家城商行北京銀行是最大的,但我們陸續后面幾年發(fā)展很快,目前已經(jīng)做了幾十家城商行的數據平臺建設。我們在這個(gè)過(guò)程中,我們也走過(guò)一些曲折的路,因為最開(kāi)始的時(shí)候,大行里頭做倉庫,投入很大,不管人還是硬件軟件都投入很大,在投入的過(guò)程中,如果把這樣的模式復制到城商行來(lái)講可能是致命的,不管是科技部門(mén)還是業(yè)務(wù)部門(mén),都根本無(wú)法承擔這樣一個(gè)投資。

  我們可以看城商行里頭有幾個(gè)特點(diǎn),第一個(gè)是投資小,見(jiàn)效快,我們在城商行的整個(gè)架構模式中一定要考慮在盡可能滿(mǎn)足他需求的情況下,投資盡量的小,而且一定要有相應的應用搭著(zhù)做,能夠快速的起到效果,這是第一個(gè),第二個(gè)城商行之前對于應用這一塊,很多也是監管報送的需求,對于這樣的需求,以前都是分層級,或者分系統單獨建設,但是隨著(zhù)現在銀監會(huì )人民銀行需求進(jìn)一步細化,特別去年我們報送提出要求各個(gè)行報相應的明晰數據,這樣的明晰數據需要和匯總數據核對,這要求我們不管從數據整合都提出了更高的要求,這也是經(jīng)常各個(gè)城商行建平臺的驅動(dòng)力。

  第三個(gè)特點(diǎn)數據質(zhì)量差,這塊可能不太好聽(tīng),但實(shí)際情況我們之前做過(guò)大行之后,回過(guò)頭來(lái)做城商行,我們同來(lái)沒(méi)有想象到會(huì )遇到那么多數據質(zhì)量,而這直接影響到業(yè)務(wù)使用,試想一下出了一張報表,報表里頭有50%的字段是沒(méi)有數的,或者它的數是錯的,這個(gè)業(yè)務(wù)根本就沒(méi)有辦法確診出這樣一個(gè)情況,所以我們說(shuō)這個(gè)數據質(zhì)量差,也是城商行的特點(diǎn),這就要求我們在建數據平臺時(shí),一定要考慮相應的質(zhì)量檢查規則,考慮后續的調整測試,能夠盡量的貼近業(yè)務(wù)的使用。

  最后一個(gè)總體架構考慮不周的,之前我們碰到幾家城商行做交流,大家經(jīng)常提的問(wèn)題是能不能三個(gè)月給我把倉庫上線(xiàn),先不要考慮那么大的架構,先應用來(lái)做,這一塊必須要強調,總體架構真的非常重要,因為對于一個(gè)BI類(lèi)的項目,從開(kāi)始到結束周期,或者見(jiàn)效可能需要三到五年時(shí)間,基礎平臺的搭建需要一到兩年的時(shí)間,在這樣的情況下,如果開(kāi)始架構考慮不是很清楚,如果開(kāi)始沒(méi)有想好未來(lái)三到五年架構里頭的原則,可能越做越迷盲,甚至做到一定程度你可能會(huì )反思我為什么做倉庫,所以在后續整個(gè)城商行平臺建設的時(shí)候,我們對于總體架構的考慮一定要在一期提出明確的架構規劃,這是城商行的特點(diǎn)。

  我們看倉庫的驅動(dòng)力,我們無(wú)非從監管系統要求,內部分析要求系統建設要求,其中特別是對于監管系統要求,我們可以看在銀監會(huì )發(fā)布的新資本協(xié)議管理辦法里頭,其實(shí)提了明確的需求,就是建立數據倉庫,來(lái)達到數據的轉換清晰目的,在這個(gè)基礎上建立數據集市,此外央行也提出了統一數據集中的要求,可以說(shuō)這個(gè)數據倉庫的建設不管內外來(lái)講,都需要我們盡快去實(shí)施的項目,我們剛才提到了規劃的重要性,我們可以看一下,這是我們之前做的初步的規劃,我們對于一個(gè)平臺來(lái)講需要三到五年,一定要規劃清楚階段,我們一般分成這么幾個(gè)階段,一定是對于平臺的策略,這個(gè)平臺策略以及整個(gè)規劃方式包含了軟件硬件EIT工具調度工具,這個(gè)都是在這個(gè)平臺之前應該做的。

  在正式選定的基礎上,把整個(gè)平臺建設可以分為三個(gè)階段,第一階段我們叫做基礎建設階段,這個(gè)階段重點(diǎn)是搭架子支持一個(gè)重點(diǎn)應用,大家也可以看到,我們在規劃整個(gè)架構的時(shí)候,我們都是把它分了三塊,平臺建設,管控和應用,這個(gè)其實(shí)也是剛才我們看到的目前之前各個(gè)大行走過(guò)的一些彎路,讓我們得到的借鑒,我們希望在整個(gè)規劃過(guò)程中,我們既能考慮到平臺建設的完整性,又能考慮到整個(gè)數據管控和應用。

  第二階段需要逐漸發(fā)揮它更大的業(yè)務(wù)價(jià)值,包含需要支持更多應用,風(fēng)險應用,在管控層面,數據分析可以做。

  第三階段是全面推廣階段,在這個(gè)階段我們在這一塊做的內容,其實(shí)是在各個(gè)平臺都已經(jīng)相對完善的情況下,我們這時(shí)候需要把我們的數據推給業(yè)務(wù)用戶(hù),我們希望我們的業(yè)務(wù)用戶(hù)能夠從傳統推送的方式到拉動(dòng)的轉換。

  結合這三個(gè)階段,對于城商行來(lái)講,我們希望能夠做到長(cháng)期規劃,但是同時(shí)小步快跑,逐步見(jiàn)效,我們不要一下子有一個(gè)大而全的,我們更多希望每做一步踏踏實(shí)實(shí)的發(fā)揮它的價(jià)值。其實(shí)剛才說(shuō)的三期,我們重點(diǎn)看一期有哪些內容,我們總結下來(lái)分成這四分析內容。第一是數據平臺建設,這是最基礎的,它包含了統一的存儲結構,統一的角度結構,統一的監控結構,數據交換結構,我們都會(huì )在這個(gè)基礎平臺建設里頭,我們可以講搭建基礎平臺是根本,因為只有有了這個(gè)平臺,我們才能談得上用處和后續的應用,這是第一塊。第二塊我們說(shuō)的重點(diǎn)內容是模型建設,其實(shí)大家應該之前聽(tīng)過(guò)倉庫方面的交流,我們對于數據架構有完整的架構,我們認為在數據架構里面最重要是兩塊,整合層和匯總層,這就是我們在數據模型的建設,其實(shí)對于之前大行的做法,最早是拿國外的模型產(chǎn)品對大行進(jìn)行客戶(hù)化,其實(shí)對于城商行來(lái)講,我們的方式跟它類(lèi)似,只不過(guò)我們參考模型不是國外的,而是之前大行的,但是有一個(gè)問(wèn)題,之前大行做的時(shí)候,是根據它的業(yè)務(wù)特點(diǎn),比如整合層有一些更加徹底,但是對于城商行來(lái)講在投資有限,時(shí)間要求比較緊的情況下,并不一定這樣的模型建設一定要嚴格按照大行的模式,我們需要在我們存儲效率和訪(fǎng)問(wèn)效率之間做一個(gè)權衡,我們希望能夠在成本和效率之間做權衡,這個(gè)就是我們模型要做的工作,我們面向應用的模型設立的權衡點(diǎn)是我們后續應用擴展的基礎,這是第二塊。

  第三塊是應用類(lèi),應用類(lèi)一般建議監管報送,因為這樣的報送應用具有強制性,后續在業(yè)務(wù)使用上更好推進(jìn),最后一塊是管控建設內容,大行數據管控建設其實(shí)很多時(shí)候單獨成立項目,對于城商行來(lái)講,我們不是很建議,對城商行來(lái)講更希望能夠借鑒其它行的管控經(jīng)驗,直接在我們的項目實(shí)施過(guò)程中進(jìn)行相關(guān)落地,這個(gè)后面具體講。

  前面講到了整個(gè)平臺規劃,第一期的內容,對于平臺的實(shí)施,其實(shí)這一塊我們認為這個(gè)團隊在方法論上非常成熟,我們把整個(gè)數據倉庫平臺實(shí)施,可以歸結為二四論理論,什么叫二四論呢?解釋一席,重點(diǎn)是四種架構分析,我們要做好這個(gè)平臺,要對系統架構、數據架構、物理架構、運維架構一定要在初期有一個(gè)清晰的定義。

  第二是兩層的模型重點(diǎn),一個(gè)是基礎層模型,一個(gè)是匯總層模型,尤其是匯總層模型它是更貼近業(yè)務(wù)使用的,我們在設計過(guò)程中一定要借鑒一些已有的經(jīng)驗進(jìn)行相關(guān)復制和擴展。

  此外說(shuō)實(shí)施的關(guān)鍵點(diǎn),整個(gè)倉庫實(shí)施過(guò)程中有兩點(diǎn)比較重要,第一如何把模型內容落地成腳本內容,在以前的方式下這兩種經(jīng)常是脫節的,模型人員做模型,EQ人員做EQ,實(shí)際在現在情況下,我們更多是通過(guò)自動(dòng)化工具,將整個(gè)模型完善落到腳本上,這個(gè)就是由自動(dòng)化工業(yè)可以做。另外一個(gè)實(shí)施關(guān)鍵是數據標準的落地,我們剛才提到數據管控在城商行做的時(shí)候,不做大而全,做小而精,對于標準落地在一期時(shí),一般建議是客戶(hù)整合落地,機構的落地以及指標落地,有些落地其實(shí)對對于城商行初期應用來(lái)講,就已經(jīng)做的非常好。這一點(diǎn)也不太容易,后面會(huì )講到。

  另外六個(gè)基礎模塊,這個(gè)就偏技術(shù)一點(diǎn),包括ETL、交換的,調度的,數據安全和管控等等,此外是管控策略和方法問(wèn)題,我如何管理我的需求,如何能夠在每一步有什么樣的輸出,這個(gè)都是整個(gè)過(guò)程中會(huì )涉及的,其實(shí)我們看整個(gè)過(guò)程已經(jīng)涉及了整個(gè)倉庫設計方法中所有一切關(guān)鍵點(diǎn)。

  我們接下來(lái)看整個(gè)設計過(guò)程中關(guān)鍵的內容,第一我們一直強調架構重要、規劃很重要,我們看一下一個(gè)企業(yè)基礎平臺的架構到底是什么,合理的架構是什么樣。講這個(gè)之前先講原則,我們在以前行業(yè)做的時(shí)候,很少講這個(gè),為什么現在講的越來(lái)越多?我們現在看的不管在城商行還是股份制銀行,經(jīng)常做了一段時(shí)間之后,大家會(huì )反問(wèn)一些問(wèn)題,我的數據集市和平臺的關(guān)系,數據集市存儲力度是怎樣的,我的應用和平臺里頭切分是什么,其實(shí)這個(gè)都是架構應該解決的問(wèn)題,所以我們經(jīng)過(guò)這么多項目的總結,包括我們之前在中信做新一代的企業(yè)數據平臺架構咨詢(xún)規劃時(shí),我們進(jìn)行了細致的梳理。

  我們認為在整個(gè)整理架構里頭,一定要考慮六個(gè)原則,第一我們說(shuō)的數據集中和共享原則,我們做的企業(yè)及基礎數據平臺,它是公共的,是中性的,它的數據一定要做到集中和共享,否則就失去了它的意義。第二數據標準統一的原則,我們之前的時(shí)候各個(gè)集市做自己的,每個(gè)集市有自己的一套標準,到我們基礎數據平臺之后,我們在能統一的地方一定要進(jìn)行統一,比如我們的機構這個(gè)要求一定要統一的,我們盡量的少開(kāi)這樣的口子給特殊的應用做一套特殊的東西,因為這種口子一旦開(kāi)了之后,你的架構會(huì )越來(lái)越亂。第三塊數據管理策略統一原則。我們說(shuō)的數據管理策略包含出局存儲周期,存放策略,比如我們偏應用的特性的數據如何存放,共性的數據如何存放,這個(gè)原則其實(shí)我們一定要明確,我們大的方向是共性的數據一定要下沉,個(gè)性的數據逐漸上浮,也就是說(shuō)共性數據都盡量落在基礎數據平臺上,個(gè)性數據可以逐漸落在各個(gè)集市上處理,此外還有減少數據復制的原則,這個(gè)很明顯,還有充分有限資源,這一塊比較重要的經(jīng)常我們做一些平臺時(shí),大家都問(wèn),我們現在怎么辦,大家經(jīng)常觀(guān)點(diǎn)是推導重來(lái),其實(shí)我們不是很建議這種方式,我們的原則是盡量利用現有的,現有的內容盡量的吸取把它集中到我們平臺去,讓它發(fā)揮價(jià)值。

  此外就是長(cháng)期和短期相結合的原則,在這樣的原則下,我們看一看一個(gè)完整的企業(yè)級基礎數據平臺是什么樣,這個(gè)圖看起來(lái)很復雜,我們分解一下,分了幾個(gè)部分,第一個(gè)部分叫數據存儲平臺,這一部分主要解決的是數據的存儲問(wèn)題,它包含了相應的數據架構,數據存儲策略以及應用切分點(diǎn),這是第一塊,第二塊是應用,這實(shí)際是在平臺上的應用,大家都知道我們在倉庫上的應用分了幾種模式,我們的報表,數據挖掘,系統應用,這一塊應用是基于整個(gè)平臺建設的內容,這是第二塊內容。第三塊是數據管控,我們的數據倉庫質(zhì)量管理辦法,比如數據標準等等,第四塊是數據交換采集調度平臺,這四塊其實(shí)是我們傳統情況下的數據平臺的點(diǎn)評架構,經(jīng)過(guò)我們這兩年進(jìn)一步的完善,特別是隨著(zhù)我們對數據的需求,我們現在又擴展了一塊,這塊包含了實(shí)施數據區、大數據處理去,歷史數據存儲區,在這個(gè)架構下,我們經(jīng)常叫混合架構,因為它既考慮了傳統的結構性數據的處理方法,也考慮了非結構化數據處理方法。

  對于我們城商行來(lái)講,并不是一上來(lái)把所有內容全實(shí)施完,但是我們需要強調的是在開(kāi)始時(shí),一定要有這么一張圖,能夠清晰的看到我們后續要發(fā)展成什么樣,我們不一定開(kāi)始就去建設這樣一個(gè)實(shí)施數據區或者大數據處理區,但是我們相應的數據項目考慮,包括以后擴展接口,在架構里一定要考慮到。

  接下來(lái)談一下管控和數據平臺的關(guān)系,我們剛才講到對于城商行來(lái)講,在建設數據平臺時(shí),千萬(wàn)不要鼓勵建平臺,一定要和管控結合,我們提到數據管控,比如數據質(zhì)量,數據標準內容,從我們這么多年的經(jīng)驗,我們認為在城商行初級實(shí)施時(shí),更容易落地的是數據標準和數據質(zhì)量的內容。首先看數據標準,數據標準的落地大家都知道,我們整個(gè)數據從業(yè)務(wù)系統產(chǎn)生到后臺分析系統,標準最好的地方一定是源頭落地,對于后續整個(gè)數據問(wèn)題是最好的解決,但是同時(shí)大家也知道,這是最難的,你要在整個(gè)業(yè)務(wù)系統里頭讓它改動(dòng)做調整,其實(shí)這個(gè)推進(jìn)力度太大了,我們之前早年的時(shí)候在廣大改一個(gè)性別代碼花了四十多個(gè)人員做這件事,其實(shí)重點(diǎn)都是溝通協(xié)調工作,我們看到這樣一個(gè)情況后,現在越來(lái)越多的模式,把整個(gè)數據標準落地往后移,這樣推動(dòng)更容易,當然也有它的問(wèn)題,源頭問(wèn)題可能仍然沒(méi)有解決,但是從管理型應用的方向來(lái)講,還是解決了很大一部分問(wèn)題。

  對于數據標準來(lái)講,對于城商行來(lái)講,最容易落地而且最具有應用價(jià)值的是客戶(hù)整合的落地,機構代碼功能代碼的落地以及指標體系的落地,這幾個(gè)都可以作為我們在城商行推時(shí)數據標準的落地點(diǎn)。這是我們說(shuō)的標準,我們有了標準才有數據質(zhì)量,因為沒(méi)有標準談不上質(zhì)量,質(zhì)量無(wú)非是數據滿(mǎn)足業(yè)務(wù)需求使用的程度,我們有了這樣的標準之后,我們能夠用這樣的標準衡量數據怎樣,這樣不管從技術(shù)上的校驗還是業(yè)務(wù)上的校驗,在整個(gè)平臺每一層可以做校驗規則,在數據平臺里把數據質(zhì)量規則做到自動(dòng)化的配置和相應的校驗,生成報告來(lái)幫助我們解決問(wèn)題。這是我們說(shuō)的數據管控和平臺的關(guān)系。

  再看一下應用,我們說(shuō)有了平臺之后,我們最終的目的一定是支持業(yè)務(wù)應用,業(yè)務(wù)應用是平臺最大的生命力,經(jīng)過(guò)這么多年的積累之后,其實(shí)我們可以看,數據平臺的整個(gè)應用,我們會(huì )把它分成四個(gè)大的模塊,第一個(gè)是營(yíng)銷(xiāo)和客戶(hù)關(guān)系管理模塊,這個(gè)簡(jiǎn)單講,更多的CRM相關(guān)的一些內容,主要是從客戶(hù)的獲取管理細分價(jià)值提升等等部分的內容,這是第一塊。第二塊是合規風(fēng)險管理,包含市場(chǎng)風(fēng)險,操作風(fēng)險,監管報送體系內容都在里頭。第三塊是財務(wù)績(jì)效,管理會(huì )計,FTP等等內容都在這里,還有一塊是運營(yíng)管理,這樣一個(gè)平臺里最終希望支持的應用包括四大塊內容。

  但是現在很多行,包括已經(jīng)建了倉庫的銀行,比如廣大、民生,工行,其實(shí)很多應用在之前倉庫上建了,但是現在很多系統都在重構,重構的原因是什么,是因為在一些地方做的還不夠完善,如果后續做這樣應用時(shí),我們希望在我們點(diǎn)上更加注意,第一我們更加關(guān)注數據整合,之前看到很多大行做時(shí),做著(zhù)做著(zhù)數據最后又分散,隨著(zhù)數據的分散,后續的維護包括數據標準的統一會(huì )越來(lái)越困難,所以我們說(shuō)關(guān)注數據的整合,實(shí)際在后期應用里一定要特別注意。第二數據質(zhì)量的有效提升,有這么多應用,應用里一定要特別重視數據質(zhì)量,一旦發(fā)現數據質(zhì)量問(wèn)題,特別是影響到業(yè)務(wù)使用時(shí),一定要第一時(shí)間跟業(yè)務(wù)部門(mén)溝通做相關(guān)的解決辦法,這個(gè)是讓業(yè)務(wù)人員能夠持續性的倉庫,讓倉庫發(fā)揮價(jià)值的很重要一步。

  第三第四都是應用之間的關(guān)聯(lián)關(guān)系,也就是說(shuō)我們在建設應用時(shí),要考慮應用之間的關(guān)系,比如說(shuō)你要做產(chǎn)品定價(jià),你要算產(chǎn)品的貢獻度,你要知道它的管理會(huì )計,FTP,這些應用之間的關(guān)系,在初期一定要有清晰的梳理,否則一開(kāi)始什么都沒(méi)有,就要算貢獻度,可能你的成本是沒(méi)有的,你的內部專(zhuān)機價(jià)是沒(méi)有的,最后算出來(lái)的數只能是相對數,這樣的數其實(shí)就業(yè)務(wù)來(lái)講意義并不是很大。應用層面對于我們來(lái)講,希望在這幾點(diǎn)進(jìn)行有效的關(guān)注。

  從應用模式上來(lái)講,我們有報表,應用系統,靈活查詢(xún)數據挖掘,這個(gè)實(shí)際是傳統的數據倉庫使用的四種模式,這個(gè)可能講了至少有五六年以上的時(shí)間。我們今天想說(shuō)的是這四種模式,其實(shí)后續還仍然是使用的主要模式,但是我們作為數據倉庫后續主要的責任方,我們現在做倉庫,一定要把傳統的推式服務(wù)往拉式服務(wù)走,也就是說(shuō)要把報表和應用系統的支持,他數推給他使用的模式,逐漸的讓業(yè)務(wù)人員能夠主動(dòng)喜歡用我們的平臺,能夠讓他自己有一個(gè)相應空間或者模式,能夠主動(dòng)使用這樣的平臺,有了這樣的模式之后,我們的倉庫價(jià)值可能才能發(fā)揮的更好,這個(gè)其實(shí)就是我們需要強調的,我們一定要在任何時(shí)候,要注重業(yè)務(wù)人員主動(dòng)使用數據倉庫的模式。

  接下來(lái)簡(jiǎn)單看一下大數據這塊,我們之前跟各行談的也比較多,也很熱,我們可以看各個(gè)行現在都在做這一塊的試點(diǎn),唯一能看到落地的廣大做了歷史數據查詢(xún)系統,其它行更多是基于試點(diǎn)模式,對于我們城商行來(lái)講應該如何應對,我們之前銀行最多使用數據是結構化數據,對于非結構化數據,銀行之前并不是很多,無(wú)非是一些影像或者一些文本和語(yǔ)音,這樣的內容很多時(shí)候我們要發(fā)掘出來(lái)花的成本很高,而對于傳統結構性的數據,我們又有很多沒(méi)發(fā)揮出來(lái)的地方,所以這些銀行更多關(guān)注是結構化這塊,對于非結構化內容的出現,應該如何對待呢?我們認為非結構化數據,只是拓展了數據范圍而已,我們可以把它作為我們結構化數據的有效補充,所以當面對這樣的大數據來(lái)臨時(shí),我們先要反思結構化數據是不是已經(jīng)用好了,是不是已經(jīng)用結構化數據讓業(yè)務(wù)感覺(jué)到它的價(jià)值,所以對大數據這塊,我們理解成數據源的補充就可以。

  我們再看一下在大數據情況下的架構趨勢,剛才講到混合架構的模式,我們說(shuō)這個(gè)在往后走,可能就是集團制混合架構的模式,什么叫集團制?除了傳統的銀行業(yè)務(wù)之外,以后還有其它一體化的,非結構化電子渠道互聯(lián)網(wǎng)信息,當然這個(gè)是我們以后長(cháng)久來(lái)說(shuō)的發(fā)展模式,我們可以作為參考來(lái)講,我們可以講在這樣情況下,第一步搭建企業(yè)級基礎數據平臺,處理結構化的數據,才是我們的重中之重,只要有了這樣的架構之后,我們后續的拓展才能在架構上拓展。

  最后就基礎數據平臺,我們之前的經(jīng)驗包括剛才講的內容,做幾點(diǎn)分享。第一不要因為大數據擾亂我們建設的節奏原則,這個(gè)很重要,大家都對外談大數據,但是一定要清晰認識一點(diǎn),它只是一種數據模式,只是現在數據的補充,而不是把原有的推翻,我們說(shuō)金融的本質(zhì)沒(méi)有改變,我們傳統的銀行業(yè)務(wù)也不會(huì )因為阿里巴巴的出現完全顛覆掉,這個(gè)我們其實(shí)之前在很多場(chǎng)合還是研討會(huì )都可能聽(tīng)到過(guò),第二基礎平臺現在不是關(guān)注的重點(diǎn),我覺(jué)得我們這個(gè)團隊,是沒(méi)有什么問(wèn)題,因為剛才賈總也講到,目前凡是涉及到數據平臺的我們這個(gè)團隊都做過(guò),而且都有相關(guān)的成熟案例,而且對于技術(shù)這一塊比較成熟,不管數據庫還是ETL、調度還是數據交換,來(lái)回無(wú)非就那一種工具,所以對于這塊的情況,我們認為不管選哪平臺還是工具,都不重要,重要的是最后數據能不能合理的存放,最后是數據能不能合理應用。

  第三點(diǎn)原則和架構是不變應萬(wàn)變的原則,前面我們已經(jīng)提到,在任何時(shí)候都不要放棄我們的原則和架構,在判斷數據是不是應該在平臺來(lái)提供,是不是應該做這樣的應用時(shí),都可以拿我們的原則和架構做梳理,就能在任何時(shí)候讓我們清醒意識到,我現在的位置是什么,我以后往哪個(gè)方向發(fā)展,我之前做了什么,其實(shí)這幾點(diǎn)了解之后,我們在任何時(shí)候都能夠有信心知道,我們平臺的價(jià)值在哪里。

  第四個(gè)正確存儲的方法論決定了項目的質(zhì)量,剛才我們提到二四六理論里頭的實(shí)施方法論,對于每一步來(lái)講,不管是輸入輸出,還是中間貫穿的內容包括模板,這些都有成熟案例,我們希望通過(guò)跟城商行一塊兒建數據平臺,不只是搭建一個(gè)平臺我們希望這套管理辦法,相關(guān)的模板流程能夠同時(shí)被城商行使用,建立一套他們對數據的管理體系。

  最后一點(diǎn)我們一定要有意識的逐步引導業(yè)務(wù)主動(dòng)進(jìn)行數據分析和探索,在任何時(shí)候千萬(wàn)不要把數據平臺定義成儲存,一定要有意識的告訴業(yè)務(wù),我有什么樣的數據,你能夠發(fā)揮什么樣的業(yè)務(wù)價(jià)值,因為只有在這樣的情況下,你倉庫的生命力才會(huì )越來(lái)越強,我今天講的內容就這些,謝謝大家。

錯誤報告  分享到:
潮州市| 通州市| 囊谦县| 绵阳市| 泰顺县| 石门县| 巴马| 榆社县| 烟台市| 石门县| 宜良县| 新兴县| 平原县| 永年县| 饶河县| 邵武市| 青阳县| 东海县| 依安县| 宽城| 株洲县| 孝义市| 乐都县| 武川县| 潜江市| 五台县| 双桥区| 冕宁县| 惠来县| 沙湾县| 沽源县| 民权县| 和政县| 巴彦淖尔市| 云南省| 察雅县| 石景山区| 汕头市| 阿克| 浑源县| 凤翔县|