興業銀行信用卡中心數據總線建設與實踐

2020-12-17 行動支付網

數據是新型生產要素,是新的石油,數據的地位和價值不斷提升,對國家發展、企業數位化轉型至關重要。興業銀行信用卡中心在業務應用、科技規劃及系統建設過程中積極利用數據,通過數據為業務賦能,提升經營效率,推動信用卡業務數位化轉型。

隨著興業銀行信用卡中心數位化轉型的持續推進,數據應用需求不斷加大,數據交互成本也在加劇,如何更好地利用好內外部數據,在信息安全可控的前提下,規範有效合理進行內外部數據傳輸交換是實現數據應用的第一步。在此背景下,為了進一步提升信用卡中心數據交互的規範化、統一化,同時提升數據交換類系統對業務複雜性的支持能力,興業銀行信用卡中心從多個維度出發,對原有數據交換任務進行整合,建設了信用卡中心數據總線(「興幹線」),統一實現了內外部數據交換的第一道閘口。

系統整體架構

基於數據傳輸安全性要求的不同特點,整個總線分為內部數據總線和外部數據總線兩個子系統,共同提供內外數據傳輸的出入口。目前總線上每日有2000多個數據傳輸任務,接入了外部200+機構,統一提供了數據訂閱交換及安全認證等方面的服務。

1.內部數據總線

內部數據總線的定位是為興業銀行信用卡中心內部信息系統提供統一的數據交換服務。在內部數據總線的整體架構中,興業銀行信用卡中心引入、融合了多套組件和產品,實現了數據交換、數據加工、系統調度、平臺監控等核心功能。系統技術架構如圖1所示。

圖1內部數據總線整體架構

(1)基本功能。數據交換包括傳統每日批量數據交換與準實時數據交換。對於批量文件,利用調度工具對數據文件進行掃描,當檢查到數據就緒後,則通知調度子系統進行後續處理;準實時數據則通過Flume組件配合Kafka,實現對文件或報文的數據採集工作。採集後的數據進入數據模型層進行存儲和加工,並通過數據分發模塊發送至消費系統。

(2)數據加工。內部數據總線引入大數據技術,利用Spark引擎對數據進行行列篩選、多表關聯等輕量級的數據加工,從而高效地完成大規模的數據處理工作。對於批量的結構化數據,使用Spark SQL進行數據加工,對於時效性要求更高的準實時數據,則使用Spark Streaming進行流式計算。

(3)靈活任務調度。內部數據總線將對數據所做的操作封裝為作業流的形式,通過調度引擎,對作業流進行統一管理。在邏輯上數據被分為多個層次,因此對於數據的各種操作可以看作是將數據在數據採集、數據加工和數據分發等不同層次進行移動。

(4)統一預警能力。為了加強對數據加工、數據交換的運行狀況以及數據時效性的監控,提高對於異常情況的預警能力,監控子系統提供了對系統關鍵任務、上遊數據到達、數據供應等多個方面的監控服務,並在觸發告警條件時通過監控以及簡訊及時通知業務及系統關聯方。

2.外部數據總線

外部數據總線的定位為興業銀行信用卡中心外部數據交互樞紐,承擔了卡中心內外部手工數據、卡中心與外部合作單位間數據交換的統一渠道,實現了站點資源整合、數據安全傳輸、數據交換等核心功能,技術架構如圖2所示。

圖2 CFTM技術架構圖

(1)統一外部數據出入口。站點資源整合指對信用卡中心現有的ftp站點進行統籌管理。將分散在各處的站點視為用戶所需訪問的資源,通過暴露統一的入口,並對用戶進行安全認證以及資源訪問權限控制,從而實現對分散在各處的站點進行統一管理,以及記錄和跟蹤數據傳輸過程等目標。

(2)多重數據安全控制。通過用戶管理、密級文件登記、訪問控制三個維度來保證數據文件的傳輸安全。其中,訪問控制通過多因子安全認證登陸、以及權限管理實現對所有通過外部數據總線進行數據交換的用戶或系統進行訪問控制;權限管理遵循最小可用原則,賦予用戶對站點資源的最小可訪問權限;密級文件登記功能(即「閱後即焚」)指對所有從外部數據總線流入的數據文件進行密級級別登記。密級分為密級一、密級二、密級三、非密共四個密級,外部數據總線會對不同密級的文件進行傳輸控制,如:下載次數限制、保留時間控制等;用戶管理指對所有在外部數據總線上註冊的用戶按照興業銀行信用卡中心的組織架構進行分類管理,並在此基礎上按照權限級別以及用戶職能劃分為幾種不同類型的用戶,如:超管、部門管理員、行員、非行員、系統用戶等。

(3)多樣化數據傳輸模式。根據業務場景和外部機構的不同,系統支持多樣化數據傳輸模式,支持手工類數據文件和系統類數據文件,按照數據文件獲取方式分為主動和被動,主動和被動是針對用戶來說的,其中主動指由用戶自行去外部數據總線上獲取數據文件、被動指外部數據總線會按照約定的策略從上遊系統指定位置獲取文件並推送至下遊系統指定位置。

實踐總結

1.統一數據傳輸標準

在系統建設的同時,興業銀行信用卡中心對信息系統數據卸載標準進行了統一。長期以來,內部各套信息系統之間數據卸載方式不一致,由一套系統產出的同一份數據並不能直接適用於所有消費系統,需要進行重複的數據開發與數據卸載,以滿足各消費系統的數據加載需求,這極大地提高了數據交換的成本。同時由於數據卸載文件名稱、格式等各方面缺乏規範限制,對數據的管理工作也遇到極大的阻礙。

基於以上情況,興業銀行信用卡中心設計了一套信息系統數據卸載標準,對信息系統卸數時的文件命名、文件格式等多方面進行規範,形成了「定長數據文件+標誌文件」的基本卸數原則。定長是指數據文件採用固定長度文本格式,文件中欄位長度固定為資料庫中定義的欄位長度。標誌文件作為輔助文件,一方面作為數據傳輸完成的標誌,另一方面用於保存數據大小、記錄數、欄位信息等數據信息,便於其他系統加載。通過統一數據卸載標準,供應系統產出數據可實現復用,而且由於數據格式統一,信息系統無需針對多種格式的數據開發數據卸載與加載功能。同時標誌文件的引入保證了數據傳輸的可靠性與完整性。

2.開放自助式服務平臺

數據總線提供了自助式數據訂閱模式,在安全可控前提下,消費系統可通過自助服務平臺,根據實際需求對欄位、數據記錄進行篩選,甚至進行多數據關聯等操作。數據總線通過提供輕量級數據加工功能,減輕了上下遊系統的數據處理壓力,將數據交換粒度進一步細化,真正實現了作為數據總線系統的數據集成能力。同時釋放了運維人員手工查詢等操作工作量,降低日常運維成本,提升了關聯繫統數據異常發現和處理時效。

3.一站式資源訪問

外部數據總線通過內部封裝的支持高並發、可復用連接的客戶端,去替代用戶/系統訪問興業銀行信用卡中心內部各類ftp公共站點。通過在用戶/系統與公共站點間架設外部數據總線,提高了站點資源訪問的便利性、數據傳輸的安全性以及可控性。

4.數據影響及血緣分析

數據總線對每個經過總線傳輸的數據進行了影響分析及血緣分析,對數據的來源及去向進行了梳理,以便關聯繫統對數據的流向及數據生命周期實現進一步掌握。根據關聯繫統的需求,可提供不同粒度的展現,最細的分析粒度可達欄位級。

數位化轉型浪潮下,數據的進出口尤為重要,安全標準的數據應用能力為大數據應用提供堅實後盾。展望未來,隨著實時數據應用能力和數據接入範圍的進一步擴大,將不斷創新演化,助力興業銀行信用卡數位化進程。

(本文作者就職於興業銀行信用卡中心)

相關焦點

  • 銀行信用卡如何擁抱科技共建生態 訪興業銀行銀行卡與渠道部總經理...
    近日,興業銀行銀行卡與渠道部總經理兼信用卡中心總經理汪宇在接受《中國經營報》記者專訪時表示,信用卡作為銀行零售業務的重要抓手,未來幾年增長趨勢不改,但在迎來巨大發展機遇的同時,也將面臨眾多挑戰。在消費不斷升級的趨勢下,單一的產品或服務已不再適應用戶多元化的需求,探索跨界合作可以激發信用卡的新活力。
  • 興業銀行信用卡中心總經理汪宇:織網消費場景 突圍信用卡轉型「下...
    在今年3月份興業銀行零售銀行「織網工程」全面實施階段動員大會上,興業銀行副行長陳錦光曾借用後半句來形容信用卡業務在該行零售業務中的重要地位。成立於2003年的興業銀行信用卡中心,敏銳捕捉年輕市場的無限潛力以及網際網路浪潮的大勢所趨,選擇走差異化競爭道路,推動實施「織網工程」,近年來信用卡業務蓬勃發展,已然成為該行零售業務發展的主力軍。
  • 2021興業銀行總行信用卡中心校園招聘公告
    全球銀行30強全球上市企業100強世界企業500強興業銀行總行信用卡中心駐滬持牌金融機構16年發展歷程科技引領 數據驅動金融科技 有你有我努力與超越,不餒與堅信直掛雲帆,乘風破浪前路、夢想,你想要的方向都可以在這裡實現
  • 解讀興業銀行的信用卡業務
    來源:雪球1、信用卡流通卡量收集了近4年,招商銀行(橙色)、平安銀行(藍色)、興業銀行(灰色)的數據。發現:興業銀行,一樣重視信用卡業務。先從起步看,興業銀行信用卡量就遠少於招行,略少於平銀。再看整個信用卡的拓展,圖上看,斜率都差不多。當然,興業銀行拓展結果略差些,也是要承認的。這真得不太重要。最近中報:圖上發現招行與平銀斜率有明顯向下,說明上半年在收縮。而興業銀行,依舊勢頭不減。疫情發生了,興業銀行上半年還這麼做,是不是膽子肥了點?這不太好吧。
  • 優化服務為客戶 深耕細作謀發展——記興業銀行信用卡中心額度經營
    近年來,興業銀行信用卡中心重視額度經營戰略的規劃與實施,將大數據、人工智慧決策、網際網路科技等新興技術引入額度經營與管理,取得了顯著成效,興業銀行信用卡的客戶綜合經營能力獲得顯著提升。  效率為首,提升額度服務水平  但凡有調額需求的客戶,對於額度服務不外乎有以下標準:快、夠、爽!
  • 乘東風浩蕩之勢,謀信審更好發展—記興業銀行信用卡中心TSM智能...
    所以,已躋身國內信用卡發卡第一梯隊的興業銀行,在信用卡生命周期開啟的重要樞紐——信貸審核階段就注入科技力量。該行目前使用的新一代信用卡智能審核系統(Transact Strategy Management,以下簡稱TSM),其內置技術體系,深度融合金融科技和智能風控,擁有保障業務順利發展的強大實力。
  • 興業銀行信用卡系統成功升級 交易迸發能力提升20倍
    中新網11月26日電 11月24日22點,隨著最後一組數據上線報告無誤,興業銀行信用卡系統升級項目中央數據控制室一片歡騰,歷時617天的新舊系統切換工作圓滿成功。早在2004年就加入興業銀行信用卡中心的一位老員工表示。「你可以把它想像成一輛運行多年的老火車,」興業銀行信用卡中心副總經理吳擇金也毫不迴避地言道,「雖然有著龐大的運輸需求,但因為運力有限,上面掛滿了乘客,導致行駛緩慢,風險增加。消費金融發展勢頭迅猛,平臺運力不濟必然會拖後腿,系統升級勢在必行!」
  • 興業銀行信用卡 這些優惠不容錯過
    上周六,小倪和興業銀行鄭州分行信用卡中心的劉巖冰(大家可以叫她冰冰)一起體驗了興業銀行信用卡帶來的各種優惠活動。1元洗車、雙匯滿30元減20元、好利來滿30元減15元、五星級自助餐兩人同行一人免單……這麼多優惠,您也千萬不能錯過哦。
  • 興業銀行發布信用卡積分規則調整公告
    來源:支付曝光臺App支付曝光臺(ZFBGT.COM)訊:2020年7月13日,興業銀行信用卡中心發布公告,宣布調整積分規則。此次公告的內容主要是兌換航空裡程。興業銀行公告全文關於興業銀行信用卡積分規則調整的公告尊敬的興業信用卡客戶:自2020年8月27日起,我行信用卡積分規則(排除東方航空聯名信用卡、廈門航空白鷺聯名信用卡、南航明珠信用卡、吉祥航空聯名信用卡自動兌換部分
  • 特色助發展 興業銀行信用卡致力差異化服務
    從2004年發行第一張信用卡以來,興業銀行信用卡始終以穩健的步伐、精細化的經營,為持卡人提供了便利、貼心的金融服務。更難能可貴的是,在探索自身發展模式的過程中,興業銀行信用卡將金融與公益相結合,引領綠色金融潮流,走出了與眾不同的發展之路。
  • 興業銀行信用卡系統11月24日升級換新
    興業銀行近日發布公告,為進一步提升信用卡服務水平,定於北京時間2018年11月24日(星期六)0:00至24:00進行信用卡系統升級。近年來,在擴大內需、刺激消費政策的推動下,國內消費金融市場迎來爆發式增長,國民對信用消費的訴求不斷增強,國內信用卡產業也迎來快速發展的黃金時期。興業銀行緊貼客戶需求,搶抓市場機遇,圍繞信用卡「活力人生」核心品牌,以網際網路場景布局和跨界合作為抓手,積極構建數位化經營平臺,推動信用卡業務實現跨越式發展。
  • 興業銀行信用卡5折風暴 興動全城
    一、活動時間:即日起至2018年2月28日期間,每周六、周日二、活動對象:興業銀行信用卡持卡人(不含全幣種信用卡及公務卡)三、活動內容:2017年10月21日至2018年2月28日,每周六、周日,興業銀行信用卡客戶至Wagas及Baker&Spice全國門店(機場店除外)刷卡消費,即享單筆消費金額5折優惠,最高優惠100元;當日名額有限量,活動優惠時間與商戶門店營業時間一致。
  • 吉祥航空攜興業銀行在滬推出首張聯名信用卡
    ,簡稱「吉祥航空」)攜手興業銀行股份有限公司在滬推出三款吉祥航空聯名信用卡,這是吉祥航空開航五年以來推出的首張聯名信用卡。興業銀行副行長陳德康、均瑤集團總裁王均豪等雙方有關領導,以及30餘家媒體記者參加了在虹橋萬豪酒店舉行的上市新聞發布會。上海申通物流有限公司董事長陳德軍先生、銀濤高爾夫董事長盧長慶先生等在內的多位企業家現場申辦了聯名信用卡。
  • 雙態IT研討會-分布式核心和雙活數據中心建設實踐(深圳站)舉辦
    2020年12月18日,由ITSS數據中心運營管理工作組(DCMG)、雙態IT聯盟指導,南京雲信達科技有限公司、上海擎創信息技術有限公司、上海翰緯信息科技有限公司聯合主辦的雙態IT研討會-分布式核心和雙活數據中心建設實踐(深圳站)在深圳灣萬怡酒店成功召開。
  • 鄭州用戶投訴興業銀行信用卡:不顧疫情騷擾催收逼得自己想跳樓!
    「興業銀行通過第三方催收公司,這樣整天打電話騷擾,讓我完全無法工作,怎麼才能還清信用卡的欠款?逼得我都想跳樓了!」近日,河南鄭州的馬先生對自己使用興業銀行信用卡的遭遇進行了投訴。2017年,他辦了一張興業銀行的信用卡,額度一萬元,幾年來一直正常使用,從來沒有過逾期。不料,今年春節前夕,新冠肺炎疫情突然到來,所有的飯店全部無法營業,影響至今,對馬先生的收入也造成了極大影響。
  • GoldenDB分布式資料庫中標交通銀行信用卡中心試點項目
    近日,中興通訊GoldenDB分布式資料庫成功中標交通銀行信用卡中心試點項目,這是GoldenDB在全國大行關鍵業務上的又一重大突破,將進一步完善中興通訊在金融行業的布局。  交通銀行作為全國六大行之一,目前信用卡在冊卡量達到7,180萬張。
  • 興業銀行、招商銀行、浦發銀行等挨罰,因辦信用卡違規
    作者 | 市界 秦海清編輯 | 老拿多家銀行信用卡業務違規,銀保監會很生氣。7月17日,中國銀保監會上海監管局官網顯示,一天之內開出6張罰單,均系銀行在辦理信用卡業務時,沒有遵守相關制度。六份處罰文件顯示,工商銀行、興業銀行、招商銀行、上海銀行、浦發銀行以及建行等六家銀行,在為客戶辦理信用卡業務時未遵守授信額度管理,或對申請人收入審核不審慎,依據《中華人民共和國銀行業監督管理法》第四十六條第(五)項,上述銀行遭到銀保監會上海監管局處罰。
  • 興業銀行星夜•星座信用卡榮獲第十八屆財經風雲榜「年度口碑...
    12月16日,由和訊網主辦的2020年財經中國年會暨第十八屆財經風雲榜銀行峰會在京召開,會上重磅揭曉第十八屆中國財經風雲榜之銀行業評選結果,興業銀行(601166,股吧)"星夜·星座信用卡"獲評"2020年度口碑信用卡"。
  • 興業銀行為客戶安全用卡保駕護航 攔截潛在風險損失2.4億元
    今年5月,她不小心讓詐騙分子套取了信用卡關鍵信息並被盜刷,緊急情況下,她第一時間致電興業銀行信用卡客服求助,興業銀行工作人員立即啟動風控響應措施,迅速與收單機構取得聯繫並安撫張女士,告知後續報警及處理流程,在多方合力之下,最終成功攔截交易訂單,幫張女士挽回了將近一萬元的經濟損失。隨著科技發展日新月異,詐騙手段不斷更新迭代,類似張女士的遭遇並不罕見。
  • 2020銀行信用卡中心排行榜
    信用卡的發展現狀從1995年廣發銀行推出我國首張參考國際標準的信用卡誕生伊始,到2002年中國銀聯成立,信用卡業務在我國飛速發展,根據最新統計數據顯示,截至2019年,我國信用卡的發行量已達到7.46億張,人均持卡量為