打造券商研究中臺,建設數據應用新生態——證券業數據治理與數據...

2020-12-13 未央網

本文共字,預計閱讀時間

文/北京熵簡科技有限公司高級分析師龔霄,聯合創始人金簫

(本文為「證券機構數位化轉型與證券科技創新」徵文活動入圍文章。)

一、背景:證券研究所數據治理任務正當其時

作為證券市場的主要參與者,我國證券機構正處於一個前所未有的新時期。隨著我國資本市場的成熟度與開放度不斷深化,多層次資本市場建設穩步推進,中國證券市場的廣度和深度不斷拓展。科創板的推出和註冊制的加速推行,使我國上市公司數量保持快速增長的勢頭,衍生出大量證券業務的相關機會,也考驗著證券機構的業務管理與服務響應能力。與此同時,我國自主推動了新一輪金融業對外開放,大幅放寬了外資在銀行、金融、保險等領域的市場準入。大量發達資本市場的同業機構湧入,帶來激烈的市場競爭,我國證券機構迫切需要引入創新工具、產品,以差異化競爭手段,樹立品牌影響力。

本文所探討的數據治理課題側重於從研究數據的角度入手,解決券商研究部門所面臨的數據使用實際與發展要求之間的矛盾。之所以從這個角度來解決數據治理問題,是源於對證券機構業務痛點的認識。券商研究所作為證券公司的重要業務部門,研究所的高素質人才和優質服務是證券公司核心競爭力的重要組成部分,同樣需要跟隨券商整體戰略而進行調整。

與經紀業務系統、投資交易系統、CRM系統這類與前臺業務相連接、已經高度IT化的系統相比,目前券商研究業務整體還處在業務IT化、組件化的初級階段,因此開展數據治理的任務更加緊迫,提升空間大。另一方面,由於券商研究所的各類數據被廣泛用於對外開展研究服務,因此研究所的數據治理有較大的外溢效應。解決券商研究所的數據治理問題,就從很大程度上緩解了接收服務的資管機構的數據治理壓力,對整個行業生態具有良好示範效應。

二、問題:券商研究所數據治理面臨IT架構與業務需求的矛盾

目前券商研究所的數據治理難點及痛點,主要體現在以下幾個方面。

(一)數據投入較大,卻未沉澱為資產

研究部門持續支出成本採購第三方數據(包含各類網站、終端帳號)以建立研究壁壘,但高投入不一定帶來高回報。究其原因,部分高頻利用的數據並沒有沉澱為機構的數字資產,取用過程零散,用後便被廢棄,無法重複使用。此外,由於機構內部難以統計不同帳號的使用情況,研究員不清楚企業的數字「家底」,部分帳號使用頻率較低卻持續產生成本。

另一個常見場景是,研究員通常會持續跟蹤多種行業特色數據,許多是以人工方式進行維護,並以EXCEL表格形式零散地存放在研究員的電腦中,一旦本地研究資料丟失或數據跟蹤中斷,這些數據也就隨之流失,沒有沉澱為公司資產。更進一步地,研究員的研究邏輯是研究所建立核心業務壁壘的保障,但隨著研究員的流動,這些邏輯沒有在機構內部留痕,帶來投研邏輯的傳承問題。

(二)沒有建立以人為本的過程管理體系,難以實現降本增效

傳統IT系統以「管理」為本,而不是以「人」為本,沒有讓系統反過來對人賦能;在未來的金融科技場景下,需要基於豐富的埋點和標籤集對標的、用戶進行更全面的畫像,更科學的衡量公司各項資源的投入產出比。

為實現系統對人賦能,需要考慮分析師作為主要使用者的實際需求。作為對市場擁有獨到見解的專業群體,分析師的數據需求通常千人千面,且帶有複雜業務邏輯,僅依靠內部IT力量難以滿足全部需求。而即使採購了第三方資料庫,如果不能提供業務端一種便捷的調取方式,這些數據的使用也會十分困難。

(三)在系統層面無法自主可控,形成研究能力的產品化輸出

傳統外部IT廠商系統架構老舊、封閉,無法滿足快速迭代的業務需求;機構對功能模塊的升級高度依賴於廠商的服務,歷經多年積累的產品底層框架如果接收新增需求,則面臨重構的高昂成本,使許多傳統廠商望而卻步。

國內日臻完善的雲計算生態催生了一批擁有最新IT架構的新興廠商,作為「後浪」,為行業帶來新的活力。這些廠商能夠基於雲原生的開源架構開發產品,接口全開放,幫助證券公司實現自主可控;同時新一代產品的功能高度可配置,更靈活的響應客戶需求。對於證券公司而言,如何實現新舊產品的數據接續與功能無縫對接,成為必須應對的問題。

三、解決方案:以網際網路思維推動券商研究中臺建設

這些複雜的問題,本質上可以被歸納為「數據使用最後一公裡」的問題,在「最後一公裡」,數據的處理與使用是一個以人工為主導,過程零散的「黑盒」。藉助網際網路思維,需要通過產品化、組件化的方式,將相關業務場景轉化為線上的透明化、標準化業務流程,以先進IT架構支撐研究業務創新。即打造券商研究中臺,建立面向業務場景的專業數據倉庫,賦能分析師,對外輸出標準化產品。

(一)融合多源異構數據

券商研究中臺,是從證券公司數據中心中獨立封裝成的一個面向研究業務場景的數據湖,各類來自第三方數據供應商的數據能夠被融合到一起,成為前端系統的底層數據支撐。在此基礎上,建立包括聚合搜索、數據瀏覽器、知識圖譜、智能研報在內的多個應用,使研究人員的數據取用均能夠基於研究中臺實現,形成數據獲取-數據加工-數據呈現-數據輸送的閉環。

(二)建設數據生產加工平臺

從業務層面,數據作為新生產要素,勢必將在證券公司提升差異化服務水平、提高業務創新水平與品牌價值的過程中發揮愈加重要的作用。對於券商研究所,基於業務邏輯進行的數據加工,以及基於數據進行的各類價值發現工作,都能夠以數字資產的形式被沉澱在研究中臺,實現數據資產化,能夠追溯數據使用過程並進行業務留痕,最終以標準化的數據產品形式進行輸出。從人才層面,基於研究中臺之上的各類應用進行的數據處理與跟蹤,通過可視化、自動化、可重複的方式,降低了傳統數據維護工作中的無效勞動,保障了數據質量。可視化、低代碼的數據處理過程,使研究人員能夠充分發揮主觀能動性,定義並監控數據的處理、使用過程,進行數據探索與價值發現。因此,研究中臺與研究人員的關係是相輔相成、相互支撐的,將成為研究人員的研究利器,而研究人員的積極使用,反過來也使研究中臺不斷沉澱價值,靈活響應業務需求。

(三)各類應用建設,提供標準化輸出

完成研究中臺建設後,研究所可基於此開展各類上層應用的建設,最終提供比以往更加標準、豐富的數據服務產品,包括提供在線數據報表服務,提供API接口傳送的數據服務,基於行業數據的產業鏈圖譜,基於個股數據的公司圖譜,基於圖譜提取出的脫水研報等。而作為服務的接收方,資管機構能夠獲益於相較傳統數據服務形式(往往是一張excel表格)更加持續、穩定的創新型數據服務,包括以API對接方式獲得數據並在線查看,獲得由賣方提供的知識圖譜服務,以此比較不同賣方的研究框架及相關數據的異同。通過各類創新的數據應用與服務,證券公司能夠和資管機構客戶,乃至於政府、產業客戶群體建立更加全面、深化的合作關係,基於數據智能的服務生態具有良好的外溢效應,勢必將為證券研究這樣的知識密集型行業增添新的活力。

在對內服務層面上,研究中臺建設能夠和其他IT系統數據聯通,站在公司整體角度勾勒出一幅宏觀、定量、不斷變化的市場與行業數據全景圖,從而為組織戰略制定、風險控制、人員管理提供決策依據,幫助證券公司擁抱大數據帶來的戰略發展與組織變革紅利。

四、進一步探討:券商研究中臺建設的現實困難

儘管建設研究中臺具有諸多好處,但在實際執行過程中仍然面對一些現實困難需要解決。

(一)前期數據資產梳理工作需要業務人員深度參與。

對於數據資產梳理,由於與業務邏輯耦合度較高,需要對各類數據的清洗、篩選、聚合工作進行需求指引。對於業務人員而言,參與數據治理工作並不屬於已有職責範圍,卻需要耗費大量時間精力,配合度往往有限。因此對於業務人員的工作參與需要從組織層面予以協調,並給予數據治理工作成果更高的績效權重,鼓勵大家從觀念上認知其重要性。

(二)對上遊數據供應商的服務形態提出了更高要求。

沒有一家數據供應商能夠提供券商研究所所需的全部研究數據,研究所聚合來自多個數據供應商的數據資源,在此基礎上進行生產加工。目前上遊數據供應商所提供的數據服務標準化水平參差不齊,主要體現在數據質量的差異,如數據缺失、數據重複、格式不統一等,成為券商研究中臺建設的阻礙。研究中臺的建設需要上遊數據供應商統一數據標準,提供更高水平的數據供應服務。從這個層面看,證券研究所作為需求方開展的數據治理工作,有助於倒逼數據供應商的服務質量變革。

(三)需要對數據治理情況進行持續管理監督。

數據治理涉及一套完善的管理體系,包括組織、制度、流程、工具。券商數據治理工作要建立長效的發展機制,在研究中臺建設及使用過程中,需要專門人員對數據治理工作進行實時持續的管理監督,避免人員缺位現象。也就是說,在研究中臺建設過程中,需要配備相應的人員組織、管理制度與流程機制,這樣才能穩步推進中臺建設,不斷解決執行過程中遇到的現實問題。

[Source]

本文系未央網專欄作者發表,屬作者個人觀點,不代表網站觀點,未經許可嚴禁轉載,違者必究!

本文為作者授權未央網發表,屬作者個人觀點,不代表網站觀點,未經許可嚴禁轉載,違者必究!

本文版權歸原作者所有,如有侵權,請聯繫刪除。

相關焦點

  • 論道「數據中臺」本質——IDC發布《企業數據智能實施部署智能》報告
    在此背景下, IDC調研中國重點行業數據智能應用市場案例,分析各行業數據智能落地現狀以及面臨的挑戰,並發布《CIO視角:企業數據智能實施部署指南》報告。報告對市場生態進行劃分,並且對如何推進數位化、智能化提出參考建議。本篇報告提到的數據智能,重點在於數據化以及初步的智能化應用,未將重點放在智能化方向,因此類似「AI中臺」概念,不在本篇報告討論範圍之內。
  • 數據新世代:2020中國數據中臺行業發展簡析|甲子智庫
    2019年,中國數字經濟規模達到358,402億元,佔當年GDP比重的36.2%,而2014年數字經濟佔當年GDP比重為僅為26.1%,在數字經濟發展的大背景下,企業自身的數位化建設和對數據的應用已成為企業戰略、治理及運營的關注重點。
  • 水滴公司CTO邱慧:構建數據中臺 破解數據價值難題
    【TechWeb】12月11日消息,水滴公司CTO邱慧在談及近幾年流行的「數據中臺」時表示,水滴的數據中臺能為前提業務提供統一的數據服務,發掘數據價值。邱慧介紹,對於行業現狀以及水滴多元化的業務場景,水滴公司的解決方案是構建自己的數據中臺,為業務前臺提供統一的數據服務。當前,水滴的數據中臺分為數據管理層、數據服務層以及數據應用層。數據管理層主要負責建設數據資產,監控數據質量,保證數據安全。為了確保數據口徑一致性,內部建立了數據運用體系。
  • 淺析東方網力數據業務中臺的優勢
    而東方網力建設推出的數據業務中臺就是承上啟下的數據治理及賦能平臺,其深度挖掘數據與數據之間的關聯,將海量沉默的數據真正用起來,讓用戶的應用需求更快速的得到落地。東方網力數據業務中臺的優勢主要體現在以下六個方面:一、數據跨網整合,強化數據治理。
  • 終於有人把數據中臺講明白了
    第二,數據中臺梳理的流程比數據倉庫建設更加複雜和全面。數據中臺增加了以企業的全局視角來梳理數據域的環節,這是數據中臺建設中很重要的一環。數據域的梳理正好體現了中臺化的能力。 舉個例子,新零售場景下,企業的交易場景有很多,包括自建商城渠道、第三方電商渠道、外賣訂單渠道、線下門店渠道等。
  • 「中臺建設」成券商IT熱詞 自建系統還是外購系統?
    來源:券商中國原標題:「中臺建設」成券商IT熱詞,是否適用每一家?自建系統還是外購系統?中信建投CIO這樣說近兩年來,「中臺建設」已成為金融領域的高頻詞彙,甚至被視為券商業務轉型的一個關鍵助力。事實上,「中臺」到底是什麼,可如何對業務進行賦能,是否每家券商都需要建設「中臺」,大家的認知並不清晰。
  • 馬蜂窩數據中臺起步建設:數倉的架構、模型與應用
    我認為數據中臺的概念非常接近傳統數據倉庫+大數據平臺的結合體。它是在企業的數據建設經歷了數據中心、數據倉庫等積累之後,藉助平臺化的思路,將數據更好地進行整合與統一,以組件化的方式實現靈活的數據加工與應用,以更清晰的數據職能組織應對業務的快速變化,以服務的方式更好地釋放數據價值的一種方式。
  • 貴陽經開區:搭建城市數據中臺打造數字經濟發展新引擎
    這些終端設備均與經開區城市數據中臺連接,實時採集數據。數據經過分析後,形成數據資產,助力「三感社區」建設,而這也是經開區搭建城市數據中臺的目的之一。 作為新基建的重要組成板塊,經開區建設城市數據中臺,目的是搭建一張覆蓋全區的數字「網」,實現「三感社區」、產業發展、商貿街區、生態環境、交通出行、市政管理、政務服務等七大領域數據的存、通、治、用,為各行業提供智能化解決方案,不斷解決社會痛點,打造數字經濟發展新引擎。
  • 36氪研究院:《 2020 年中國服裝行業數據中臺研究報告》(附下載) |...
    在新冠肺炎疫情陰雲籠罩全球的背景下,企業數智化轉型更具現實意義,數智化程度高的企業往往擁有順勢而為、逆風翻盤的高效應變能力。然而數智化對於服裝行業而言,卻是一個稍顯尷尬的命題:最早試水,卻涉「水」未深。服裝企業較早地將數位化管理工具應用在客戶、庫存管理方面,海量經營數據散落在並未互通的數字系統中,由此引發的數據孤島效應削弱了數據反哺業務增長的能力,更無需言數據與企業組織及生態的聯動。
  • 保險公司為什麼要標配數據中臺?
    在[看懂經濟]看來,雙方在集團級數據中臺的建設合作上,更值得品味。數據中臺,是阿里首創並實踐過的解決方案,被公認為數字時代讓企業數據資產化產生價值的關鍵要素架構。中國太平洋保險集這樣領頭型保險企業選擇上馬數據中臺,可能對於整個行業都有著極強的示範效應,未來各家保險公司數位化轉型過程中,數據中臺乃至數據資產化極有可能成為標配。
  • 數據新世代,萬物皆可中臺:2020中國數據中臺行業發展簡析 | 甲子智庫
    2020年,備受關注的數據中臺怎麼樣了作者 | 劉瑤指導 | 江濤2019年,中國數字經濟規模達到358,402億元,佔當年GDP比重的36.2%,而2014年數字經濟佔當年GDP比重為僅為26.1%,在數字經濟發展的大背景下,企業自身的數位化建設和對數據的應用已成為企業戰略、治理及運營的關注重點。
  • 白雲|首屆數據創新應用大賽啟動
    其中,10個定向賽題來自白雲區相關職能部門的實際需求,涉及氣象、水務、生態、公安、市監、城管、衛健、教育等領域,主辦方期待參賽者利用開放數據拿出針對性解決方案;無限創意賽道則不限方向、不限場景,鼓勵參賽者發揮奇思妙想,同時也歡迎企業、科研機構結合大賽提供數據應用範例。
  • 逸迅科技入選《愛分析 · 中國數據智能應用趨勢報告》,解碼數據...
    近日,中國領先的產業數位化研究與諮詢機構愛分析對外正式發布了《愛分析·中國數據智能應用趨勢報告》。逸迅科技憑藉「基於數據中臺的航空行業應用高場景規劃與落地案例」實力入選。以下為報告部分精選內容摘錄。數據中臺的應用場景規劃數據中臺的價值最終需要通過在業務場景的數據應用來體現,因此,必須應用場景規劃先行。不同行業、不同企業處在不同階段所需要的數據中臺是不同的,企業基於明確的戰略和業務目標建設數據中臺,進而也有可預期的業務場景落地。
  • 數據中臺、數據湖到底是怎麼回事兒?
    鄭志升bilibili | 實時平臺負責人鄭志升,大數據實時體系負責人,加入B站前曾任職於阿里巴巴。主導涵蓋「數據埋點-實時傳輸接入-實時計算-開發應用」全鏈路的中臺建設,目前重點關注實時(含增量)的傳輸與計算,實時機器學習等方向。
  • 談數據:微服務環境下,數據如何治理?
    前段時間,我的一個小夥伴跳槽到了某大型國有企業,剛到公司不久,老闆給交給他一個重要項目——公司的數據中臺規劃。老闆交代:「要搞一個數據中臺架構,涵蓋數據資產管理、數據治理、數據分析等,同時這個數據中臺,要體現去中心化,甚至無中心化的理念」。
  • 數據+中臺,如何做到1+1大於2 明略科技數據中臺負責人劉國棟
    小數據時代的單一決策者或者小型團隊的決策模式,已經無法在新時代背景下確保組織決策的穩定性、響應速度、執行體系的關聯和快速的業務迭代。組織應該如何打造智能決策體系?數據中臺是實現高效決策的基座。圖注:明略科技數據中臺負責人劉國棟數據中臺是一套涵蓋IT基礎體系規劃、組織架構、運營管理與服務支撐的完整體系,相互聯動協同支撐組織決策。通過數據中臺的建設,組織可以在關鍵決策緯度和環節進行數位化。
  • 數據中臺的雲原生機會|甲子光年
    一臺主機可能只能虛擬出上百臺虛擬機,但可以虛擬出上千個容器;同時,容器的啟動時間更快,佔用空間更小,而且可以根據實際應用的大小來彈性分配資源,企業無需額外採購伺服器。 容器的另一個好處則是滿足了多雲管理的新需求,它就像一個水瓶,可以把水當做應用「打包起來」,這樣,當企業開發新應用時,就不需要直接調度「水」,僅需調度水瓶,實現在公有雲、私有雲之間的無縫發布。
  • 產業網際網路時代,易商數科數據中臺助力保險企業彎道超車
    易商數科數據中臺是「大中臺戰略」的重要組成之一,包括數據平臺建設、數據資產治理和大數據AI應用。充分挖掘數據價值,打造「業務-數據-資產」的閉環,從而通過數據洞察力,實現降本增效、商業模式迭代,促進業務快速發展。當下的技術發展深刻地影響和改變著各行各業的競爭格局。
  • AI為針,數據為線,編織「城市治理」到「城市智理」新圖景
    A:2017年信義科技與廣電運通聯姻後,已經跳出工程建設的範疇,更多地朝城市治理、數據智能系統建設領域發力。城市治理中的雪亮工程、平安城市的重心在數據感知採集,主要把視頻數據、wifi數據等其他數據收集上來,再做數據計算處理。
  • 中國證券業協會擬開展2020年重點課題研究工作
    ;上市公司多元化退市機制研究;上市公司信息披露有效性和公司治理規範化研究;上市公司環境、社會責任和公司治理(ESG)信息披露制度研究;上市公司財務舞弊行為防範與智能化監管研究;上市公司違法違規行為監管與防範研究;上市公司併購重組中的商譽問題研究;境外上市公司回歸A股問題研究;上市公司發展生態與履行社會責任研究等。