億級用戶背后,0差錯系統運維是如何做到的?——專訪天弘基金運維與質量管理部負責人王祥
日期:2018-05-22    來源:    瀏覽次數:2328次
天津,五大道,馬場道59號。
這是天弘基金的大后方。信息技術、基金運營、客服服務……這些部門全都扎根于此。如果不是IT、運營、客服的強大后盾,面對余額寶為天弘基金帶來的巨大規模,壓力將無法想象。
在余額寶項目之前,天弘基金是一家排名50左右的基金公司,IT部門只有6名員工,與大型基金公司相比,IT基礎設施、人員管理和能力都很薄弱。
回想起余額寶上線一周后的場景,用戶數突破100萬,每天的交易筆數呈幾何級數增長,對于天弘基金來說,歡欣鼓舞的同時,IT部卻異常緊張。
余額寶上線之后,用戶數大幅提升的同時,系統運維應該如何做?

余額寶的運維挑戰
系統幕后的運維人員,他們最擔心網絡中斷、應用卡頓、響應速度慢,服務宕機……
運維人員就需要早早地做好多套預備方案,并時刻緊繃著神經。他們在后端有多少不眠不休的夜晚,不得而知。
余額寶之后的天弘基金,大大小小的系統加起來,有將近100套。運維工作非常辛苦,有時候突發一些狀況,一干就是24小時。
“我覺得信息技術的的扮演角色完全是取決于公司對信息技術的定位,IT部門在公司的經營運作中的作用巨大,特別是在提高運作效率和降低營運成本方面,以及運用技術能力推動公司在行業競爭中取得優勢。”天弘基金運維與質量管理部負責人王祥說。
余額寶系統上云以后,天弘基金的IT團隊又面臨幾個新的問題。
首先是解決人的問題,天弘基金不惜一切代價迅速提高IT的開發能力和運維水平,同時加強系統安全管理;其次,余額寶系統在業務層面實現自主研發,開發效率和項目管理能力需要不斷提升;第三,不斷提高系統性能,保證系統的冗余,系統的任何一個環節不出現任何單點;第四,加強余額寶系統的自動化運維,不斷完善監控體系。
在余額寶上線之前,天弘基金運維工作按照傳統的信息系統運維做法,有條不紊地進行著,但余額寶是直接部署到云上的,整體的信息資產部署也很大,需要通過互聯網的方式進行運維部署。
基于此,天弘運維管理的建設工作基本上是圍繞著工作流程標準化、自動化這兩個方面進行。工作流程標準化是一切的基礎,標準化的落地質量決定運維工作具有橫向縱向的可比性度量出運維的成本、質量以及效率。自動化方面從腳本、工具再到運維平臺的持續建設確保運維交付能力的改進及落地,比如統一日志平臺、完備的監控、混合云架構的資產管理、沙箱、容器化及持續集成等。
“互聯網的解決方案,可以提供更快的迭代速度,因為互聯網化的產品,它的產品周期短。系統在設計階段,就應該投入很多精力去做。這與原先的非互聯網產品區別是很大的。”
余額寶系統每天處理億級的交易流水,余額寶打通了支付環節,是交易環節中非常重要的一環,每年雙十一的數據將是基金行業難以想象的天文數字,天弘基金已然做足了充分的準備。

智能時代的IT支持
隨著大數據、云計算、人工智能、區塊鏈應用的不斷普及,金融服務擁有了更高的效率,同時基于新技術工具的變革與創新也為業務的發展帶來新的機遇。目前,金融機構還處于進行業務結合與應用階段,隨著時間的推進與技術門檻的降低,智能化的未來前景廣闊。
天弘基金擁有3億用戶,在龐大用戶群體下,可以做很多的AI的研究和嘗試,比如對宏觀的經濟預測對產業的預測,不是僅僅停留在以前理論層面上,而是可以通過數據來進行探索。
在這個背景下,IT也變得越來越重要。“IT提供的一些比較先進的技術手段,已經不再是為自己服務,而是為了整個公司服務,如何通過智能化的手段,將公司業務進行串聯,是我們如今思考的問題。”王祥說。
大數據時代,不管是投資還是風險管理,其決策都將日益基于數據和分析,并非僅基于經驗和直覺。一旦風險能夠被“更精確地預知”,那么這種能力將成為公司寶貴的資產,形成不可替代的強大競爭力。
隨著金融創新步伐加快,市場風險、信用風險和流動性風險的管理日趨重要,天弘基金風險管理將“預測+應對”相結合,不僅應對式地關注組合的風險指標,還要更前沿地觀測并預判市場波動以及波動產生的風險傳導。
要實現這種“預測+應對”的風險管理體系,必須充分發揮信息技術、大數據、云計算的特長,通過采用行業領先的開源技術架構與先進的互聯網設計思想將各類風險管理模型封裝進風險管理系統進行管理。
譬如針對貨幣基金的流動性風險,天弘基金構建了一套涵蓋資產端和負債端的流動性風險管理體系。資產端方面,天弘基金將協議存款到期、正回購到期、逆回購到期、管理費、利息、清算備付金等納入,計算T0的資金缺口及未來的資金流入流出分布。負債端方面,引入大數據與用戶分層刻畫等技術構建投資者申贖預測模型,可實現涵蓋T+0、T+1、T+30的預測,準確率高達95%以上,誤差小到在1%左右,有效提高了基金申購贖回的預測能力。
針對貨幣基金偏離度風險,天弘基金對引發貨幣基金偏離度的資產進行歸因分解并進行排序,以便基金經理進行決策。更重要的是,天弘基金將場內交易和場外交易打通構建收益率曲線,對偏離度進行實時分析。通過試算功能,基金經理能掌握每一單交易對偏離度產生的影響,并根據偏離度控制目標進行調整。
在信用風險管理方面,天弘基金組建了信用分析團隊,利用“鷹眼系統”和“財務穩健模型”,根據企業信用資質進行嚴格篩選投資備選標的,把產能過剩行業債券、負面展望債券、負面報道債券剔除;同時,天弘基金還對持倉債券進行跟蹤監控;定期進行深度分析及梳理,對信用資質可能發生潛在惡化的債券,限期進行賣出處理,嚴格控制信用風險。

擁有強大客戶和數據資源的天弘基金正在基金行業走著一條特立獨行的道路,余額寶也給天弘基金的未來提出新的挑戰,如何做出更多創新產品,如何讓IT繼續成為業務堅強的后盾,天弘基金不斷努力著。

分享到:
與我們互動
Copyright ? 2019 Hundsun Technologies Inc. All Rights Reserved 浙ICP備09092082號-5 浙公網安備33010802003988號
香港六合图库