從早期交易信息的保留到為客戶開發(fā)、交易指導(dǎo)、風(fēng)險(xiǎn)控制提供決策支持,期貨行業(yè)的數(shù)據(jù)在現(xiàn)在的數(shù)字時(shí)代產(chǎn)生了巨大的能量。作為期貨行業(yè)的龍頭,海通期貨多年來為投資者提供了可靠的交易平臺,其業(yè)務(wù)規(guī)模長期穩(wěn)居行業(yè)前五。面對近年來業(yè)務(wù)的蓬勃發(fā)展和交易數(shù)據(jù)量的爆炸,海通期貨與深信合作,采用深信企業(yè)級分布式存儲EDS承載核心業(yè)務(wù)數(shù)據(jù)庫,通過性能、可靠性、容量等方面的升級,為業(yè)務(wù)發(fā)展創(chuàng)造更堅(jiān)實(shí)的數(shù)據(jù)存儲基礎(chǔ)。
一、期貨行業(yè)迎來數(shù)據(jù)存儲新需求
通常期貨行業(yè)交易數(shù)據(jù)需要三套核心數(shù)據(jù)庫,其中存儲數(shù)據(jù)庫用于實(shí)時(shí)交易,滿足即時(shí)需求的結(jié)算分析數(shù)據(jù)庫用于同步存儲數(shù)據(jù)庫的交易數(shù)據(jù),提供結(jié)算和客戶關(guān)系管理(CRM分析)功能的歷史數(shù)據(jù)庫用于存儲所有歷史數(shù)據(jù)。為了滿足期貨行業(yè)的數(shù)據(jù)需求,數(shù)據(jù)存儲不僅需要高性能和可靠性,還需要提供足夠的空間,具體的業(yè)務(wù)場景對存儲的需求更加復(fù)雜。
為了保業(yè)務(wù)數(shù)據(jù)高并發(fā)對存儲性能提出高要求
為了保障價(jià)格的連續(xù)性,為了避免大幅度跳躍,期貨行業(yè)需要設(shè)置夜盤,實(shí)現(xiàn)數(shù)據(jù)的及時(shí)同步。以海通期貨為例,每天需要同步80萬行的交易數(shù)據(jù),同時(shí)也需要向歷史數(shù)據(jù)庫插入操作。另外,期貨行業(yè)的CRM分析是支持交易決策和行情分析的重要手段,大量的數(shù)據(jù)查詢操作要求存儲能夠迅速完成查詢結(jié)果的反饋,支持市場決策。這就對存儲的快速響應(yīng)能力提出了更高的要求。
2.重要數(shù)據(jù)的長期保存需要更可靠的存儲
期貨行業(yè)每天會產(chǎn)生大量業(yè)務(wù)數(shù)據(jù),重要的業(yè)務(wù)數(shù)據(jù)需要進(jìn)行妥善存儲以便隨時(shí)按需取用,然而海量數(shù)據(jù)的長期存儲對于期貨行業(yè)來說也充滿了挑戰(zhàn)。既包括隨機(jī)性較強(qiáng)的設(shè)備故障,人為操作因素,也包括外部層出不窮的惡意攻擊及病毒威脅,這些一旦發(fā)生將直接導(dǎo)致業(yè)務(wù)宕機(jī)甚至信息泄露。作為期貨數(shù)據(jù)的基礎(chǔ)建筑,現(xiàn)在的存儲具有抵抗外部威脅的能力,同時(shí)面對內(nèi)部的錯(cuò)誤操作、設(shè)備的破損等也具有嚴(yán)格的災(zāi)害容忍能力。
3.存儲擴(kuò)展和數(shù)據(jù)轉(zhuǎn)移需要規(guī)避風(fēng)險(xiǎn)
期貨行業(yè)數(shù)據(jù)存儲到一定年限后,面臨存儲容量的擴(kuò)展,數(shù)據(jù)轉(zhuǎn)移需要非常慎重,人工進(jìn)行大規(guī)模數(shù)據(jù)目前,期貨行業(yè)普遍采用傳統(tǒng)存儲,不僅擴(kuò)張受到限制,而且依賴于制造商的技術(shù)支持,用戶無法自己擴(kuò)張和存儲數(shù)據(jù)內(nèi)部轉(zhuǎn)移。
二、深信使海通期貨存儲創(chuàng)新
海通期貨作為業(yè)界領(lǐng)先的企業(yè),同樣面臨著高并發(fā)的數(shù)據(jù)存儲性能、數(shù)據(jù)存儲安全、擴(kuò)張和數(shù)據(jù)轉(zhuǎn)移等多方面的訴求,為了解決現(xiàn)在和未來面臨的存儲問題,海通期貨果斷與深信使合作,采用企業(yè)級分布式存儲EDS代替?zhèn)鹘y(tǒng)存儲1.面對從小時(shí)級到分的業(yè)務(wù)效率
面對海通期貨交易數(shù)據(jù)的高并發(fā)場景,深信EDS存儲實(shí)現(xiàn)了超過50W的IOPS,將原天清算后的交易結(jié)算從小時(shí)級縮短到分鐘級,在數(shù)據(jù)查詢方面,經(jīng)過對比測試,EDS比以前的存儲
2.多重可靠性機(jī)制下的數(shù)據(jù)安全防護(hù)
為了滿足重要數(shù)據(jù)的長期妥善存儲,深信服EDS存儲在可靠性方面進(jìn)行了全副武裝,一方面通過AI硬盤故障預(yù)測、容災(zāi)備份等多層防護(hù)機(jī)制規(guī)避各類不可控的內(nèi)部威脅,另一方面將深信服20年的安全能力賦能于存儲平臺,如SAVE引擎 小紅傘引擎的雙引擎病毒查殺,AI算法引擎病毒識別等整套的病毒防御以及處置方案,保障數(shù)據(jù)的安全性。
3.更加靈活的擴(kuò)張,更加放心的數(shù)據(jù)轉(zhuǎn)移
海通期貨前采用傳統(tǒng)存儲,傳統(tǒng)存儲擴(kuò)張受到機(jī)頭限制,3~5年后直接面臨擴(kuò)張瓶頸和整個(gè)機(jī)器交換時(shí)的數(shù)據(jù)問題。EDS存儲具有必要的彈性擴(kuò)展和數(shù)據(jù)自動轉(zhuǎn)移的優(yōu)點(diǎn),避免了存儲資源的過度投資,也避免了人工數(shù)據(jù)轉(zhuǎn)移的風(fēng)險(xiǎn)。
數(shù)據(jù)作為金融領(lǐng)域最基本的業(yè)務(wù)元,其重要性在當(dāng)前的數(shù)字時(shí)代不斷發(fā)展,呈現(xiàn)業(yè)務(wù)狀況,支持用戶決策,直接影響用戶業(yè)務(wù)的發(fā)展,EDS也深入金融業(yè)務(wù)場景