照美國管理學家柯維先生的時間四象限法，可以把事務劃分為重要緊急、重要不緊急等四種狀態(tài)。其中，重要緊急的事情，是要立即投入付諸實踐的事情，也 就是常說中的重中之重。如果按照這個標準來劃分，在存儲系統(tǒng)選擇和應用上，怎樣合理分配閃存、軟件定義和對象存儲的權重和優(yōu)先級呢?
從數據臨界點說起
IBM存儲有一個數據臨界點的說法。按照IBM的詮釋，所謂數據臨界點不僅包括海量數據， 同時也包括對于數據使用。其實，不論是海量數據存儲，還是存儲數據的使用，都是用戶當今的痛點。
有數據顯示：2020年全球數據總量會達到40ZB。到2019年，大數據存儲容量需求將達到20EB，其存儲設備價值會達到27億美元。也許 會有用戶認為，其來自數據的壓力并不大，實際上，更有可能的情況是：用戶數據保護方式以及業(yè)務應用進展水平有所欠缺，例如每天的郵件數據、工作日志、甚至 辦公文檔，這些各種各樣的資料并沒有得到保護，很多時候，用戶還在刪除這些數據，棄之如敝履。
不可否認，隨著科研和業(yè)務應用的不斷發(fā)展會產生大量的數據，以清華大學國家蛋白質設施計算中心蛋白組學研究為例，對同一個生物蛋白質樣品，冷凍 電鏡需要以量取勝，要產生幾十萬張照片來研究該蛋白質樣品。該中心配有4臺世界頂尖的電鏡，這類電鏡全球不超過20臺，一張按照7GB計算，單臺電鏡每天 產生的存儲量就有28TB之多，加起來每年就會有接近10PB的數據存儲量，可謂規(guī)模驚人。如果未來電鏡照相機有進一步革新，這個數據量還會提升。
類似的中體彩掌管著全國的體育彩票，不同于福利彩票，其IT系統(tǒng)采用全國統(tǒng)一模式，為遍布全國的15萬彩票終端站以及在線系統(tǒng)提供集中發(fā)行、銷 售、管理、兌獎等一系列服務。隨著移動互聯(lián)網的發(fā)展，電子彩票勢在必行，屆時預估其日均并發(fā)交易量峰值，將會達到每秒鐘8000筆，這個交易量將接近淘 寶，盡管每筆交易金額比較小，只有2元錢，但是數據規(guī)模驚人。如何保障交易的平滑流暢，龐大數據量如何存儲，如何應對機房空間不足以及能源的挑戰(zhàn)，這都會 成為現(xiàn)實的問題。
2016年3月，中國閃存聯(lián)盟面向100個行業(yè)，征求100個典型存儲應用場景和需求，包括IBM、集商、獨立軟件開發(fā)商在內的智庫專家，將針 對這些這些據存儲的痛點提供針對性解決方案。從進展的情況來看，征集上來的需求涵蓋政府、金融、醫(yī)療、制造業(yè)、房地產、能源、通信、交通、教育、零售等十 余個行業(yè)，項目的需求基本上就是圍繞著數據存儲以及數據的使用，與IBM數據臨界點的判斷完全吻合。
兵來將擋，水來土掩
針對數據臨界點的不同需求，需要采取不同的應對之策。
在100典型應用場景中，海通證券的情況比較具有典型性，據海通證券信息部副總經理王洪濤先生介紹， 2013年，海通證券客戶規(guī)模達到了500萬，如遇券商之間并購，則系統(tǒng)并發(fā)訪問需求還會激增，實際上，當時高峰期間系統(tǒng)的訪問量已經超過了每秒1萬筆的 水平，如果同時滿足查詢需求，系統(tǒng)就已經有緩慢跡象，用戶體驗變差。此外，這個期間，系統(tǒng)的清算時間長達6個小時，加上證監(jiān)會數據報送，以及證券投資者保 護基金等，系統(tǒng)的性能接近預警。與此同時，由于采用托管機房，其空間和電力資源非常緊張。
針對存在的問題，海通證券對系統(tǒng)進行了更新，鑒于集合競價、盤中突然跳水、或者尾市集合競價的業(yè)務特點，幾個交易密集時間點的系統(tǒng)IOPS要求 較高，為此，他們選擇使用了IBM FlashSystem V9000全閃存陣列的方案。系統(tǒng)上線之后，系統(tǒng)I/O明顯得到了改善，以往I/O等待在8%～10%左右，如今，I/O等待的情況基本消失。系統(tǒng)并行清 算也從以往耗時8小時降到2小時左右，系統(tǒng)性能大大提升。與此同時，系統(tǒng)能耗從以往的3000W～5000w,降低到300w左右的水平;空間的節(jié)省更是 顯著。
“以往很多行業(yè)將生產淘汰的系統(tǒng)利舊用于測試，我覺得這樣的觀點應該更新一下，我們所有測試設備都是用最新、最好、最快的設備，如此可以加快測試速度，提高人力資源的效率，也更加符合實際的使用情況。”王洪濤說。
談到全閃存陣列，價格成本往往會成為很多用戶的攔路虎。如果這個障礙不掃除，所謂數據臨界點中，性能瓶頸不容易被打破。對此，必需要用技術的辦 法加以解決和克服。以IBM剛剛發(fā)布的A9000為例，加入了非常多的企業(yè)級功能，如數據壓縮和重復數據刪除等。對此，IBM對外有一個1:5的容量承 諾，即如果用戶購買的存儲容量是100TB，IBM承諾用戶可以使用500TB的閃存空間。從TB成本計算，IBM A9000的成本將低于傳統(tǒng)磁盤陣列。成本障礙的掃除，顯然會加速閃存技術應用和普及。
除了性能之外，云存儲也是應對海量數據比較現(xiàn)實的選擇。一方面，IBM A9000和A9000R沿用了XIV的架構，用來構建企業(yè)私有云存儲;另外一方面，用戶也可以單獨買軟件，軟件授權可以用于其他產品，甚至用X86，構 建自己專屬的云存儲系統(tǒng)。這個被稱為“光譜軟件”套件，改變了原有軟件和硬件綁定的方式，賦予了用戶更加廣泛的靈活性。
應對海量數據壓力，特別當用戶數據達到PB之后，對象存儲技術就會成為一個不可或缺的技術，為此IBM斥資13億美元收購了商業(yè)對象存儲公司 Cleversafe，其管理的用戶數據規(guī)模在100PB以上，可以放在云端，也可以由客戶采購，放在客戶私有環(huán)境中使用，就數據存儲成本來看，甚至低于 公用云的水平。
海量數據存儲有助于用戶解決合規(guī)和監(jiān)管的問題，以銀行理財雙錄要求為例，銀行需要把錄音、錄像資料加以存儲和保存，顯然這些數據將是海量的數 據。但是隨著市場競爭的加劇，這些數據僅僅是存儲還是不夠的，還要更多結合到用戶服務中去。以連用科技為例，他們在Cleversafe的基礎上為銀行用 戶構建了業(yè)務文件云服務，以ATM存取款為例，用戶可以通過手機APP，方便調用和查詢相關的影像以及數據，如此可以大幅改善服務水平，樹立競爭優(yōu)勢。
“一方面我們提供海量數據存儲應用，另一方面，我們也從用戶的應用入手，幫助他們提升服務，盤活數據的價值，開展基于數據的業(yè)務創(chuàng)新。” 連用科技總經理張哲先生說。
他指出，目前一些開源軟件也能夠提供對象存儲技術，很多行業(yè)工程師對此樂此不疲。但很多時候，系統(tǒng)在可靠性和可用性上達不到要求，導致數據丟 失。“采用類似Cleversafe這樣的成熟商用軟件，其可靠性可以達到9個9，可用性可以達到6個9，如此，我們就可以將更多精力集中在數據與業(yè)務應 用結合，這才是企業(yè)級應用該有的方向。” 張哲說。
小結
無論對于存儲也好，還是對于閃存也好，不同的應用場景，就會有不同的權重和優(yōu)先級。并不存在一個所謂放之四海的解決方案。就像IBM所說的，數 據臨界點不僅有海量存儲的問題，也有數據使用的問題。在這個過程中，有些需要重點解決性能的問題，有些要解決海量存儲的問題，有些要結合數據應用的問題， 因此應該區(qū)別對待。
另外，榜樣的力量是無窮的。中國閃存聯(lián)盟100個應用場景，智庫專家的解決方案，接下來就如星星之火，必將推動突破數據臨界點。據了解，接下來 中國閃存聯(lián)盟的行動會繼續(xù)升級，第六季將加大對閃存生態(tài)的建設，開設萬人大課堂閃存技術培訓。IBM方面，也會開通7×24小時“淳哥在線”服務，不間斷 提供技術支持服務，加速行業(yè)應用解決方案的落地。總之一句話，一個屬于數據臨界點的時代已經到來!
分享到微信 ×
打開微信，點擊底部的“發(fā)現(xiàn)”，
使用“掃一掃”即可將網頁分享至朋友圈。
轉型的最終目的 -提質降本增效
