存儲(chǔ)技術(shù)分析師GregSchulz曾說(shuō)：大數(shù)據(jù)無(wú)與倫比，它擁有承載一切的能力。也就是說(shuō)目前市場(chǎng)上已經(jīng)存在多款獨(dú)立存儲(chǔ)工具，旨在幫助存儲(chǔ)管理員打理規(guī)模日益膨脹的大數(shù)據(jù)海洋。同樣在意料之中的是，其中大部分與Hadoop關(guān)系密切。
SGIInfiniteStorage
SGIInfiniteStorage通過(guò)虛擬化技術(shù)讓存儲(chǔ)轉(zhuǎn)化為一整套混合體系，其中既包含性能超群的閃存機(jī)制、又擁有成本低廉的磁帶方案。而這一切都建立在數(shù)據(jù)始終在線的基礎(chǔ)之上，也就是實(shí)現(xiàn)數(shù)據(jù)對(duì)用戶的透明化。SGIInfiniteStorage硬件及軟件生態(tài)系統(tǒng)是過(guò)去二十年來(lái)SGI解決大數(shù)據(jù)問(wèn)題的有力保障，同時(shí)也為全球范圍內(nèi)包括氣象預(yù)報(bào)、生命科學(xué)、制造業(yè)、媒體與教育等要求最嚴(yán)苛的數(shù)據(jù)管理環(huán)境提供應(yīng)對(duì)方案，SGI公司存儲(chǔ)產(chǎn)品營(yíng)銷(xiāo)部門(mén)主管FloydChristofferson指出。
EMCPivotalHD
說(shuō)起最新Hadoop發(fā)行版，EMC公司的PivotalHD絕對(duì)值得一提，它的作用在于將大數(shù)據(jù)與EMCGreenplum大規(guī)模并行處理(簡(jiǎn)稱MPP)數(shù)據(jù)庫(kù)相整合。借由一套名為HAWQ的引擎技術(shù)，EMC賦予了HadoopSQL流程在查詢及工作負(fù)載方面百倍以上的性能提升(據(jù)稱)。
DataDirectHadoopApacheHiveDriver
Hadoop最令人著迷的特性之一在于將非結(jié)構(gòu)化數(shù)據(jù)轉(zhuǎn)化為足以補(bǔ)充傳統(tǒng)分析工作情報(bào)缺失的寶貴資源。這項(xiàng)挑戰(zhàn)的難點(diǎn)在于如何將Hadoop當(dāng)中存儲(chǔ)的數(shù)據(jù)與現(xiàn)有商務(wù)智能及數(shù)據(jù)分析工具相對(duì)接。而根據(jù)ProgressDataDirect公司數(shù)據(jù)連接部門(mén)副總裁MichaelBenedict的說(shuō)法，DataDirectdriverforApacheHive號(hào)稱是惟一一款能夠在多套Hadoop發(fā)行版中實(shí)現(xiàn)開(kāi)箱即用的全兼容式驅(qū)動(dòng)程序。
如果沒(méi)有DataDirectHiveDriver的幫助，我們很難想象該如何訪問(wèn)并分析數(shù)據(jù)——Hadoop的容量如此龐大，用戶幾乎無(wú)法訪問(wèn)、尤其是快速訪問(wèn)到自己需要的信息，Benedict指出。而DataDirectHadoopDriver的意義正在于幫助用戶以實(shí)時(shí)方式從HiveDataWarehouse中訪問(wèn)信息、進(jìn)而簡(jiǎn)化數(shù)據(jù)分析的難度。
AdaptecHBA
PMC-Sierra公司剛剛為大數(shù)據(jù)存儲(chǔ)發(fā)布了一款主機(jī)總結(jié)適配器(簡(jiǎn)稱HBA)，這就是Adaptec71605H總線適配器(或者被稱為Series7H)。這些PCIeHBA在良好的兼容性前提下帶來(lái)了高性能I/O與低延遲表現(xiàn)。它們利用PMC的PM801816x6GSAS協(xié)議控制器并支持SAS與SATA接口。它們還能夠最高接入16款固態(tài)硬盤(pán)或磁盤(pán)驅(qū)動(dòng)器。HBA每秒能夠執(zhí)行超過(guò)百萬(wàn)次輸入/輸出操作(即IOPS)，數(shù)據(jù)持續(xù)吞吐量則達(dá)到6.6GB每秒。
HBA最重要的適用范圍在于數(shù)據(jù)中心環(huán)境下應(yīng)對(duì)大量接入存儲(chǔ)驅(qū)動(dòng)器的同時(shí)，還要為持續(xù)增長(zhǎng)的數(shù)據(jù)容量提供高密度存儲(chǔ)與低成本維護(hù)，PMC公司企業(yè)存儲(chǔ)部門(mén)產(chǎn)品營(yíng)銷(xiāo)主管ZakiHassan表示。Seris7HHBA在可用端口數(shù)量方面達(dá)到市場(chǎng)同類(lèi)商業(yè)解決方案的兩倍。這些端口數(shù)量龐大但卻更加低調(diào)的HBA幫助數(shù)據(jù)中心將壓縮運(yùn)營(yíng)成本、優(yōu)化存儲(chǔ)連接變?yōu)榭赡堋?/p>
AttunityRepliWebforEnterpriseFileReplication
AttunityRepliWebforEnterpriseFileReplication(即企業(yè)文件復(fù)制，簡(jiǎn)稱EFR)解決的是大數(shù)據(jù)技術(shù)面臨的另一個(gè)重要課題——如何對(duì)大規(guī)模存儲(chǔ)數(shù)據(jù)進(jìn)行復(fù)制。它的設(shè)計(jì)目的在于簡(jiǎn)化數(shù)據(jù)文件在ApacheHadoop數(shù)據(jù)集合之間的復(fù)制流程。Attunity公司全球營(yíng)銷(xiāo)副總裁MattBenati解釋稱，Hadoop平臺(tái)在設(shè)計(jì)初衷上只考慮到大量數(shù)據(jù)消耗狀況;然而某些企業(yè)可能還保留著一些較小的數(shù)據(jù)段，希望將其與大數(shù)據(jù)結(jié)合以進(jìn)行更加精確的業(yè)務(wù)分析。Attunity公司能夠幫助這類(lèi)企業(yè)用戶打理好從各類(lèi)渠道進(jìn)入Hadoop、有大有小的多種數(shù)據(jù)集。
Shadoop
Hadoop各款開(kāi)源發(fā)行版在安全功能方面的關(guān)注并不突出，針對(duì)這一狀況，商業(yè)發(fā)行版也就應(yīng)運(yùn)而生。這類(lèi)發(fā)行版通常會(huì)把訪問(wèn)控制及登錄等機(jī)制納入進(jìn)來(lái)。Shadoop為Hadoop集群帶來(lái)了以角色為基礎(chǔ)的訪問(wèn)控制機(jī)制，具備日志審計(jì)及Kerberos(由麻省理工學(xué)院開(kāi)發(fā)的一套安全認(rèn)證系統(tǒng))驗(yàn)證功能，EnterpriseManagementAssociate分析師ScottCrawford解釋道。
IBMInfoSphereGuardium
Crawford指出，現(xiàn)有數(shù)據(jù)庫(kù)安全方案市場(chǎng)已經(jīng)意識(shí)到大數(shù)據(jù)浪潮給自身帶來(lái)的巨大影響。雖然這一規(guī)模化數(shù)據(jù)管理領(lǐng)域蘊(yùn)藏著豐厚的財(cái)富，但目前還沒(méi)有多少足以應(yīng)用大數(shù)據(jù)技術(shù)挑戰(zhàn)的解決方案。不過(guò)情況正在發(fā)生變化。IBM公司就是這方面的先驅(qū)者之一。IBMInfoSphereGuardium專門(mén)針對(duì)大數(shù)據(jù)環(huán)境安全難題提供了應(yīng)對(duì)工具，Crawford如是說(shuō)。
RedHatStorageServer2.0
根據(jù)Linux基金會(huì)最近發(fā)布的一份報(bào)告稱，Linux已經(jīng)成為大數(shù)據(jù)實(shí)施的主要系統(tǒng)平臺(tái)。由此看來(lái)，紅帽公司在大數(shù)據(jù)存儲(chǔ)領(lǐng)域占有一席之地也就不難理解了。RedHatStorageServer2.0使得被保存及管理在某處的數(shù)據(jù)能夠接受多種企業(yè)工作負(fù)載的訪問(wèn)，紅帽存儲(chǔ)業(yè)務(wù)部門(mén)副總裁兼總經(jīng)理RangaRangachari表示。
鑒于目前數(shù)據(jù)規(guī)模的持續(xù)增長(zhǎng)，企業(yè)用戶已經(jīng)很難承受由此帶來(lái)的專用存儲(chǔ)需求，Rangachari解釋道。理想的解決辦法是將數(shù)據(jù)駐留在一套通用型企業(yè)資料庫(kù)中，并允許各類(lèi)企業(yè)工作負(fù)載隨時(shí)加以訪問(wèn)。
有鑒于此，紅帽公司已經(jīng)與英特爾開(kāi)展合作，意在創(chuàng)建一套更加理想的開(kāi)源大數(shù)據(jù)應(yīng)用。作為宏大構(gòu)想的第一步，紅帽充分利用英特爾近期推出的ApacheHadoop軟件發(fā)行版中的優(yōu)勢(shì)，將其與RedHatStorageServer2.0與紅帽企業(yè)Linux操作系統(tǒng)相整合。除此之外，紅帽公司開(kāi)發(fā)的StorageApacheHadoop插件也即將推向開(kāi)源技術(shù)社區(qū)，進(jìn)而成為企業(yè)Hadoop部署工作中的存儲(chǔ)選項(xiàng)之一。
紅帽公司在企業(yè)級(jí)大數(shù)據(jù)解決方案領(lǐng)域可謂獨(dú)領(lǐng)風(fēng)騷，而且根據(jù)IDC公司的預(yù)測(cè)，這部分市場(chǎng)總份額將由2011年的60億美元迅速增長(zhǎng)至2016年的238億美元，IDC公司分析師AshishNadkarni告訴我們。紅帽公司是僅有的幾家能夠提供綜合性大數(shù)據(jù)解決方案的基礎(chǔ)設(shè)施供應(yīng)商之一，這得益于該公司在本地或云交付模式領(lǐng)域所擁有的雄厚基礎(chǔ)設(shè)施解決方案及應(yīng)用平臺(tái)。
轉(zhuǎn)型的最終目的 -提質(zhì)降本增效
分享到微信 ×
打開(kāi)微信，點(diǎn)擊底部的“發(fā)現(xiàn)”，
使用“掃一掃”即可將網(wǎng)頁(yè)分享至朋友圈。