2014年11月19日，全球領(lǐng)先的存儲(chǔ)解決方案提供商希捷科技公司（NASDAQ：STX）日前宣布推出ClusterStor Hadoop工作流加速設(shè)備，該新型解決方案提供各種工具、服務(wù)和支持，適用于高性能計(jì)算（HPC）客戶，可滿足他們通過最佳性能的存儲(chǔ)系統(tǒng)實(shí)現(xiàn)大數(shù)據(jù)分析的需求。Hadoop工作流加速設(shè)備包含全套Hadoop優(yōu)化工具、服務(wù)和支持，可以利用和增強(qiáng)ClusterStor的性能；ClusterStor是市場(chǎng)領(lǐng)先的橫向擴(kuò)展型存儲(chǔ)系統(tǒng)，專門用于大數(shù)據(jù)分析。計(jì)算密集型的高性能數(shù)據(jù)分析（HPDA）環(huán)境可以利用Hadoop工作流加速設(shè)備大幅度縮短數(shù)據(jù)傳輸時(shí)間。該解決方案還帶有Hadoop on Lustre連接器，因此無須在文件系統(tǒng)或存儲(chǔ)設(shè)備之間移動(dòng)數(shù)據(jù)，Hadoop和HPC Lustre兩種集群便能夠使用完全相同的數(shù)據(jù)。

IDC公司高性能計(jì)算研究副總裁Steve Conway表示：“數(shù)據(jù)密集型計(jì)算長(zhǎng)期以來都是HPC的一部分，但是采用Hadoop等方法的最新分析方式，如圖形分析方式，將促進(jìn)高性能數(shù)據(jù)分析的強(qiáng)勁增長(zhǎng)，這便是需要HPC的大數(shù)據(jù)市場(chǎng)。Hadoop工作流加速設(shè)備可服務(wù)于這個(gè)不斷融合的大數(shù)據(jù)HPC市場(chǎng)的技術(shù)計(jì)算和商業(yè)層面，IDC預(yù)計(jì)該市場(chǎng)將于2018年超過40億美元。IDC研究顯示，29%的HPC站點(diǎn)已經(jīng)采用了Hadoop。能夠提升Hadoop性能和效率的工具將在這個(gè)市場(chǎng)找到用武之地。”

Hadoop工作流加速設(shè)備支持基于開源Apache Hadoop的Hadoop產(chǎn)品。希捷攜手各領(lǐng)先的Hadoop廠商，為HPC客戶提供同類最佳的解決方案，并且未來還將實(shí)現(xiàn)Hadoop工作流加速設(shè)備和其它Hadoop產(chǎn)品之間更加緊密的集成。

希捷公司云系統(tǒng)和解決方案部門ClusterStor業(yè)務(wù)副總裁Ken Claffey表示：“企業(yè)不僅希望管理好他們從各種渠道收集的海量數(shù)據(jù)，而且還希望能夠從中獲取新的分析結(jié)論，從而得到有用的信息并提高運(yùn)營(yíng)效率?，F(xiàn)在有了Hadoop工作流加速設(shè)備的協(xié)助，希捷屢獲殊榮的ClusterStor橫向擴(kuò)展型HPC解決方案便可使企業(yè)能夠優(yōu)化其大數(shù)據(jù)工作流程，并將數(shù)據(jù)存儲(chǔ)集中化，最終實(shí)現(xiàn)各種高性能數(shù)據(jù)分析解決方案。TeraSort基準(zhǔn)測(cè)試結(jié)果顯示，基于相同的硬件時(shí)，Hadoop工作流加速設(shè)備的性能超過Hadoop分布式文件系統(tǒng)（HDFS）上的Hadoop產(chǎn)品高達(dá)38%。Hadoop工作流加速設(shè)備能夠滿足客戶的性能需求，并可以優(yōu)化Hadoop系統(tǒng)部署設(shè)備的性能，因此能夠幫助客戶迅速獲得數(shù)據(jù)密集型工作負(fù)載和硬件配置的分析結(jié)果?！?/p>

希捷ClusterStor系統(tǒng)創(chuàng)新的橫向擴(kuò)展型HPC架構(gòu)能夠?qū)崿F(xiàn)一個(gè)集中的數(shù)據(jù)庫(kù)，使得HPC和Hadoop兩種分析工具能夠同時(shí)利用ClusterStor的相同數(shù)據(jù)集。Hadoop工作流加速設(shè)備從每項(xiàng)任務(wù)伊始便立即開展Hadoop數(shù)據(jù)處理，從而極大地縮短了獲得分析結(jié)果的時(shí)間，并且還可以減少?gòu)莫?dú)立數(shù)據(jù)庫(kù)批量拷貝大量數(shù)據(jù)的冗長(zhǎng)步驟。有了這個(gè)加速設(shè)備，Hadoop環(huán)境便能夠獨(dú)立擴(kuò)展計(jì)算和存儲(chǔ)資源，從而提高優(yōu)化分析資源的靈活性，同時(shí)還支持100PB級(jí)存儲(chǔ)容量的集中化高性能數(shù)據(jù)庫(kù)。endprint