HighPerformanceParallelStorageSolution

高性能并行存儲解決方案ConfidentialSmallandMediaBusinessinDELLDELL中小企業(yè)客戶部主要內(nèi)容高性能并行存儲的應(yīng)用需求DELL高性能并行存儲產(chǎn)品DELL高性能并行存儲解決方案DELL高性能并行存儲解決方案的成功案例DELLCONFIDENTIAL2存儲的初步分類DELLCONFIDENTIAL3磁盤陣列NAS存儲高性能并行存儲數(shù)據(jù)中心按應(yīng)用層次劃分一、高性能并行存儲的應(yīng)用需求

什么時候需要高性能并行存儲隨著CPU性能的提高以及CPU多核技術(shù)的不斷發(fā)展，需要更多數(shù)據(jù)吞吐量才能滿足高利用率，這需要應(yīng)用更多的并發(fā)操作Clusterworkingspace越來越大的數(shù)據(jù)流

服務(wù)端和客戶端數(shù)據(jù)的傳輸達到GB甚至TB級I/O瓶頸NFS文件系統(tǒng)不能滿足更多客戶端同時訪問的應(yīng)用需求網(wǎng)絡(luò)帶寬限制更多I/O的應(yīng)用需求應(yīng)用對并行I/O的需求DELLCONFIDENTIAL4Localdata,HomedirectoriesWorkstationWorkgroupDepartmentSuperComputerNFSApplicationDataand

ScratchSpace方案背景

根據(jù)應(yīng)用大小和工作負載來規(guī)劃

500MB/sDivisionNFSHPCStorageSolution吞吐量應(yīng)用級別DELLCONFIDENTIAL5并行存儲－突破瓶頸性能超群Clusters=ParallelComputeParallelComputeneedsParallelIOMonolithicStorage(NFSservers)LinuxComputeClusterSingledatapathtostorage問題擴展困難帶寬和I/O受限存儲孤島缺乏靈活性價格昂貴線性擴展高帶寬和I/O統(tǒng)一存儲池易于管理降低成本ParalleldatapathsParallelStorageClusters好處LinuxComputeCluster并行存儲/并行文件系統(tǒng)高可擴展的文件型存儲FileServerNFSClusteredNFSFileServerFileServerNAS:NetworkAttachedStorageClusteredStorage:統(tǒng)一管理多個

NAS文件服務(wù)器.較好的綜合性能.ParallelClusteredStorage:文件服務(wù)器不局限于一個datapath.消除了性能瓶頸.ParallelNFSDELLCONFIDENTIAL8

二、DELL高性能并行存儲產(chǎn)品目標：

為客戶提供高性價比、高性能、易擴展和易管理的高性能并行存儲產(chǎn)品主要組成部分DELLPowerEdgeR510機架式服務(wù)器DELLPowerConnect6248以太網(wǎng)交換機并行文件系統(tǒng)

并行文件系統(tǒng)使得DELL不僅可以提供存儲的硬件產(chǎn)品，更能夠提供性能更好的存儲產(chǎn)品和解決方案，為云計算與虛擬化提供必要的公共存儲空間；

為了提高存儲容量和I/O性能，可以增加存儲服務(wù)器和磁盤陣列，采用標準的工業(yè)設(shè)備可以有效降低單位存儲空間的成本.DELL高性能并行存儲產(chǎn)品

DELLCONFIDENTIAL9DELL高性能并行存儲產(chǎn)品

ValuePropositionValuetocustomer(intier1cities)HugesteadyRead/Writeupto4GB/s最高4GB/s的I/OScalability–upto220TB(usablediskspace)最大220TB的可用存儲空間RemoveStoragebottleneck沒有網(wǎng)絡(luò)瓶頸Onlineexpansion方便的在線擴容LowPrice單位存儲空間上的價格優(yōu)勢DELL高性能并行存儲產(chǎn)品

方案配置DELLCONFIDENTIAL11元數(shù)據(jù)服務(wù)器規(guī)格2U型號DellPowerEdgeR510處理器配置備2個英特爾?

至強?5500/5600系列處理器內(nèi)存16G/24G內(nèi)存，確?！?G/CPU核RaidRaid1，5硬盤2*300G；12*2TSATA7200轉(zhuǎn)以太網(wǎng)卡板載英特爾千兆ET四連接口配接卡以太網(wǎng)卡一塊以太網(wǎng)卡（管理網(wǎng)段）電源非備援480W的電源DELL高性能并行存儲產(chǎn)品

方案配置DELLCONFIDENTIAL12對象存儲服務(wù)器規(guī)格2U型號DellPowerEdgeR510處理器配置備2個英特爾?

至強?5500/5600系列處理器內(nèi)存16G/24G內(nèi)存，確保≥2G/CPU核RaidRaid1，5硬盤2*300G；12*2TSATA7200轉(zhuǎn)以太網(wǎng)卡板載英特爾千兆ET四連接口配接卡，電源非備援480W的電源DELL高性能并行存儲產(chǎn)品

方案配置DELLCONFIDENTIAL13以太網(wǎng)交換機規(guī)格1U型號DellPowerConnet6248以太網(wǎng)交換機端口數(shù)量48個10/100/1000BASE-T自感應(yīng)千兆以太網(wǎng)交換端口上行模塊4個萬兆以太網(wǎng)上行模塊DELL高性能并行存儲產(chǎn)品

系統(tǒng)配置DELLCONFIDENTIAL14操作系統(tǒng)CentOSLinux5客戶端操作系統(tǒng)LinuxWindows7、Windowsserver2003、2008訪問協(xié)議Samba，F(xiàn)TP，HTTP訪問通道GbE，10GbE存儲容量/可用存儲容量96TB/80TB(可擴展)單對象存儲服務(wù)器的存儲容量/可用容量24TB/20TBDELL6248交換機1×元數(shù)據(jù)服務(wù)器4個以太網(wǎng)端口4×對象數(shù)據(jù)服務(wù)器16個以太網(wǎng)端口存儲容量的增加最多支持11個對象存儲服務(wù)器DellR510，最大可用容量220TBDELL高性能并行存儲產(chǎn)品

擴展性DELLCONFIDENTIAL15每個2TB的SATA盤的數(shù)據(jù)傳輸率以80Mbyte/s為標準對象存儲服務(wù)器中每一組做Raid5后磁盤的I/O性能持續(xù)寫速度：240MB/s持續(xù)讀速度：320MB/s單個對象存儲服務(wù)器的I/O性能持續(xù)寫速度：480MB/s持續(xù)讀速度：640MB/s高性能并行存儲（4個對象存儲服務(wù)器）的I/O性能持續(xù)寫速度：1.92GB/s持續(xù)讀速度：2.56GB/sDELL高性能并行存儲產(chǎn)品

I/O性能DELLCONFIDENTIAL16本方案支持三種層次的備份文件系統(tǒng)級(filesystem-level)

可以借助第三方備份軟件來完成

優(yōu)點：數(shù)據(jù)完全復(fù)制

復(fù)制方式簡單

缺點：占用網(wǎng)絡(luò)帶寬

完全備份數(shù)據(jù)量太大設(shè)備級(device-level)

對文件系統(tǒng)的單個存儲塊設(shè)備（MDT或OST）進行備份

數(shù)據(jù)的安全性依靠服務(wù)器的Raid5來保障文件級(file-level)

只備份關(guān)鍵數(shù)據(jù)DELL高性能并行存儲產(chǎn)品

數(shù)據(jù)備份機制DELLCONFIDENTIAL17客戶端當發(fā)現(xiàn)無法連接某一個客戶端時，存儲的服務(wù)端會回收屬于該客戶端的文件鎖及其他資源，并將其從服務(wù)列表中剔除，從而確保其他客戶端能夠訪問客戶端元數(shù)據(jù)服務(wù)器/對象存儲服務(wù)器客戶端發(fā)現(xiàn)無法連接到元數(shù)據(jù)服務(wù)器或?qū)ο蟠鎯Ψ?wù)器時，未完成的文件操作會被保留在內(nèi)存中，客戶端會試圖重新與元數(shù)據(jù)服務(wù)器或?qū)ο蟠鎯Ψ?wù)器建立連接當元數(shù)據(jù)服務(wù)器或?qū)ο蟠鎯Ψ?wù)器重新啟動后，就會開始恢復(fù)過程，首先將響應(yīng)出錯之前連接的所有客戶端，與它們進行數(shù)據(jù)同步，以確保數(shù)據(jù)一致性；此時元數(shù)據(jù)服務(wù)器或?qū)ο蟠鎯Ψ?wù)器將不會拒絕其他客戶端的請求，直到恢復(fù)結(jié)束元數(shù)據(jù)服務(wù)器對象存儲服務(wù)器當元數(shù)據(jù)服務(wù)器發(fā)現(xiàn)某一臺對象存儲服務(wù)器無法連接時，它標記這臺服務(wù)器，并試圖與這臺服務(wù)器重新建立連接，一旦連接重新建立，元數(shù)據(jù)服務(wù)器將和對象存儲服務(wù)器進行同步操作，以確保文件數(shù)據(jù)的一致性。而這個對象存儲服務(wù)器也會立即響應(yīng)出錯之前連接的所有客戶端，進行同步操作，來完成被掛起的文件操作。DELL高性能并行存儲產(chǎn)品

數(shù)據(jù)恢復(fù)機制DELLCONFIDENTIAL18DELL高性能并行存儲產(chǎn)品

典型操作界面DELLCONFIDENTIAL19DELL高性能并行存儲產(chǎn)品

典型操作界面DELLCONFIDENTIAL20全面的高性能并行存儲解決方案，支持完全的配置、測試、調(diào)優(yōu)和部署高可用性集群管理軟件高性價比高性能,線性擴展

近乎線性增長的I/O性能

單OSS提供20TBs的可用存儲容量

最高支持220TB的存儲容量

在線擴展，不需要中斷業(yè)務(wù)系統(tǒng)全面管理，擁有易用的Web界面MetaDataServer(MDS)DELLCONFIDENTIAL21DELL高性能并行存儲產(chǎn)品的優(yōu)點BaseOSS從整體架構(gòu)來看，大型的并行存儲系統(tǒng)由存儲子系統(tǒng)、I/O節(jié)點、客戶端和網(wǎng)絡(luò)組成。存儲子系統(tǒng)可以采用存儲區(qū)域網(wǎng)絡(luò)SAN、直接連接存儲DAS或者面向?qū)ο蟠鎯υO(shè)備OSD的存儲架構(gòu)。根據(jù)所采用的后端存儲子系統(tǒng)的不同，可以把并行存儲分為三種技術(shù)架構(gòu)，即SAN共享存儲架構(gòu)、并行文件系統(tǒng)架構(gòu)（集群文件系統(tǒng)架構(gòu)）和pNFS/NFSv4.1架構(gòu)。三、DELL高性能并行存儲解決方案

DELLCONFIDENTIAL22SAN共享存儲架構(gòu)

DELLCONFIDENTIAL23優(yōu)點：

高帶寬和高I/O性能高可擴展性存儲容量

I/O性能

高可用性：集群管理軟件缺點：成本高部署管理復(fù)雜擴展規(guī)模有限直連存儲系統(tǒng)架構(gòu)

DELLCONFIDENTIAL24優(yōu)點：

高帶寬和高I/O性能高可擴展性存儲容量

近乎線性的I/O性能增長

系統(tǒng)規(guī)模高可用性：集群管理軟件

成本低：通用的標準設(shè)備并行文件系統(tǒng)原理介紹目前主流的并行文件系統(tǒng)的主要組成部分通常包括：

元數(shù)據(jù)服務(wù)器MetaDataServer(MDS)

存儲元數(shù)據(jù)信息對象存儲服務(wù)器ObjectStorageServer(OSS)

存儲各種文件、數(shù)據(jù)

增加OSS的數(shù)量可以提高并行文件系統(tǒng)的數(shù)據(jù)傳輸率

客戶端Clients

與存儲有交互的、運行應(yīng)用軟件的各種設(shè)備

個人計算機MetaDataServer(MDS)ClientsOSSOSSOSS…DELLCONFIDENTIAL25

DELL高性能并行存儲解決方案的體系架構(gòu)DELLCONFIDENTIAL26MDS在并行文件系統(tǒng)中的功能是對目錄和文件名進行管理，并且為本地的一個或多個MDT提供網(wǎng)絡(luò)請求處理。MDS中的MDT存儲了文件的元數(shù)據(jù)(比如文件名、目錄名、權(quán)限信息和文件分布信息)。每個并行文件系統(tǒng)只能有一個MDT，一個基于共享存儲的MDT可以服務(wù)于多個MDS，但是同一時刻只能供一個MDS使用。如果當前active的MDS失效，則備用的MDS可以繼續(xù)服務(wù)MDT，并對client提供服務(wù)。

元數(shù)據(jù)服務(wù)器MetaDataServer(MDS)DELLCONFIDENTIAL27容錯機制：基于共享存儲的雙機熱備元數(shù)據(jù)服務(wù)器：Active/Standby模式每一個HAMDS通常包括兩臺R710作為MDS以及一套MD3220/3200磁盤陣列。元數(shù)據(jù)服務(wù)器MDS的HA機制DELLCONFIDENTIAL28OSS提供文件的I/O服務(wù)，處理本地的一個或多個OST的網(wǎng)絡(luò)請求。一般來講，一個OSS上服務(wù)2個到8個OST，每個OST的容量最大可以是8TB。ObjectStorageTarget(OST)：OST中存儲了具體的文件數(shù)據(jù)。一個并行文件系統(tǒng)可以有多個OST，每個OST服務(wù)于一部分的文件數(shù)據(jù)。一個文件不一定只存儲在一個OST中，為了優(yōu)化文件系統(tǒng)的性能，一個文件可以被分塊存儲在多個OST中，多個OST上的分條存儲是通過一個邏輯對象卷LogicalObjectVolume(LOV)來進行管理的。

對象存儲服務(wù)器ObjectStorageServer(OSS)DELLCONFIDENTIAL29

對象存儲服務(wù)器的failoverDEL