1、金融領(lǐng)域存儲(chǔ)方案設(shè)計(jì)殷 擎俞彥琪近年來計(jì)算機(jī)網(wǎng)絡(luò)信息系統(tǒng)在社會(huì)生產(chǎn)和生活中發(fā)揮著越來越大的作用?；谟?jì)算機(jī)技術(shù)的網(wǎng)絡(luò)信息系統(tǒng)在很大程度上改變了社會(huì)對(duì)信息的處理能力，因而得到了廣泛的應(yīng)用。對(duì)于金融企業(yè)來說，信息的高度共享、數(shù)據(jù)的平安可靠是系統(tǒng)建立中優(yōu)先考慮的問題，基于此，建立高性能的數(shù)據(jù)存儲(chǔ)網(wǎng)絡(luò)意義重大。領(lǐng)域介紹和數(shù)據(jù)存儲(chǔ)需求分析領(lǐng)域介紹“十八大提出將金融改革列為未來十年開展的重中之重，中國主要金融企業(yè)也都制定了“十二五開展規(guī)劃，將依靠構(gòu)建智慧型的數(shù)據(jù)分析體系MIS充分挖掘業(yè)務(wù)規(guī)律，以支持業(yè)務(wù)創(chuàng)新與效勞創(chuàng)新。從未來開展看，中國金融行業(yè)在“十二五時(shí)期將重點(diǎn)實(shí)現(xiàn)開展方式轉(zhuǎn)型：一，中國金融行業(yè)將建立全

2、面的風(fēng)險(xiǎn)管理體制，向嚴(yán)監(jiān)管轉(zhuǎn)型；二，從粗放式管理向精細(xì)化管理轉(zhuǎn)型，信息化重點(diǎn)也將從業(yè)務(wù)信息化向管理信息化轉(zhuǎn)變；三，從“利潤為中心和“保單為中心向“客戶為中心轉(zhuǎn)型。由此，未來幾年中國金融行業(yè)的IT投資規(guī)模將會(huì)持續(xù)增長。數(shù)據(jù)存儲(chǔ)需求分析金融大數(shù)據(jù)需要可擴(kuò)展性開放架構(gòu)做支撐。大數(shù)據(jù)量必然要求金融企業(yè)IT根底設(shè)施更易于數(shù)據(jù)的整合與集中、擴(kuò)展與伸縮，以及管理與維護(hù)，同時(shí)還必須具備良好的可靠性、可控性、平安性 。大數(shù)據(jù)在加強(qiáng)風(fēng)險(xiǎn)管控、精細(xì)化管理、業(yè)務(wù)創(chuàng)新等業(yè)務(wù)轉(zhuǎn)型中將起到重要作用。首先，大數(shù)據(jù)能夠加強(qiáng)風(fēng)險(xiǎn)的可審性和管理力度，支持業(yè)務(wù)的精細(xì)化管理。當(dāng)前中國銀行業(yè)利率市場(chǎng)化改革已經(jīng)起步，利率市場(chǎng)化必然會(huì)對(duì)銀行

3、業(yè)提出精細(xì)化管理的新要求。其次，大數(shù)據(jù)支持效勞創(chuàng)新，能夠更好地實(shí)現(xiàn)“以客戶為中心理念，通過對(duì)客戶消費(fèi)行為模式進(jìn)展分析比方事件關(guān)聯(lián)性分析，提高客戶轉(zhuǎn)化率，開發(fā)出不同的產(chǎn)品以滿足不同客戶的市場(chǎng)需求，實(shí)現(xiàn)差異化競(jìng)爭(zhēng)。在高頻金融交易、小額信貸、精準(zhǔn)營銷等領(lǐng)域加速推進(jìn)。目前大數(shù)據(jù)應(yīng)用已經(jīng)在金融業(yè)逐步推開，并取得了良好的效果，形成了一些較為典型的業(yè)務(wù)類型，如高頻金融交易、小額信貸、精準(zhǔn)營銷等。 高頻金融交易的主要特點(diǎn)是實(shí)時(shí)性要求高和數(shù)據(jù)規(guī)模大。最后，大數(shù)據(jù)在金融機(jī)構(gòu)的精準(zhǔn)營銷方面也有著巨大的價(jià)值。基于以上需求，金融行業(yè)對(duì)于大數(shù)據(jù)的存儲(chǔ)和應(yīng)用有著很大的需求。災(zāi)備需求銀行業(yè)已經(jīng)根本完成了省級(jí)業(yè)務(wù)和數(shù)據(jù)的大集中

4、，具備了比較強(qiáng)的容災(zāi)能力，但各地分行存儲(chǔ)藏份系統(tǒng)還需要進(jìn)一步加強(qiáng)。一旦全國這個(gè)數(shù)據(jù)中心發(fā)生災(zāi)難事件，那么全國范圍內(nèi)的分支機(jī)構(gòu)和開戶企業(yè)、個(gè)人都將失去自己的存款記錄、貸款記錄，不能開展業(yè)務(wù)，這樣的影響不是在一個(gè)市、一個(gè)省，而是在全國的范圍，后果難以想象。國外一些興旺國家，如：美國，在銀行業(yè)的存儲(chǔ)網(wǎng)絡(luò)建立上起步早，早在上個(gè)世紀(jì)70年代就有災(zāi)難備份的概念和效勞。在信息技術(shù)興旺的歐美國家均對(duì)銀行在保證數(shù)據(jù)完整性及業(yè)務(wù)連續(xù)性的責(zé)任上作出了明確的規(guī)定，在新加坡、中國香港金融管理局也對(duì)災(zāi)難備份提出了要求，由此可見銀行業(yè)數(shù)據(jù)的平安存儲(chǔ)對(duì)于銀行的生存至關(guān)重要。由于使用ATM機(jī)取款和刷卡消費(fèi)越來越普及，這就要求銀

5、行必須保證24X7的不連續(xù)運(yùn)行，以滿足超大量用戶的實(shí)時(shí)訪問，一旦宕機(jī)或者系統(tǒng)發(fā)生故障，不僅嚴(yán)重影響銀行業(yè)務(wù)的運(yùn)營，更將嚴(yán)重影響客戶滿意度。所以建議租用網(wǎng)絡(luò)存儲(chǔ)空間，保證您24X7的在線效勞。目前，銀行缺乏足夠的網(wǎng)絡(luò)維護(hù)人員。因此，高效的網(wǎng)絡(luò)存儲(chǔ)建立十分必要。構(gòu)建網(wǎng)絡(luò)式存儲(chǔ)，防止了巨大的額外支出，大大提高了存儲(chǔ)系統(tǒng)的利用率。具體需求應(yīng)用數(shù)據(jù)的全自動(dòng)備份：減少系統(tǒng)管理員的工作量；增加備份效率、壓縮備份時(shí)間；使數(shù)據(jù)備份工作形成制度化、科學(xué)化；消除備份過程因操作不當(dāng)導(dǎo)致的嚴(yán)重?fù)p失；聲稱遠(yuǎn)程保存的為災(zāi)難恢復(fù)目的的介質(zhì)。對(duì)介質(zhì)的有效管理：增加軟件對(duì)介質(zhì)存儲(chǔ)的限制，防止讀寫操作錯(cuò)誤；保存介質(zhì)內(nèi)容的電子記錄；

6、對(duì)數(shù)據(jù)形成分門別類的介質(zhì)存儲(chǔ)，使數(shù)據(jù)管理更加細(xì)致、科學(xué)；自動(dòng)校驗(yàn)介質(zhì)，確保介質(zhì)上的數(shù)據(jù)平安無誤。實(shí)現(xiàn)數(shù)據(jù)的集中管理：按備份效勞器形成數(shù)據(jù)中心，對(duì)各種應(yīng)用系統(tǒng)及其他信息數(shù)據(jù)形成集中的備份，減少每個(gè)應(yīng)用業(yè)務(wù)人員的工作負(fù)擔(dān)，免除客戶端備份的投資；形成數(shù)據(jù)管理策略，保證數(shù)據(jù)的平安性。實(shí)現(xiàn)數(shù)據(jù)的自動(dòng)恢復(fù)：業(yè)務(wù)人員可容易地自動(dòng)恢復(fù)文件的誤刪除；維護(hù)人員可以自動(dòng)恢復(fù)損壞的整個(gè)文件系統(tǒng)。建立歷史數(shù)據(jù)歸檔：保存大量歷史數(shù)據(jù)到電子介質(zhì)，為商業(yè)競(jìng)爭(zhēng)和企業(yè)開展保存第一手分析和歷史資料；有標(biāo)準(zhǔn)地歸檔，去除系統(tǒng)中被占用的空間以保證主機(jī)處于運(yùn)行狀態(tài)。實(shí)現(xiàn)數(shù)據(jù)的分級(jí)存儲(chǔ)管理HSM。7、防毒平安備份管理。數(shù)據(jù)特點(diǎn)分析和數(shù)據(jù)訪問

7、特點(diǎn)數(shù)據(jù)特點(diǎn)分析及時(shí)性有效性準(zhǔn)確性可靠性連續(xù)性可擴(kuò)性開放性多功能性5、平安性保密性數(shù)據(jù)訪問特點(diǎn)快速增長的金融行業(yè)不光面臨著市場(chǎng)變化快，產(chǎn)品更新快、營銷策略變化快、業(yè)務(wù)運(yùn)作變化快等挑戰(zhàn)，還面臨這信息平安存儲(chǔ)和及時(shí)訪問、信息的集中化存儲(chǔ)信息存儲(chǔ)整合、信息和數(shù)據(jù)的有效備份、及時(shí)的恢復(fù)、信息和數(shù)據(jù)的歸檔等技術(shù)應(yīng)用層面的難題。相比其他行業(yè)，他們要在一個(gè)集中的點(diǎn)上，管理全國乃至全球極大的交易數(shù)據(jù)需要瞬間數(shù)據(jù)訪問、高平安性和異地存儲(chǔ)等功能，金融機(jī)構(gòu)對(duì)于災(zāi)后恢復(fù)時(shí)間的容忍度是所有行業(yè)中最小的。存儲(chǔ)系統(tǒng)設(shè)計(jì)磁盤選擇選用DELL MD3600f磁盤陣列其規(guī)格為英寸 - 7,200 RPM近線SAS硬盤，容量規(guī)格為

8、2 TB接口類型因?yàn)椴捎媒€SAS硬盤，所以其接口為串行SCSI接口。盤塊個(gè)數(shù)由于該領(lǐng)域某單位或企業(yè)當(dāng)前實(shí)際數(shù)據(jù)量為2TB，預(yù)計(jì)該系統(tǒng)的數(shù)據(jù)每年增長量是30%按未來5年的需求設(shè)計(jì)，所以五年后數(shù)據(jù)量增加到2*(1+ ?？紤]到此工程我們考慮使用RAID10存儲(chǔ)，所以應(yīng)增加磁盤數(shù)量，所以數(shù)據(jù)量增到7.5*2=15TB所以此處在只考慮存儲(chǔ)數(shù)據(jù)，而不考慮業(yè)務(wù)連續(xù)性設(shè)計(jì)方案的情況下，應(yīng)購置MD3600f的數(shù)量為8個(gè)選擇RAID級(jí)別3.2.1 RAID10和RAID5比較RAID10和RAID5比照，這里拿同樣多驅(qū)動(dòng)器的磁盤來做比照(4個(gè)一樣的磁盤)，RAID5可以選擇3D+1P的RAID方案，RAID10

9、那么可以選擇2D+2D的RAID方案。從讀寫性能比較，讀方面兩者差異不大，但在寫性能方面，RAID5的寫代價(jià)為4，而RAID10寫代價(jià)只有2，寫性能角度RAID10要好于RAID5.從平安性角度考慮， RAID10的平安性高于RAID5。比方當(dāng)盤1損壞時(shí)，對(duì)于RAID10，只有當(dāng)盤1對(duì)應(yīng)的鏡象盤損壞，才導(dǎo)致RAID失效。但是對(duì)于RAID5，剩下的3塊盤中，任何一塊盤故障，都將導(dǎo)致RAID失效， 在恢復(fù)的時(shí)候，RAID10恢復(fù)的速度也快于RAID5。 要求較高的空間利用率，對(duì)平安性要求不是特別高、大文件存儲(chǔ)的系統(tǒng)采用RAID 5比較好。相反，平安性要求很高，不計(jì)本錢，小數(shù)據(jù)量頻繁寫入的系統(tǒng)采用R

10、AID 10的方式比較好。此處RAID10更加貼近于金融數(shù)據(jù)的存儲(chǔ)，因?yàn)榻鹑谛陬愵I(lǐng)域小數(shù)據(jù)量頻繁寫入，而且其數(shù)據(jù)對(duì)平安性的要求更高。綜上：選擇RAID10網(wǎng)絡(luò)存儲(chǔ)架構(gòu)選擇3.3.1 SAN介紹SANStorage Area Network 存儲(chǔ)局域網(wǎng)絡(luò)采用光纖通道Fibre Channel技術(shù)通過光纖通道交換機(jī)連接存儲(chǔ)陣列和效勞器主機(jī)，建立專用于數(shù)據(jù)存儲(chǔ)的區(qū)域網(wǎng)絡(luò)。在iSCSI出現(xiàn)以后，用以IP技術(shù)搭建的存儲(chǔ)區(qū)域網(wǎng)絡(luò)應(yīng)運(yùn)而生。以光纖搭建的存儲(chǔ)網(wǎng)絡(luò)是FC SAN，以iSCSI技術(shù)搭建的存儲(chǔ)網(wǎng)絡(luò)叫IP SAN。IP SAN基于十分成熟的以太網(wǎng)技術(shù)，使用標(biāo)準(zhǔn)的TCP/IP協(xié)議，數(shù)據(jù)在以太網(wǎng)上進(jìn)展傳

11、輸。新建立的SAN不但可以連接光纖通道設(shè)備，而且可以連接SCSI設(shè)備，這樣保護(hù)了用戶以前的投資。數(shù)據(jù)的可靠性和平安性在實(shí)際應(yīng)用中十分重要。在SAN中可以采用雙環(huán)的方式，建立存儲(chǔ)設(shè)備和計(jì)算機(jī)之間的多條通路，提高了數(shù)據(jù)的可用性；建立虛擬專用網(wǎng)絡(luò)可以提高數(shù)據(jù)的可靠性和平安性；同時(shí)在SAN中也可以通過建立雙機(jī)容錯(cuò)、多機(jī)集群，實(shí)現(xiàn)RAID校驗(yàn)等方式進(jìn)一步保證數(shù)據(jù)的平安性和作業(yè)的連續(xù)性。3.3.2 FC-SAN的優(yōu)缺點(diǎn)采用光纖通道Fibre Channel技術(shù)，通過光纖通道交換機(jī)連接存儲(chǔ)陣列和效勞器主機(jī)，建立專用于數(shù)據(jù)存儲(chǔ)的局域網(wǎng)絡(luò)。專用存儲(chǔ)網(wǎng)絡(luò)協(xié)議，傳輸速率高且穩(wěn)定性好，高擴(kuò)展性，配置靈活。熱插拔性、高

12、速帶寬、遠(yuǎn)程連接、連接設(shè)備數(shù)量大。4.本錢高，不能提供跨平臺(tái)文件共享。3.3.3 IP-SAN與FC-SAN的比較1數(shù)據(jù)傳輸性能方面的比較在實(shí)際的比照測(cè)試中說明在同樣的1Gbps的光纖鏈路FC與1Gbps的千兆以太網(wǎng)IP中進(jìn)展數(shù)據(jù)傳輸時(shí)，F(xiàn)C的實(shí)際利用率在70%80%左右，最高可達(dá)90%；而在千兆以太網(wǎng)中，其實(shí)際利用率平均在20%左右，最高也只能到達(dá)30%左右。在以太網(wǎng)中并不能提供針對(duì)存儲(chǔ)大數(shù)據(jù)量以及I/O應(yīng)用中所需要的好的性能。這也是在存儲(chǔ)局域網(wǎng)設(shè)計(jì)之初沒有考慮IP存儲(chǔ)的原因，雖然TCP/IP傳輸協(xié)議的出現(xiàn)較FCP傳輸協(xié)議出現(xiàn)得早。2存儲(chǔ)設(shè)備的構(gòu)造比較一般來說IP-SAN存儲(chǔ)設(shè)備的磁盤控制器

13、不是采用FC-SAN存儲(chǔ)設(shè)備中的硬件RAID芯片+中央處理器的構(gòu)造，而是每個(gè)磁盤柜中分為多個(gè)磁盤組，而每個(gè)磁盤組有一個(gè)微處理芯片控制所有的磁盤RAID操作采用軟件計(jì)算，效率較低和RAID組的管理操作。這樣一來，每一次磁盤I/O操作都將經(jīng)過IP-SAN存儲(chǔ)內(nèi)置的一個(gè)類似交換機(jī)的設(shè)備從前端眾多的主機(jī)端口中讀取或?qū)懭霐?shù)據(jù)，而這些操作都是基于IP交換協(xié)議，其協(xié)議本身就要求每一個(gè)微處理芯片工作時(shí)需要大容量的緩存來支持?jǐn)?shù)據(jù)包隊(duì)列的排隊(duì)操作，具有海量存儲(chǔ)的時(shí)候，不可能所有的數(shù)據(jù)均載入到系統(tǒng)緩存中這個(gè)時(shí)候就需要大量的磁盤I/O操作來查找數(shù)據(jù)，而IP-SAN存儲(chǔ)所采用的SATA磁盤在這一塊性能非常弱，而且還涉及

14、到一個(gè)在IP網(wǎng)絡(luò)上流動(dòng)的ISCSI數(shù)據(jù)向ATA格式數(shù)據(jù)轉(zhuǎn)化的效率損失問題。也就是說IP-SAN存儲(chǔ)存在一個(gè)緩存Cache到磁盤的數(shù)據(jù)I/O和數(shù)據(jù)處理瓶頸。而采用FC磁盤的FC-SAN存儲(chǔ)設(shè)備就不存在這樣的問題。通過2條甚至4條冗余的后端光纖磁盤通道，可以獲得一個(gè)非常高的磁盤讀寫帶寬，而且FCP的磁盤讀寫協(xié)議不存在一個(gè)數(shù)據(jù)格式轉(zhuǎn)換的問題，因?yàn)樗麄儍?nèi)部采用的都是SCSI協(xié)議傳輸，防止了效率的損失。而且FC-SAN存儲(chǔ)設(shè)備由于光纖交換和數(shù)據(jù)傳輸?shù)母咝?，并不需要很大的緩存就能夠獲得一個(gè)好的數(shù)據(jù)命中率和讀寫性能，一般2Gb或者4Gb即可滿足要求。另外由于具備專門的硬件RAID校驗(yàn)控制芯片，所以磁盤RA

15、ID性能將比軟件RAID性能好很多，并且可靠性更好。3.從存儲(chǔ)能夠相應(yīng)的并發(fā)操作能力來看從應(yīng)用上來說，相對(duì)于IP-SAN，F(xiàn)C-SAN可以承接更多的并發(fā)訪問用戶數(shù)。當(dāng)并發(fā)訪問Storage的用戶數(shù)不多的情況時(shí)，F(xiàn)C-SAN比照IP-SAN二者性能相差無幾。但一旦當(dāng)外接用戶數(shù)呈大規(guī)模增長趨勢(shì)時(shí)，F(xiàn)C-SAN就顯示出其在穩(wěn)定、平安以及高性能傳輸率等方面的優(yōu)勢(shì)，不會(huì)像IP-SAN由于自身傳輸帶寬的瓶頸而導(dǎo)致整個(gè)系統(tǒng)的被拖垮。面對(duì)大規(guī)模并發(fā)訪問，無論是從外接用戶數(shù)規(guī)模來說還是從傳輸性能和穩(wěn)定性來說，F(xiàn)C-SAN都有著IP-SAN不可比較的優(yōu)勢(shì)。綜上：選擇FCSAN，由于金融效勞業(yè)數(shù)據(jù)并發(fā)性強(qiáng)，且數(shù)據(jù)價(jià)

16、值量大，采用IPSAN無法滿足對(duì)于速度、并發(fā)性、平安性的要求，相比之下，F(xiàn)CSAN使得數(shù)據(jù)傳輸過程受外界影響小，對(duì)大規(guī)模數(shù)據(jù)請(qǐng)求也可以快速響應(yīng)，滿足金融效勞領(lǐng)域要求，所以選擇FCSAN.存儲(chǔ)架構(gòu)設(shè)計(jì)圖示業(yè)務(wù)連續(xù)性保障設(shè)計(jì)，給出備份及恢復(fù)方案方案選擇選擇“兩地三中心的方案策略。首先消除單點(diǎn)故障根據(jù)國家要求以及銀行業(yè)災(zāi)備標(biāo)準(zhǔn)選擇RPO/RTO此工程設(shè)計(jì)采取本地備份與遠(yuǎn)程備份相結(jié)合的策略同城災(zāi)備場(chǎng)景中采用FC SAN實(shí)現(xiàn)數(shù)據(jù)同步復(fù)制，可以到達(dá)PRO=0，RTO較小，因?yàn)椴扇」饫w通道，數(shù)據(jù)傳輸速度快，可以盡快恢復(fù)數(shù)據(jù)。異地災(zāi)備場(chǎng)景中采用FCIP技術(shù)，此技術(shù)是的可以封裝本地FC SAN的協(xié)議包，從而可在

17、IP上傳輸，遠(yuǎn)程那么有一FCIP網(wǎng)關(guān)，將包轉(zhuǎn)換成FC協(xié)議包，此處選擇PRO=0.5 hours，RTO=2 hours。所以可以滿足兩地三中心的要求。本地備份基于FC SAN的網(wǎng)絡(luò)容災(zāi)架構(gòu)圖對(duì)應(yīng)的備份和恢復(fù)方案從上圖中可以看到，備份恢復(fù)管理效勞器處于主SAN的應(yīng)用效勞器與容災(zāi)SAN的應(yīng)用效勞器之間。其功能主要有以下兩點(diǎn)。數(shù)據(jù)備份：當(dāng)主SAN所屬的磁盤數(shù)據(jù)改變時(shí)，主應(yīng)用效勞器給備份恢復(fù)管理效勞器發(fā)出備份命令，然后備份恢復(fù)管理效勞器給主SAN發(fā)送備份指令，同時(shí)給容災(zāi)應(yīng)用效勞器發(fā)出接收指令。主SAN收到備份指令后，通過FC備份通道把改變了的數(shù)據(jù)傳輸?shù)饺轂?zāi)SAN中，然后再存儲(chǔ)在容災(zāi)SAN所述的磁盤上。

18、備份恢復(fù)管理效勞器的參加，使得在備份數(shù)據(jù)時(shí)主應(yīng)用效勞器不再從事備份工作，而只是提供備份數(shù)據(jù)信息。整個(gè)備份工作帶來的負(fù)載從主應(yīng)用效勞器上剝離，備份恢復(fù)管理效勞器完成了整個(gè)的備份數(shù)據(jù)傳輸過程。從而防止了備份數(shù)據(jù)流對(duì)正常LAN應(yīng)用的影響，解決了在進(jìn)展備份工作時(shí)業(yè)務(wù)網(wǎng)絡(luò)數(shù)據(jù)擁塞的問題。其備份的流程如下列圖所示。數(shù)據(jù)恢復(fù)：當(dāng)主SAN所屬的磁盤中的數(shù)據(jù)遭到破壞時(shí)，主應(yīng)用效勞器給備份恢復(fù)管理效勞器發(fā)出恢復(fù)命令。然后備份恢復(fù)管理效勞器再把恢復(fù)命令傳遞給容災(zāi)應(yīng)用效勞器，接著容災(zāi)應(yīng)用效勞器發(fā)送確認(rèn)信息給備份恢復(fù)管理效勞器。備份恢復(fù)管理效勞器收到確認(rèn)信息后，向容災(zāi)SAN發(fā)恢復(fù)指令，然后容災(zāi)SAN通過FC恢復(fù)通道把備份數(shù)據(jù)傳送給主SAN，如此就完成了數(shù)據(jù)的恢復(fù)。其恢復(fù)流程如下列圖所示。遠(yuǎn)程備份架構(gòu)圖對(duì)應(yīng)的備份和恢復(fù)方案采用異步備份，即定時(shí)同步更新兩地的數(shù)據(jù)。由于此前我們確定的RPO=0.5 hours，所以每隔半個(gè)小時(shí)定時(shí)更新遠(yuǎn)程數(shù)據(jù)。恢復(fù)方案，本地FC SAN發(fā)出恢復(fù)請(qǐng)求，通過IP網(wǎng)絡(luò)傳遞給遠(yuǎn)程FC SAN，遠(yuǎn)程備份響應(yīng)請(qǐng)求，發(fā)出數(shù)據(jù)傳輸信號(hào)，本地接收信號(hào)后，準(zhǔn)備接收數(shù)據(jù)。遠(yuǎn)程將數(shù)據(jù)打包通過IP傳輸給本地存儲(chǔ)陣列。采用FCIP的好處綜合了光纖與IP的好處，保存了光纖網(wǎng)低延遲、高可靠性的優(yōu)點(diǎn)，又利用的IP