智能網絡存儲方案

智能網絡存儲方案

智能網絡存儲方案

一、概述

    目前，數字視音頻網絡和數據網絡的大量應用成為電視行業發展的必然趨勢，這就要求提供更大、更快、更有力的網絡數據存儲和共享途徑。網絡存儲技術無疑為我們提供了一個很好的選擇。

二、網絡存儲技術的分類

    目前的網絡存儲技術大致分為三類： 

 

1、 直接依附存儲系統（Direct Attached Storage, DAS）

     DAS又稱為以服務器為中心的存儲體系，如圖一所示。其特征為存儲設備為通用服務器的一部分，該服務器同時提供應用程序的運行，即數據訪問與操作系統、文件系統和服務程序緊密相關。當用戶數量增加或服務器正在提供服務時，其響應速度會變慢。在網絡帶寬足夠的情況下，服務器本身成為數據輸入輸出的瓶頸。現在已漸漸不能滿足用戶的需求，不再為大家所采用。

2、 網絡依附存儲系統（Network Attached Storage, NAS）

    NAS的結構是以網絡為中心，面向文件服務的。在這種存儲系統中，應用和數據存儲部分不在同一服務器上，即有專用的應用服務器和專用的數據服務器。其中專用數據服務器不再承擔應用服務，稱之為"瘦服務器"（Thin Server）。數據服務器通過局域網的接口與應用服務器連接，應用服務器將數據服務器視做網絡文件系統，通過標準LAN進行訪問。由于采用局域網上通用數據傳輸協議，如NFS、CIFS等，所以NAS能夠在異構的服務器之間共享數據，如Windows NT和UNIX混合系統。NAS系統的關鍵是文件服務器，一個經過優化的專用文件服務和存儲服務的服務器是文件系統所在地和NAS設備的控制中心，該服務器一般可以支持多個I/O節點和網絡接口，每個I/O節點都有自己的存儲設備。

3、 存儲區域網絡（Storage Area Network, SAN）

     SAN是一種以光纖通道（Fiber Channel, FC）實現服務器和存儲設備之間通訊的網絡結構，如圖三所示。SAN的核心是FC，其中的服務器和存儲系統各自獨立，地位平等，通過高帶寬（傳輸速率為800Mb/s,雙全工時可達1.6Gb/ s）FC集線器或FC交換機相連，可避免大流量數據傳輸時發生阻塞和沖突。各應用工作站通過局域網訪問服務器，在各存儲設備之間交換數據時可以不通過服務器，這樣就大

大減輕了服務器承受的壓力。

三、NAS與SAN的比較

     NAS、SAN與傳統網絡存儲技術相比而言，無論是從網絡傳輸帶寬、數據共享性還是從存儲容量的可擴充性、數據的一體化和安全性等個方面來說，其優越性是不言而喻的。所以，現在眾多的用戶在對其存儲方案進行選擇時，實際上也就成為對NAS和SAN的選擇了。

     NAS和SAN有許多共同的特點。它們都提供集中化的數據存儲和整合優化，都能有效的存取文件，都允許在眾多的主機間共享并支持多種操作系統，都允許從應用服務器上分離存儲。而且，它們都提供數據的高可用性，都能通過冗余部件和RAID保證數據的完整性。

    NAS和SAN也有著一些不同點。首先，實施和維護的難易程度不同。上面曾提到，NAS的存儲設備與眾多訪問客戶的連接是通過標準的LAN進行的，也就是說，直接將NAS存儲設備接入LAN中就可以使用了，管理者所要做的只是來定義網絡寸取權限或為每個用戶定義磁盤限額。而且由于NAS采用了熱插拔和即插即用技術，所以在新設備接入時無需關閉數據服務器或進行重新配置，新增的存儲空間可以立即為眾多的應用服務器和客戶機所共享。而SAN的存儲設備與客戶之間的聯系是通過專用FC集線器和交換機來進行的，如果客戶端增加，就要對交換機進行級連，這就大大增大了安裝與設置難度。其次，二者的設備管理難易成度不同。由于NAS中每一個I/O節點都有自己的存儲設備，而這些設備又沒有一個統一的管理的界面，所以管理人員就必須逐一管理每個NAS設備，從而使管理成本隨網絡上的NAS設備的增多而線性增加。而SAN對整個網絡中的存儲設備的管理，是采用SAN專用管理軟件來進行集中式管理的，用戶可以通過簡單的圖形界面來管理不同平臺和介質上的數據，也就是說，在SAN中，其整個存儲網絡成為了一個集中化的存儲池，這樣，管理人員管理起來就非常簡單了。再者，NAS和SAN是管理對象也不相同。SAN管理的是磁盤空間，而NAS管理的是文件，也就是說，SAN是個磁盤工廠，而NAS只是一個文件服務器。最后，也是最重要的一點，那就是二者在性能上有所不同。NAS是基于傳統以太網絡的存取設備，雖然減輕了服務器所承擔的壓力，但勢必嚴重增加網絡的負荷。而且無論存儲磁盤的速度有多快，存取速度只可能與網絡帶寬所允許的速度一樣快。即NAS達到高性能的前提條件是網絡帶寬足夠，否則其性能將急劇下降。而如果為了解決帶寬問題而增設寬帶網段，就勢必喪失NAS價格較低、安裝設置容易的優勢。與NAS不同，SAN構建于基于光纖的專用數據網絡，可以提供極高的帶寬（新的FC標準可使帶寬達到4GB），不必擔心由于帶寬不足而引起的性能下降。

    可以說，NAS和SAN各有其長短之處，在實際應用中也各有不同之處。對于經濟實力不足，有傳統以太網絡，且急需擴充存儲空間的用戶，NAS無疑是一種便宜、快速的方案。而對于擁有強大經濟后盾，對網絡性能要求較高及未來發展勢頭強勁的用戶，則應該選擇SAN。

四、SAN的現狀和發展

1、 現狀

     由于自身所具有的高速、集中化存儲管理及幾近無限的擴充能力這些特點，特別適合對海量數據的視音頻數據進行存儲、傳輸和實時處理，所以采用FC技術的SAN目前在很多電視臺得到了推廣，甚至已成電視臺運做的核心。在視頻處理領域里，SAN就像數字視頻網絡中的大本營，不但承擔著視頻數據的存貯、遷移、交換、共享，而且掌管著網絡設備的登記、刪除、查詢、維護。可以這么理解，SAN是電視臺視頻網絡的主干，在SAN網上可以掛接諸如新聞生產系統、非線性編輯系統、廣告非線性插播系統、數字化節目庫系統等

。 SAN在日益廣泛的應用中也暴露了一些缺點和不足。SAN網絡仍然采用傳統網絡結構進行存儲操作，網絡結構主要由交換機與集線器構成，將這些傳統規范的硬件應用于新的存儲結構中，并應用傳統的網絡管理技術進行存儲管理，最終導致了系統的匹配問題。SAN系統出現之初，的確為我們解決了企業數據存儲與共享的問題。當存儲數據達到TB級，高帶寬網絡站點（視頻工作站）很多時就會出現很多問題，導致系統性能嚴重下降。而第二代SAN---SDD（SAN Data Director）的出現，彌補了這些不足。

2、 發展

     新一代SAN，其結構的核心是SDD，它不是一個更大的交換機，但它完成的功能更多。它將交換、緩存、RAID、I/O以及數據和文件的管理集于一身，并可以完成數據和網絡的管理，為數據交換提供高帶寬、高容錯的集中存儲訪問。SDD內部有兩個完全相同的組件，稱之為HSTD（HSTD1、HSTD2），每個HSTD有四個100MB/S帶寬流量的數據交換端口，稱之為HOST。這樣，每個HSTD就有400MB/S的帶寬，一個SDD擁有兩個HSTD的800MB/S帶寬。HOST端口可直接與服務器、工作站相連，也可與交換機相連。每個HSTD還有一個60芯的數據總線用于和存儲硬盤陣列相連完成數據交換。其結構示意圖如圖四所示。

    SDD利用HSTD組件省去了復雜的交換機間連接，并將RAID控制器集成，前面的端口接服務器，也可以連接交換機，后面的端口連接硬盤柜。這樣一來，網絡結構變得非常清晰、簡潔，可擴展性強，并且SDD對傳輸通道、硬盤通道、硬盤多重冗余，不僅提高了帶寬，又增加了安全保障，系統幾乎永不死機。

3、 對比

     （1） 帶寬：在傳統SAN方案中，應用FC而使帶寬達到了100M，且其采用的RAID控制器是專門為點對點通信而設計的,在較

少站點同時訪問一個數據時有很好的性能表現，但當有更多站點同時訪問一個數據時，帶寬將嚴重不足，使系統性能急劇下降。如果采用多硬盤塔來分擔網絡帶寬的方案，勢必需要使用switch進行級連，這樣不但使網絡的連接變得極為復雜（如圖五所示），而且switch之間的100M通道帶寬就成為了網絡的瓶頸。在SDD中，帶寬可達800M，并且采用新型RAID控制器，將switch的級連改為并聯，消除了大規模網絡傳輸中的瓶頸。

     （2） 擴展性：傳統SAN延用了C/S的結構，其可升級性與智能化都很差,若想進行系統升級則必須增加交換機、RAID控制器以及不同的控制軟件，而且只能使用交換機級連擴展站點。這種情況在網絡規模較小（網絡中高帶寬訪問站點數在十個以下）時，影響不大。但當網絡的高帶寬站點超過10個時，傳統SAN的系統性能將越來越低，以至于不能構架大型網絡。這是因為傳統SAN的FC交換機速度高，但會在SAN中引入延時；為了增加接口而級連交換機也會產生延時，當系統需要多臺交換機時延時將十分明顯，并將使數據處理性能下降。在SDD網絡中，FC交換機都與SDD控制器相連，處于并行工作狀態且互不影響。當站點增加時，不用交換機級連，只需將新的FC交換機接入SDD即可，不用改動以前的連接。帶寬得到線性增長，能構架大型網絡。

     （3） 穩定性、安全性：從圖四中可以看出大型網絡在站點

    增多后傳統SAN需要FC交換機二級連接，增加了連接點、RAID控制器、電纜等。故障發生點增多，同時故障源難以確定，維護難度大。而SDD網絡結構簡單，連接點少，出錯的機率小，易判斷出錯點，如圖五所示。比較圖五與圖四可以看出， 在相同網絡規模下，SDD網絡結構連接簡單，故障點少。在存儲硬盤與SDD，FC交換機與SDD之間都采用雙鏈路備份，容錯能力強。

     （4） RAID結構：在一個傳統RAID環路中對磁盤的訪問是順序的，降低了RAID卷的讀寫能力。一個環路硬盤數量有限，硬盤卷的容量太小，當總存儲容量達到TB級以上時，系統會出現十幾個盤符，降低了系統的穩定性能，使管理難度加大。如果在NT下做帶區集，首先降低系統安全性，消耗系統資源，另外帶寬也會下降。 同時傳統RAID FC硬盤塔當某一硬盤發生故障時，不會影響整個RAID組。但可怕的是如果盤塔發生故障，將導致其上整個RAID組數據丟失。而SDD的RAID則是在盤塔之間做RAID。這樣當一個盤塔發生故障時，整個RAID也不會出現問題，大大提高了存儲系統的容錯能力。同時，SDD是在10個磁盤通道上做RAID，讀寫一個RAID時，對磁盤的訪問是同時并發的；充分利用了系統的多通道、高帶寬的性能。 另外SDD的RAID結構采用兩級RAID，即在RAID3的基礎上再將多個RAID組以RAID0方式捆綁。這樣做一方面單個盤符容量大大增加可達幾TB，使存儲數據得到充分共享；另一方面，帶寬集中利用，單個分區的帶寬可達360Mb/s以上。

     （5）升級能力、性價比：由于隨著存儲容量、站點的增加，傳統SAN需要增加大量設備如：FC交換機、硬盤塔、RAID控制器等，導致成本急劇上升。擴展系統結構復雜，又使維護成本上升。在SDD網絡擴充時，只需增加少量交換機和硬盤。整個網絡結構不變，維護成本不增加，有效保護了用戶的投資。另外SDD可以重新使用傳統結構中的硬件以節省投資。

除了以上性能提高，SDD還具有傳統SAN不具備的優勢。

    (1) ZONING（分區）能力

    可以在SDD控制器中做ZONING，這樣可以指定工作站可以看到哪些LUN（邏輯單元設備號），提高系統的安全性，并使跨平臺連接的安全性得到保障。提供了SDD用戶注冊的審查，對非法注冊提出警告，全部的安全工作都將被記錄。

    (2) CACHE的集中使用

    SDD系統CACHE非常大，可達5GB，并且這些緩存集中使用，可當應急硬盤使用（這對于視音頻處理很重要），極大的提高利用率，提升系統性能。 而傳統SAN系統總的CACHE雖然也非常大，但卻是分散使用,每一塊對于視頻采集和回放都太小，沒

有利用價值。

    五、總結

    傳統SAN適用于小規模的存儲網絡如小型節目制作網、平面工作室、小型網站等，無法滿足大型存儲網絡的傳輸帶寬和存儲的需要。

    SDD是專門SAN設計，它克服了原有SAN結構的缺點，為SAN提供一個廣泛的、高性能的解決方案。其主要特性為：數據處理與網絡的智能化；大量的I/O處理能力；低延時傳輸；高度的可靠性與使用性；可繼續使用原有的網絡設備。

    利用SDD可大量、高速傳輸數據，而且其還可支持多操作平臺之間的數據高速智能化傳輸。它可廣泛應用于大規模視頻處理、INTERNET信息發布、數字資料庫等海量數據存儲領域。

【智能網絡存儲方案】相關文章：

智能網絡存儲方案２08-06

高性能FLASH存儲器在DSP電機智能保護中的應用08-06

基于Linux的嵌入式網絡存儲器設計08-06

論虛擬存儲技術及其在視頻網絡中的應用08-06

智能療法活動方案08-13

神經網絡與智能信息處理08-06

一個完美的電表數據存儲方案08-06

一種新型存儲器件—磁電存儲器08-06

多網絡智能遠程遙控系統的設計與實現08-06