小型媒資系統(tǒng)可選用獨(dú)立磁帶機(jī),也可選用含一個(gè)磁帶驅(qū)動(dòng)器的小型磁帶庫(kù);對(duì)于一般中型的系統(tǒng),實(shí)際上在平均流量上,1臺(tái)磁帶機(jī)已經(jīng)足夠保證數(shù)據(jù)歸檔和回遷的需要,但可能某個(gè)時(shí)段使用特別集中,系統(tǒng)響應(yīng)的時(shí)間就會(huì)變慢,某個(gè)任務(wù)在排隊(duì)后可能在十幾分鐘或更長(zhǎng)的時(shí)間才會(huì)完成。另外,由于磁帶機(jī)的平均無(wú)故障工作時(shí)間也不是特別的長(zhǎng),所以中型媒資系統(tǒng)通常配置2臺(tái)磁帶機(jī)。大型系統(tǒng)的磁帶機(jī)通常在3臺(tái)到5臺(tái),甚至?xí)_(dá)到10臺(tái)以上。這種大型系統(tǒng)的磁帶機(jī)數(shù)量一般需要經(jīng)過(guò)業(yè)務(wù)需求的仔細(xì)分析計(jì)算得到。大致需要考慮的因素包括:每天歸檔數(shù)據(jù)量、帶庫(kù)分區(qū)的情況(有幾類(lèi)節(jié)目在帶庫(kù)里面,被劃分為幾個(gè)不同的獨(dú)立區(qū)域)、查詢(xún)回遷的數(shù)據(jù)流量、磁帶機(jī)的使用分配模式、使用的磁帶類(lèi)型等。需要說(shuō)明的是,現(xiàn)在多數(shù)媒資系統(tǒng)都可以對(duì)不同廠家不同型號(hào)的數(shù)據(jù)流磁帶庫(kù)統(tǒng)一管理。
·數(shù)據(jù)庫(kù)元數(shù)據(jù)管理方面,需要指定專(zhuān)門(mén)的存儲(chǔ)空間來(lái)存放管理數(shù)據(jù)庫(kù)。數(shù)據(jù)庫(kù)數(shù)據(jù)的存儲(chǔ)固然重要,硬件上為避免單個(gè)硬盤(pán)在系統(tǒng)運(yùn)行期間出現(xiàn)故障,管理服務(wù)器的數(shù)據(jù)硬盤(pán)采用RAID卡實(shí)現(xiàn)硬件方面的冗余保護(hù),這樣既提高了服務(wù)器關(guān)鍵數(shù)據(jù)訪問(wèn)效率,又可同時(shí)保證單硬盤(pán)故障情況下不會(huì)造成任何數(shù)據(jù)丟失。此外還可以通過(guò)集群技術(shù)實(shí)現(xiàn)數(shù)據(jù)庫(kù)管理的熱備。另外針對(duì)媒資業(yè)務(wù)本身產(chǎn)生的元數(shù)據(jù),需要根據(jù)不同的流程節(jié)點(diǎn)來(lái)選擇不同的存儲(chǔ)管理設(shè)備。
我頻道媒資系統(tǒng)在前期設(shè)計(jì)階段,結(jié)合頻道節(jié)目磁帶庫(kù)存量,制訂了媒資收錄的計(jì)劃——日常播出節(jié)目播出后經(jīng)上載進(jìn)入媒資,此外每天定量上載以前的節(jié)目入媒資。根據(jù)現(xiàn)存的兩套非編網(wǎng)絡(luò)(喜馬拉雅專(zhuān)題制作網(wǎng)和大洋新聞網(wǎng))的通用視音頻采集設(shè)置(視頻采集格式DV/DVCPRO,碼率25Mb/s;音頻采集格式WAV,48Hz,16Bit),初步按照每天上載DV(25Mb/s)素材節(jié)目12小時(shí)(部署2個(gè)媒資上載站點(diǎn)同時(shí)工作),則可以計(jì)算出媒資上載的存儲(chǔ)量:
**存儲(chǔ)容量=25×12×3600/8×1000×2=270GB
一年存儲(chǔ)容量=270G×365=100T
對(duì)于媒資系統(tǒng)的在線存儲(chǔ),我們將高低碼率的媒體文件在物理上單獨(dú)規(guī)劃:高碼流視音頻方面,我們配置了新奧特AS5000F-1磁盤(pán)陣列作為光纖末端的在線存儲(chǔ)盤(pán)陣,其內(nèi)置16塊500GB的SATA-Ⅱ磁盤(pán)。它支持多種RAID模式:RAID0,1(0+1),3,5,6,10,30,50,60,NRAID和JBOD,特別是RAID6的支持,使其容錯(cuò)能力更強(qiáng);RAID的條帶化尺寸和緩存策略都可以根據(jù)需要進(jìn)行調(diào)整,而且支持多種智能化處理。由于在搭建系統(tǒng)時(shí)已經(jīng)做了RAID5(第1到第15塊硬盤(pán)進(jìn)行RAID5配置,第16塊盤(pán)作為熱備冗余)配置,所以有效存儲(chǔ)空間約為6T左右。我們還部署了兩臺(tái)MDS存儲(chǔ)管理服務(wù)器和一臺(tái)NAS服務(wù)器來(lái)對(duì)在線存儲(chǔ)進(jìn)行管理、定義相關(guān)設(shè)備間的互聯(lián)訪問(wèn),使在線存儲(chǔ)能夠適應(yīng)單網(wǎng)、雙網(wǎng)等各種網(wǎng)絡(luò)架構(gòu),針對(duì)不同的客戶(hù)端布局提供相應(yīng)的開(kāi)放方式。前面已經(jīng)計(jì)算出理論上每天媒資上載所需存儲(chǔ)空間為270GB,所以這個(gè)空間完全可以支持一段較長(zhǎng)時(shí)間內(nèi)高碼流視音頻存儲(chǔ)緩沖區(qū)的應(yīng)用。
另外,我們部署了一臺(tái)流媒體服務(wù)器——RAIDSYS(建聯(lián))的AS3000N,對(duì)低碼流素材和媒資流程中產(chǎn)生的元數(shù)據(jù)進(jìn)行存儲(chǔ)管理,該服務(wù)器盤(pán)陣也是配備了16塊500GB的7200K rpm磁盤(pán),同樣進(jìn)行了RAID5配置(第1到第15塊硬盤(pán)進(jìn)行RAID5配置,第16塊盤(pán)作為熱備冗余),有效存儲(chǔ)空間也為6T左右。由于媒資系統(tǒng)設(shè)定的低碼流文件格式為WMV,碼率300kbs,所需存儲(chǔ)空間很小,元數(shù)據(jù)的大小更是可以忽略不計(jì),所以這臺(tái)單獨(dú)的流媒體存儲(chǔ)管理服務(wù)器提供了足夠低碼率文件和相關(guān)元數(shù)據(jù)長(zhǎng)期存儲(chǔ)的空間,同時(shí)還為媒資流程中需要瀏覽、粗編低碼流素材的節(jié)點(diǎn)提供相關(guān)服務(wù)。
近線帶庫(kù)方面,基于對(duì)單個(gè)磁帶庫(kù)穩(wěn)定性和性的要求,我們選擇了HP EML 103e.
帶庫(kù)的基礎(chǔ)模塊包括共103個(gè)磁帶存儲(chǔ)節(jié)點(diǎn),加載箱的5個(gè)節(jié)點(diǎn)在可以移動(dòng)的暗盒里,而且可被配置為載入載出節(jié)點(diǎn)或存儲(chǔ)節(jié)點(diǎn)。圖中③所示部分可以指定9個(gè)節(jié)點(diǎn)作為預(yù)留,預(yù)留節(jié)點(diǎn)常用來(lái)存放清洗帶。固定可用的節(jié)點(diǎn)數(shù)取決于是否已達(dá)到帶庫(kù)的底端,因?yàn)閹?kù)的底端通常緊鄰基礎(chǔ)模塊,底部限制了機(jī)械臂可以移動(dòng)的距離。如果帶庫(kù)底端緊鄰基礎(chǔ)模塊,*下面的兩排(16個(gè)節(jié)點(diǎn))就不可用。由于我們前期并沒(méi)有進(jìn)行擴(kuò)容,而且考慮到放入取出磁帶的日常需要,所以目前有效的磁帶存儲(chǔ)節(jié)點(diǎn)共有103-5=98個(gè)。
磁帶驅(qū)動(dòng)器和磁帶的相關(guān)技術(shù)已經(jīng)非常成熟,*為業(yè)界熟知的莫過(guò)于LTO技術(shù)——線性磁帶開(kāi)放協(xié)議(Linear Tape Open)。作為當(dāng)今數(shù)據(jù)存儲(chǔ)業(yè)*可靠的格式之一,LTO技術(shù)通過(guò)使用薄磁性層實(shí)現(xiàn)了高密度存儲(chǔ)和高輸出讀取數(shù)據(jù),它結(jié)合了線性多通道雙向磁帶格式的優(yōu)點(diǎn),基于服務(wù)系統(tǒng)、硬件數(shù)據(jù)壓縮、優(yōu)化的磁道面和高效率糾錯(cuò)技術(shù),以提高磁帶的容量和性能。LTO具有兩種存儲(chǔ)格式:高速開(kāi)放磁帶格式Ultrium和快速訪問(wèn)開(kāi)放磁帶格式Accelis,定制兩種格式是因?yàn)椴⒉皇撬械挠脩?hù)都要求相同的特性和功能性。一些應(yīng)用程序強(qiáng)調(diào)重點(diǎn)在“讀”,要求快速的數(shù)據(jù)訪問(wèn)速度。而另一些應(yīng)用程序則重點(diǎn)在于“寫(xiě)”,要求*高的磁帶存儲(chǔ)能力。
(責(zé)任編輯:景帝www.ijingdi.com)