電視台一年管理 500 TB 傷腦筋:活用 IP SAN 降低成本和讀寫速度!
近這幾年的熱話是全球總儲存容量,據 IDC 在 2014 年發出的報告顯示,於 2016 年儲存容量大約達到 90,000PB 之多,所以很多雲端服務供應商借勢建立自己的雲端儲存方案(Cloud Storage),例如有 Amazon S3、Google Storage 和 Microsoft Azure Storage 等等。
企業要如何處理龐大數據,這問題其實存在已久,傳統上大概會分開兩個層次來儲存,資料庫(Database)要求讀寫速度,往往儲存在較昂貴的 IP SAN 內,而備份出來的資料大多利用稍為便宜一點的 NAS 作儲存媒介。
雲端儲存費用昂貴
但有一些企業需要 IT 審計(Audit),而審計項目繁多,其中一項關於公司資料有沒有做好 offsite 備份,因此租用數據中心(Data Center)同步資料,讓資料在辦公室和數據中心各有一份,這樣可保障公司資料萬無一失,同時亦可符合審計要求。
我想大家都知道建立數據中心作資料備份並非一件容易的事,由購買到部署可能足足需要三個月時間才能完成。有見及此,現時很多備份軟件支援雲端儲存備份,只要將資料備份到辦公室和雲端也能符合 IT 審計要求,但如果企業的資料每月增長以 10TB 計算的話,那雲端儲存每月計費服務可能不太合符經濟效益,以下是一個 Amazon S3 每月計費範例:
S3 標準儲存(背後擁有備援方案) = 0.0300 美金每 GB x 10TB = 10240GB x 0.0300 = 307.2 美金 x 7.8 = 2,396.16港元
之後每月增長 10TB,那大約一年是 186,900.48 港元,這個數字是否很驚人?當然不是每間企業都是有那麼多的資料備份,所以費用不需那麼誇張,但有沒有想過電視台是用什麼方法來備份容量較大的 HD 影片?相信使用 Amazon S3 的話應該會「破產」。
問題根源
HKITBLOG 在 Computex 訪問了專研發 IP SAN 的 Qsan 公司,他們原來已經為台灣八大電視台部署 Qsan 儲存方案,而這套方案擁有高速、高可用性和大容量方案。為何他們要部署 Qsan 方案?台灣八大電視台的節目影片是 MPEG2 格式以 150Mbps 的 HD 高畫質儲存,大約每小時 50GB 容量,因為他們有六個頻道,一年大約 10,000 小時節目影片,那一年總共有 500TB 容量之多!因為是 HD 影片的關係,儲存容量非常之嚇人,若果是使用 Tape Library 或 Blu-ray Disc 備份的話,在速度和管理是一個極大的問題。
資料複製
台灣八大電視台分秒必爭,以及節目影片是很重要的,試想想播放時出現中斷情況是很嚴重的事,錄影出來的影片需要複製作備份,因此背後需做好高可性方案,堆疊兩座複製(Mirror)架構,萬一出現故障可即時回復,影片也不會流失。
方案架構
此方案部署了兩台 AegisSAN LX P600 10GbE iSCSI 磁碟陣列;
在後方各堆疊五台 2U 16Bay JBOD J300Q 儲存裝置,
將主要五台生產資料複製到另外五台 Nearline 作備援。每台儲存裝置插入 4TB 企業級 SATA 硬碟配置 RAID 6,以及配置兩顆 Hot Spare 硬碟作備援,使總容量大約高達 500 TB,可容納 一年 10,000 小時的節目影片!他們使用管理片庫軟件經由這個架構快速存取 HD 影片,既可達到高可用性,亦可以降低成本。
擴充發展
八大電視台認為影像媒體數碼及高解像度是未來趨勢,他們部署了這套高速、高可用性和大容量方案後,還繼續購買 Qsan 儲存裝置擴充至線上編輯和廣播等等。最後,她們認為,儲存裝置插入多些高級企業硬碟在磁碟陣列和高頻寬 iSCSI IP SAN 的方案中是媒體、電視台業界的一個重要使用方法。