48T！解密億時空超級存儲服務器
發布公告時光：2010-11-02 14:51:00
眾所周知現在的(de)(de)(de)存(cun)(cun)(cun)儲介質(zhi)FLASH、、等(deng)等(deng)，別(bie)的(de)(de)(de)都不做討論了，硬盤做為現在服(fu)務(wu)器(qi)的(de)(de)(de)主(zhu)流存(cun)(cun)(cun)儲介質(zhi)來說，從(cong)最早的(de)(de)(de)IDE到SATA、SATAII ，從(cong)SCSI到SAS、SASII，再到SSD，無(wu)論哪個(ge)方面(mian)，足以見行業對存(cun)(cun)(cun)儲方面(mian)的(de)(de)(de)重視。而現階段，綜合比(bi)較，作為存(cun)(cun)(cun)儲系統的(de)(de)(de)介質(zhi)，還是以SATAII為最佳，SAS和SSD都不菲(fei)。
SATAII作為存儲系統有如(ru)下兩個其他不(bu)具備的優點：
1：容(rong)量大。目前市面上(shang)常(chang)見的級別(bie)的硬(ying)盤(pan)已是尋常(chang)可見，3TB也(ye)不新(xin)鮮。
2：價格低廉。據筆者統計，市場上2TB的的價格800元(yuan)(yuan)人民幣來算(suan)，平(ping)均0.4元(yuan)(yuan)/1G ，而SAS 300G目(mu)前價格大概(gai)是1400人民幣，平(ping)均4.66元(yuan)(yuan)/1G ,當然不能(neng)拋開性能(neng)來談價格。
所以(yi)，目前作為(wei)存儲(chu)系統的最佳理想仍是(shi)SATAII硬盤，言歸(gui)正傳(chuan)，那么如何組建一(yi)個(ge)超大(da)容量(liang)的儲(chu)存系統，接下(xia)來(lai)就是(shi)我們見(jian)證奇跡的時刻，24塊組成的超級存儲(chu)服務器(qi)。
這(zhe)臺服務器(qi)乍一看，給人感覺不像是(shi)4U而更像6U。傳統的(de)4U機器(qi)一方(fang)面做(zuo)為工控機，另一方(fang)面就(jiu)是(shi)做(zuo)為存(cun)(cun)(cun)儲，而做(zuo)為存(cun)(cun)(cun)儲通(tong)常最(zui)多見的(de)也(ye)就(jiu)是(shi)12盤(pan)位，16盤(pan)位和(he)20盤(pan)位，而這(zhe)次億時空推出(chu)的(de)4U存(cun)(cun)(cun)儲服務器(qi)卻是(shi)24盤(pan)位的(de)，這(zhe)個(ge)對于4U架構來(lai)說是(shi)個(ge)極限，能(neng)在那(nei)么狹小(xiao)的(de)空間里裝進(jin)如此多的(de)硬盤(pan)，更是(shi)個(ge)奇跡，下(xia)面我(wo)們將(jiang)逐步揭開它的(de)神秘面紗(sha)。
圖2： WD20EARS 2.0TB硬盤(pan)
上圖是此次采(cai)用的(de)西數(shu)2.0TB硬盤(pan)(pan)，從(cong)WD官網提供的(de)數(shu)據(ju)看，每個(ge) WD Caviar 綠色硬盤(pan)(pan)耗電量(liang)比平均可(ke)節省 4－5 瓦，這(zhe)使(shi)得其發熱(re)量(liang)也很(hen)低。這(zhe)種功耗看似可(ke)以忽略不計(ji)，但對(dui)于(yu)安裝了(le)如此多(duo)硬盤(pan)(pan)的(de)存儲(chu)服務器(qi)來說卻非常重(zhong)要(yao)。眾(zhong)所周(zhou)知，功耗越高(gao)發熱(re)量(liang)越大(da)，而把24塊(kuai)硬盤(pan)(pan)聚集在(zai)一(yi)個(ge)4U機(ji)(ji)器(qi)里，對(dui)散熱(re)系統及整機(ji)(ji)的(de)穩定(ding)性(xing)(xing)都是個(ge)考驗。而性(xing)(xing)能(neng)方面，該硬盤(pan)(pan)采(cai)用單碟設計(ji)，并且支持(chi)高(gao)級格(ge)式化(hua)技術，64MB緩存，整體表(biao)現尚可(ke)，網上有很(hen)多(duo)測(ce)評，有興趣的(de)可(ke)以去了(le)解一(yi)下(xia)，這(zhe)里就不做贅述(shu)。
億(yi)時空超級(ji)存儲服務器采(cai)用XEON 四核(he)，2條 2G，24塊WD 2TB 硬盤以(yi)及1000W非冗余，另外還(huan)有兩塊SATA 提供(gong)24個硬盤接口。中部有三個12寸(cun)機箱(xiang)風(feng)(feng)扇，主要(yao)把(ba)前(qian)部硬盤所產生(sheng)的(de)熱量吸向后(hou)部，再由后(hou)部兩個8寸(cun)風(feng)(feng)扇將熱風(feng)(feng)排出，構成(cheng)整體的(de)排風(feng)(feng)散熱系(xi)統，為(wei)系(xi)統的(de)穩定運行提供(gong)基礎。
圖4：熱(re)插背板及接線(xian)
整個系統當中硬(ying)(ying)盤(pan)出故障的概率相對較高(gao)，況且這次同(tong)時(shi)用(yong)了24塊硬(ying)(ying)盤(pan)，所(suo)以用(yong)上熱(re)(re)插拔背(bei)板(ban)非常(chang)(chang)有(you)必要，當其中一塊硬(ying)(ying)盤(pan)出故障需要檢修(xiu)時(shi)，可以很(hen)方便的將這塊硬(ying)(ying)盤(pan)拆(chai)出，而(er)不影響其它硬(ying)(ying)盤(pan)的正常(chang)(chang)使用(yong)。另外一點就(jiu)是硬(ying)(ying)盤(pan)的數據(ju)線與電(dian)源(yuan)線是分(fen)列式的，方便走線，看上去非常(chang)(chang)整潔，也更利于整體(ti)散熱(re)(re)。
圖5：RAID卡(ka)
存儲服務(wu)器的(de)(de)(de)(de)RAID卡(ka)(ka)選(xuan)擇很(hen)重要，不僅要考慮接口(kou)數量，還要考慮其穩定性及所支(zhi)持的(de)(de)(de)(de)RAID模(mo)式(shi)，而價(jia)格(ge)也(ye)是必須要考慮的(de)(de)(de)(de)，據了解單塊24口(kou)SATA RAID卡(ka)(ka)需要好(hao)幾千甚至上萬(wan)元，如此一來性價(jia)比就(jiu)無(wu)從談(tan)起(qi)了。這(zhe)里我們(men)采用了兩塊或多(duo)塊卡(ka)(ka)組合的(de)(de)(de)(de)模(mo)式(shi)，幾塊卡(ka)(ka)的(de)(de)(de)(de)接口(kou)數量總和能達到24個，這(zhe)種模(mo)式(shi)的(de)(de)(de)(de)成本(ben)會比單塊24口(kou)SATA RAID卡(ka)(ka)便(bian)宜很(hen)多(duo)，但(dan)不足的(de)(de)(de)(de)地方就(jiu)是安裝(zhuang)起(qi)來相(xiang)對繁(fan)瑣，另(ling)外在選(xuan)擇RAID卡(ka)(ka)時(shi)，要注意(yi)品牌一定要相(xiang)同(tong)，最好(hao)型號(hao)也(ye)一樣，這(zhe)樣就(jiu)可以(yi)通(tong)過RAID卡(ka)(ka)本(ben)身的(de)(de)(de)(de)BIOS程(cheng)序統一管理。
圖6：
主(zhu)(zhu)板原(yuan)本是(shi)主(zhu)(zhu)角(jiao)，但在眾多(duo)硬(ying)盤面前卻(que)淪落為配角(jiao)。話雖如(ru)此，在存儲系(xi)統(tong)(tong)中主(zhu)(zhu)板的選擇還(huan)(huan)是(shi)相當重(zhong)要的。采(cai)用(yong)服務(wu)器架構(gou)的主(zhu)(zhu)板，能(neng)(neng)夠確保長(chang)時間(jian)不關(guan)機的穩定運(yun)行，這點是(shi)基礎(chu)，另外擴展性很(hen)強，能(neng)(neng)夠滿足(zu)連(lian)接多(duo)塊(kuai)RAID卡的需(xu)要，支持ECC內存技術，增(zeng)強了內存容錯功能(neng)(neng)，使整個系(xi)統(tong)(tong)更加穩定。同時還(huan)(huan)配備了雙千兆，支持網(wang)絡。