48T!解密億時空超級存儲服務器
發布新聞時光:2010-11-02 14:51:00
眾所周知現(xian)在的存儲介(jie)質FLASH、、等等,別的都不做討論了,硬盤做為現(xian)在服務器的主流存儲介(jie)質來說(shuo),從最(zui)早的IDE到SATA、SATAII ,從SCSI到SAS、SASII,再到SSD,無論哪(na)個方(fang)面,足(zu)以(yi)(yi)見行業對存儲方(fang)面的重視。而現(xian)階(jie)段(duan),綜(zong)合比較,作為存儲系(xi)統的介(jie)質,還是以(yi)(yi)SATAII為最(zui)佳,SAS和SSD都不菲。
SATAII作為存儲系(xi)統有(you)如下兩個(ge)其他不具備的優點(dian):
1:容量大。目前(qian)市(shi)面上常見(jian)的(de)級別的(de)硬盤已是尋常可見(jian),3TB也不新(xin)鮮。
2:價(jia)格(ge)低(di)廉。據筆者統計,市場上2TB的的價(jia)格(ge)800元人民幣來算(suan),平均0.4元/1G ,而SAS 300G目前價(jia)格(ge)大(da)概(gai)是1400人民幣,平均4.66元/1G ,當然(ran)不能(neng)拋開性能(neng)來談(tan)價(jia)格(ge)。
所以,目(mu)前作(zuo)為存(cun)儲系統的(de)最佳理(li)想仍是(shi)SATAII硬盤,言(yan)歸(gui)正(zheng)傳,那么如何組建(jian)一個超大容量(liang)的(de)儲存(cun)系統,接(jie)下(xia)來(lai)就是(shi)我們見證奇(qi)跡的(de)時刻,24塊組成的(de)超級存(cun)儲服務(wu)器。
這臺(tai)服(fu)務(wu)器(qi)乍一看,給人感覺不像是4U而(er)更像6U。傳統的(de)4U機器(qi)一方(fang)面做(zuo)(zuo)為工控機,另一方(fang)面就是做(zuo)(zuo)為存儲,而(er)做(zuo)(zuo)為存儲通(tong)常最多見的(de)也就是12盤位(wei),16盤位(wei)和20盤位(wei),而(er)這次億時(shi)空(kong)推出(chu)的(de)4U存儲服(fu)務(wu)器(qi)卻是24盤位(wei)的(de),這個(ge)對于4U架構(gou)來說是個(ge)極限(xian),能在(zai)那(nei)么狹小的(de)空(kong)間里(li)裝進如(ru)此多的(de)硬盤,更是個(ge)奇(qi)跡,下面我們將逐步揭開它的(de)神秘面紗(sha)。
圖2: WD20EARS 2.0TB硬盤
上圖(tu)是此次(ci)采(cai)用(yong)的(de)西數2.0TB硬(ying)盤(pan),從WD官網提供的(de)數據看,每個(ge) WD Caviar 綠色硬(ying)盤(pan)耗(hao)(hao)電量比(bi)平均可(ke)(ke)節省(sheng) 4-5 瓦,這(zhe)使得其發(fa)熱量也(ye)很低。這(zhe)種功耗(hao)(hao)看似可(ke)(ke)以忽略不計(ji),但對于安裝了如此多(duo)硬(ying)盤(pan)的(de)存儲服務器來說卻非(fei)常重要。眾(zhong)所周(zhou)知,功耗(hao)(hao)越高(gao)發(fa)熱量越大,而把24塊(kuai)硬(ying)盤(pan)聚集在(zai)一個(ge)4U機器里,對散熱系(xi)統(tong)及整機的(de)穩定性都是個(ge)考驗。而性能方面,該(gai)硬(ying)盤(pan)采(cai)用(yong)單碟(die)設計(ji),并且支持高(gao)級格式化技術,64MB緩存,整體表(biao)現(xian)尚(shang)可(ke)(ke),網上有(you)很多(duo)測評(ping),有(you)興(xing)趣的(de)可(ke)(ke)以去了解一下(xia),這(zhe)里就不做贅述(shu)。
億時空超(chao)級存儲服(fu)務器采用(yong)XEON 四核,2條(tiao) 2G,24塊WD 2TB 硬(ying)盤以(yi)及1000W非冗余,另外還有(you)兩(liang)塊SATA 提供24個硬(ying)盤接口。中(zhong)部有(you)三個12寸機(ji)箱風(feng)扇(shan),主要(yao)把前(qian)部硬(ying)盤所產生的熱(re)量(liang)吸(xi)向后部,再由后部兩(liang)個8寸風(feng)扇(shan)將熱(re)風(feng)排出,構(gou)成整(zheng)體的排風(feng)散熱(re)系統(tong),為系統(tong)的穩定運(yun)行提供基礎(chu)。
圖(tu)4:熱插背板及接線
整個系統當(dang)中(zhong)硬盤出故障的(de)(de)概率相對(dui)較高,況且這(zhe)次同(tong)時(shi)用了24塊(kuai)硬盤,所以用上熱(re)插(cha)拔背板非(fei)常(chang)有必要,當(dang)其(qi)(qi)中(zhong)一塊(kuai)硬盤出故障需要檢修時(shi),可以很方便的(de)(de)將這(zhe)塊(kuai)硬盤拆出,而不影響其(qi)(qi)它硬盤的(de)(de)正常(chang)使用。另外(wai)一點(dian)就是硬盤的(de)(de)數據線與電源線是分列式的(de)(de),方便走線,看上去(qu)非(fei)常(chang)整潔,也(ye)更利于整體散熱(re)。
圖5:RAID卡(ka)
存儲服務器的(de)(de)(de)RAID卡(ka)(ka)選擇很重(zhong)要(yao)(yao)(yao),不(bu)僅要(yao)(yao)(yao)考慮接(jie)口數量(liang),還(huan)要(yao)(yao)(yao)考慮其穩定性(xing)及所支持的(de)(de)(de)RAID模式,而價(jia)格(ge)也是必須要(yao)(yao)(yao)考慮的(de)(de)(de),據了(le)解單(dan)(dan)塊24口SATA RAID卡(ka)(ka)需要(yao)(yao)(yao)好(hao)幾千甚至上(shang)萬(wan)元,如此一來性(xing)價(jia)比就無從(cong)談起了(le)。這(zhe)里我們采用了(le)兩塊或多塊卡(ka)(ka)組合的(de)(de)(de)模式,幾塊卡(ka)(ka)的(de)(de)(de)接(jie)口數量(liang)總(zong)和能(neng)達到24個,這(zhe)種模式的(de)(de)(de)成本會(hui)比單(dan)(dan)塊24口SATA RAID卡(ka)(ka)便宜(yi)很多,但不(bu)足的(de)(de)(de)地方就是安裝起來相對(dui)繁瑣(suo),另(ling)外在選擇RAID卡(ka)(ka)時(shi),要(yao)(yao)(yao)注(zhu)意品牌一定要(yao)(yao)(yao)相同,最(zui)好(hao)型號(hao)也一樣(yang),這(zhe)樣(yang)就可以通過RAID卡(ka)(ka)本身的(de)(de)(de)BIOS程(cheng)序統一管理(li)。
圖6:
主(zhu)(zhu)板(ban)(ban)原本是(shi)主(zhu)(zhu)角,但在(zai)(zai)眾多硬盤(pan)面前卻淪(lun)落(luo)為(wei)配角。話(hua)雖如(ru)此(ci),在(zai)(zai)存儲系(xi)統中主(zhu)(zhu)板(ban)(ban)的選(xuan)擇(ze)還是(shi)相當重要的。采用服務器(qi)架構的主(zhu)(zhu)板(ban)(ban),能(neng)夠(gou)確保長時(shi)(shi)間不(bu)關(guan)機的穩(wen)定(ding)運(yun)行,這點是(shi)基(ji)礎,另(ling)外擴展性很強(qiang),能(neng)夠(gou)滿足連接多塊RAID卡(ka)的需要,支(zhi)持(chi)ECC內存技術(shu),增強(qiang)了(le)內存容錯功能(neng),使整個系(xi)統更加穩(wen)定(ding)。同時(shi)(shi)還配備了(le)雙千兆,支(zhi)持(chi)網(wang)絡。