如今,全球芯片制造商英特爾公司的數據中心設計達到了一個(gè)新高度,該公司設計制造了一種超高的機架,在同樣的空間內可以部署更多的服務(wù)器。采用了英特爾核心設計的新機架高度超過(guò)9英尺,結合了極致密度和能源效率雙重優(yōu)勢。
英特爾公司正在通過(guò)數據中心的設計,以提高其龐大的內部IT操作的效率和經(jīng)濟性,英特爾公司在全球的59個(gè)數據中心的服務(wù)器超過(guò)13萬(wàn)臺。不久前,該公司將其在圣克拉拉廢棄的一個(gè)半導體制造工廠(chǎng)改造成為了一個(gè)數據中心園區,該數據中心園區的效率和電力容量可以匹配全球最大的超大規模服務(wù)器集群。

英特爾公司在圣克拉拉新數據中心內的超高機架
在英特爾公司的這個(gè)前半導體制造工廠(chǎng),曾有數百名工人身著(zhù)“兔子服”研發(fā)生產(chǎn)了大量的凌動(dòng)核心處理器,如今,這個(gè)地方可能很快成為硅谷最繁忙的數據中心之一,因為英特爾公司計劃在未來(lái)五年內在這里提供30兆瓦的在線(xiàn)計算能力。
在數據中心的數據大廳里的工廠(chǎng),英特爾高達9英尺的機架具備放置60臺服務(wù)器(60U的高度。該設計提高了每個(gè)機架的縱向和橫向承載服務(wù)器的容量,可以讓功率高達43kW的多個(gè)服務(wù)器部署在一個(gè)單一的機架上。為了管理這個(gè)功率密度,英特爾公司采用了一個(gè)熱通道氣流遏制系統和蒸發(fā)冷卻系統。
極端的密度達到極端的PUE
英特爾公司最新的數據中心的能源使用效率PUE為1.06,相當于Facebook公司和谷歌公司最節能高效的數據中心設施的指標,PUE值是數據中心能效的主要晴雨表。該數據中心空間為5000平方英尺,電力容量為5兆瓦,功率密度達到了每平方英尺1千瓦。
該數據中心的功率密度與英特爾前一代的數據中心相比有了顯著(zhù)的改善,以前的數據中心空間為25000平方英尺,電力容量也是相同的5兆瓦。
英特爾IT部門(mén)首席技術(shù)官兼高級首席工程師SheshaKrishnapura
SheshaKrishnapura是英特爾IT部門(mén)首席技術(shù)官兼首席高級工程師,負責該公司的內部數據中心的運營(yíng)。該數據中心的90%的電力容量是用于英特爾的芯片設計和研究操作。
英特爾公司全新的60U機架設計比標準服務(wù)器機架要高得多,標準的機架一般為7英尺高,19英寸寬,可容納42臺機架式服務(wù)器(42U)。英特爾機架與標準的服務(wù)器、交換機和電源的領(lǐng)先供應商合作。而其網(wǎng)絡(luò )交換機位于在機架底部而不是機架頂部。
英特爾設計的機架雖然支持19英寸的服務(wù)器的部署,但機架寬度更加緊湊,這樣有助于部署更高的功率密度。這使得英特爾能夠在部署25個(gè)機架的空間內可以容納30個(gè)機架。
“我們沒(méi)有浪費任何空間,”Krishnapurna說(shuō)。
雖然機架設計很酷,但服務(wù)器需要更好的冷卻。英特爾公司采用了多個(gè)冷卻策略來(lái)管理功率密度和能源效率。
提高冷卻效率的幾種方法
英特爾的60U機架系統的外殼中有一個(gè)定制的熱通道遏制系統,包圍著(zhù)每側24個(gè)服務(wù)器,在兩端設計了推拉門(mén),當推拉門(mén)打開(kāi),一股熱氣撲面而來(lái),這顯露出散熱設計的關(guān)鍵:氣壓。
外殼中有一個(gè)較寬的10英尺長(cháng)的熱通道。在高負荷工作時(shí),通過(guò)安置在外殼頂部的冷卻裝置將60U服務(wù)器產(chǎn)生的廢熱排出。當負荷較低時(shí),啟動(dòng)熱通道頂部的大風(fēng)扇,幫助排出熱量。
部署在D2數據大廳的英特爾IT超級計算機,該系統涵蓋15個(gè)機架,擁有近1300個(gè)計算節點(diǎn)
當空氣從冷卻裝置排出時(shí),外殼上面的擴散器引導冷卻氣流回流進(jìn)了房間。房間里的“冷通道”溫度為華氏83度,而熱通道為華氏108度。其溫度可以稍高或更低。
在較高室溫下運行的能力也使得英特爾的數據中心更加節能。數據中心的冷卻采用水循環(huán)冷卻,流入冷卻裝置的水溫為華氏78度至80度,而返回的水溫為華氏82度至87度,返回的熱水再流向換熱器,其冷卻的水可以采用中水。加利福尼亞州的干旱,推動(dòng)當地水資源的回收利用。因此利用回收的中水,減少使用飲用水,成為了一個(gè)重要的優(yōu)先事項。
而就在D2數據大廳,英特爾經(jīng)營(yíng)的另一個(gè)高密度的數據中心使用空氣冷卻技術(shù)。空氣通過(guò)架空的百葉窗和大型變速風(fēng)機進(jìn)入數據中心。數據大廳設有31000臺服務(wù)器,其中包括英特爾IT超級計算機。目前這個(gè)大廳中的超級計算機在世界上最強大的超級計算機前500強排名81,有15個(gè)機架1296個(gè)服務(wù)器節點(diǎn)。
服務(wù)器余熱通過(guò)一個(gè)大的通風(fēng)管排出屋外。在寒冷的日子里,這個(gè)溫暖的空氣可以被重新混合,以調節數據大廳的環(huán)境溫度。
圣克拉拉數據中心的未來(lái)
數據中心的創(chuàng )新對英特爾來(lái)說(shuō)并不新鮮,因為英特爾公司就是氣流遏制系統的早期采用者。
Krishnapura介紹說(shuō),公司在圣克拉拉的數據中心命名為D2數據中心,其建設的目的是保障英特爾公司內部數據中心的IT業(yè)務(wù)運行,提高芯片設計和計算能力的創(chuàng )新能力,從而為公司提供一個(gè)創(chuàng )新的未來(lái)。這個(gè)面積為69萬(wàn)英尺的五層建筑的旁邊是諾伊斯羅伯特大廈,是英特爾公司的全球總部。
芯片生產(chǎn)的“潔凈室”是芯片制造工廠(chǎng)的環(huán)境控制的設施,可避免皮膚的細小顆粒和頭發(fā)落在電路上,造成污染。這就是為什么英特爾的員工穿著(zhù)“兔子服”出現在該公司的電視廣告的原因,這個(gè)芯片工廠(chǎng)于1989年開(kāi)通運營(yíng),生產(chǎn)芯片的工人在進(jìn)入潔凈室必須先進(jìn)行淋浴,清洗之后才能進(jìn)入晶圓車(chē)間。
而隨著(zhù)時(shí)間的流逝和技術(shù)的發(fā)展,半導體生產(chǎn)工廠(chǎng)逐步遷出硅谷,并轉移到其他國家和其他地區。2009年這家工廠(chǎng)被關(guān)閉,工廠(chǎng)設施設備都被淘汰或拆除。

英特爾芯片生產(chǎn)工人身著(zhù)“兔子服”,以防污染芯片
而這個(gè)曾經(jīng)大規模生產(chǎn)晶圓業(yè)務(wù)工廠(chǎng)黯然落幕,這個(gè)倒閉的半導體工廠(chǎng)也為英特爾公司建設數據中心提供了改造機會(huì )。
這種趨勢正在得到認真地當新人財富數據中心獲得了前希捷工廠(chǎng)在SanJose,將它轉換成一個(gè)數據中心,并降落租賃與一家主要超大規模租戶(hù)。其他工廠(chǎng)改造緊隨其后:
- 2009年,NextGenerationData公司將LG公司在威爾士的半導體工廠(chǎng)改造成了一個(gè)空間為75萬(wàn)平方英尺的數據中心。
- 2010年,QTS公司收購了內存制造商奇夢(mèng)達在里士滿(mǎn)附近的一個(gè)晶圓廠(chǎng),并將其改造成了一個(gè)空間為100萬(wàn)平方英尺的數據中心,現在擁有眾多的政府和企業(yè)租戶(hù)。
- QTS公司隨后在2013年收購德克薩斯歐文的一個(gè)芯片工廠(chǎng),將其改建成為該公司在達拉斯數據中心的第一階段項目。
Krishnapura表示,英特爾公司改造圣克拉拉芯片工廠(chǎng)的其中一個(gè)原因是這里離工人的家比較近。“因為當時(shí)有那么多人在這些工廠(chǎng)工作,我們需要為他們提供更多的工作機會(huì )。”Krishnapura說(shuō)。
Krishnapura認為該數據中心將成為英特爾公司業(yè)務(wù)發(fā)展的增長(cháng)引擎,并預計該數據中心將以穩定的速度增加服務(wù)器來(lái)支持其研發(fā)。