阿凡達(dá)》的幕后英雄：存儲(chǔ)集群NAS
隨著《阿凡達(dá)》的全球熱映，為影片制作數(shù)字特效的新西蘭公司W(wǎng)eta Digital也越來(lái)越受到關(guān)注。據(jù)該公司介紹，影片中的細(xì)節(jié)動(dòng)畫(huà)所需要的馬力遠(yuǎn)遠(yuǎn)超過(guò)一個(gè)集群NAS系統(tǒng)自身能夠提供的馬力。
為了支持該項(xiàng)目，其中包括3D角色臉部動(dòng)畫(huà)的新突破，Weta Digital建立的存儲(chǔ)系統(tǒng)結(jié)合了BlueArc的Titan 集群NAS陣列以及NetApp的FlexCache。隨著特效變得越來(lái)越先進(jìn)，對(duì)容量和性能的要求開(kāi)始超過(guò)Weta Digital之前支持過(guò)的最大系統(tǒng)，例如2005年的《金剛》。“《金剛》使用了100 TB的存儲(chǔ)，”Weta Digital首席技術(shù)官Paul Ryan說(shuō)，“而《阿凡達(dá)》，（我們的服務(wù)器群）就有100 TB的RAM。”
為了支持?jǐn)?shù)字特效的渲染過(guò)程，Weta Digital有一個(gè)服務(wù)器群，被稱(chēng)為“渲染墻”，包含35,000個(gè)CPU內(nèi)核。 在渲染過(guò)程中，同一圖像的多個(gè)層次和局部畫(huà)面合并形成一幀完整的電影畫(huà)面。“這給存儲(chǔ)造成了一些有趣的問(wèn)題，”瑞恩說(shuō)， “也就是說(shuō)，我們會(huì)碰到這種情況，‘渲染墻’中有一萬(wàn)個(gè)過(guò)程同時(shí)試圖訪(fǎng)問(wèn)同一文件或文件組，從而導(dǎo)致了我們存儲(chǔ)中的熱點(diǎn)。”
大文件的服務(wù)者：Titan
為了緩解這一問(wèn)題，該公司首先引進(jìn)了三個(gè)四節(jié)點(diǎn)的配置，是BlueArc的Titan 3200集群NAS系統(tǒng)，每個(gè)系統(tǒng)擁有200TB容量，來(lái)支持《阿凡達(dá)》。BlueArc系統(tǒng)的市場(chǎng)定位是為數(shù)量大的大文件提供服務(wù)，而像Weta digital這樣的媒體和娛樂(lè)公司通常使用大文件。一個(gè)配置完全的3200集群可以容納高達(dá)4PB的容量；BlueArc聲稱(chēng)，3200可以支持高達(dá)20萬(wàn)IOPS或高達(dá)20 Gbps的吞吐量。Ryan介紹，Weta Digital曾經(jīng)使用過(guò)一個(gè)Titan 3200群集。
但仍存在另一個(gè)問(wèn)題。 “我們有一個(gè)紋理數(shù)據(jù)，是一個(gè)相當(dāng)小的數(shù)據(jù)集, 總共在1TB到5TB，但幾乎每一個(gè)在‘渲染墻’的過(guò)程都想訪(fǎng)問(wèn)該紋理數(shù)據(jù)。”Ryan說(shuō)。由于這種數(shù)據(jù)訪(fǎng)問(wèn)模式，“我們發(fā)現(xiàn)，無(wú)論我們分配多大的帶寬給紋理數(shù)據(jù)，渲染墻都將消耗所有的帶寬。”
“熱”數(shù)據(jù)的復(fù)制者：FlexCache
Ryan說(shuō)：“我們和NetApp合作已久。”估計(jì)Weta Digital使用NetApp 文件服務(wù)器至少有十年之久，公司已經(jīng)有將近600TB的NetApp存儲(chǔ)用來(lái)服務(wù)用戶(hù)文件共享。 約九個(gè)月前，Weta Digital 引進(jìn)了一個(gè)新的雙節(jié)點(diǎn)高可用性集群，是NetApp的高端FAS6080集群系統(tǒng)，以及也是配置成雙節(jié)點(diǎn)高可用性的集群：八臺(tái)NetApp的FlexCache設(shè)備。
NetApp的FlexCache旨在支持類(lèi)似Weta Digital 渲染墻這樣的應(yīng)用。它通過(guò)使用本地緩存卷自動(dòng)復(fù)制“熱”數(shù)據(jù)，從而適應(yīng)不斷變化的使用模式。
雖然NetApp和BlueArc的系統(tǒng)不相互“交談”，但Weta Digital找到了一種方法，讓它們有效地共存。 NetApp的集群負(fù)責(zé)提供數(shù)據(jù)給渲染墻，而B(niǎo)lueArc的系統(tǒng)負(fù)責(zé)存儲(chǔ)渲染系統(tǒng)產(chǎn)生的電影畫(huà)面。 “我們知道BlueArc的產(chǎn)品不錯(cuò)，我們也知道它們速度快，而且絕對(duì)符合我們的期望值。”瑞恩說(shuō)， “但是，在過(guò)去的一年中令我們眼前一亮的新事物是FlexCache。”
Ryan說(shuō)，自動(dòng)性能管理是FlexCache的一大亮點(diǎn)。 “我們以前用過(guò)普通文件服務(wù)器來(lái)服務(wù)紋理文件，但是這需要我們手動(dòng)對(duì)復(fù)制進(jìn)行管理。我們不得不在許多不同的文件服務(wù)器上都保留這些紋理文件的副本。”他說(shuō)。
雖然目前的設(shè)置運(yùn)作良好，“我們一直在尋找更加細(xì)化的工具來(lái)查找存儲(chǔ)熱點(diǎn)以及哪些用戶(hù)試圖訪(fǎng)問(wèn)，”Ryan說(shuō)，“增加BlueArc的功能可以延遲問(wèn)題的出現(xiàn)，F(xiàn)lexCache則提供更多的帶寬。不過(guò)，當(dāng)熱點(diǎn)出現(xiàn)時(shí)，如何對(duì)熱點(diǎn)進(jìn)行分析，仍然存在一定的難度。”
