摘要：QSFP-DD模塊的熱力性能已針對(duì)高性能數(shù)據(jù)中心環(huán)境下的使用進(jìn)行了廣泛評(píng)估。提交并分析了15WQSFP-DD模塊的熱工測(cè)試數(shù)據(jù)及可行性研究結(jié)果，對(duì)溫升和氣流進(jìn)行了對(duì)比。

關(guān)鍵詞：QSFP一DD;模塊;數(shù)據(jù)中心;熱;測(cè)試

1QSFP-DD模塊概覽

QSFP-DD是業(yè)界尺寸最小而又可以提供最高端口帶寬密度的400GbE模塊。QSFP-DD是與四分之一小形狀系數(shù)可插拔雙密度（QSFP-DD）多源協(xié)議（MSA）集團(tuán)協(xié)作開(kāi)發(fā)的成果，滿足了市場(chǎng)對(duì)下一代高密度、高速可插拔模塊的需求。

QSFP-DD形狀系數(shù)的開(kāi)發(fā)過(guò)程充分利用了行業(yè)強(qiáng)大的制造能力與成本結(jié)構(gòu)，從而為40GbE和100GbE使用的QSFP+和QSFP28實(shí)際標(biāo)準(zhǔn)提供了大力支持。這一形狀系數(shù)在一個(gè)機(jī)架單位（RU）上即可啟用36個(gè)400GbE端口，提供超過(guò)14Tbps的帶寬（參見(jiàn)圖1）

QSFP-DD模塊向下兼容從40Gbps到200Gbps的所有基于QSFP的收發(fā)機(jī)，并且可以支持一系列的產(chǎn)品，包括：

·3m長(zhǎng)的無(wú)源銅纜;

·在并行多模光纖上支持100m的距離;

·在并行單模光纖上支持500m的距離;

·在雙工單模光纖上支持2km和10km的距離;

·WDM和連貫設(shè)計(jì)。

2熱需求與熱工測(cè)試

在含有可插拔模塊的設(shè)備的設(shè)計(jì)過(guò)程中，其中的一項(xiàng)挑戰(zhàn)是每個(gè)插座必須能夠承載最大的熱負(fù)荷。一項(xiàng)對(duì)預(yù)期的全部光學(xué)模塊的類型與傳輸距離的調(diào)研結(jié)果顯示，需要至少15W的冷卻功率才可以支持QSFP-DD的最大傳輸距離（如圖2）。

幸運(yùn)的是，行業(yè)對(duì)于小形狀系數(shù)模塊產(chǎn)品族的構(gòu)建（以及冷卻）具有著豐富的經(jīng)驗(yàn)。其中包括尺寸較小的SFP單通道模塊以及向下兼容的QSFP4通道模塊。這兩種模塊都已大量用于當(dāng)今的網(wǎng)絡(luò)交換機(jī)當(dāng)中。這些過(guò)去的經(jīng)驗(yàn)可以應(yīng)用到QSFP-DD可插拔模塊中，而且通過(guò)進(jìn)一步的創(chuàng)新，現(xiàn)在認(rèn)為在400GbE產(chǎn)品中可以很容易就達(dá)到15W的功率（參見(jiàn)圖3）。

系統(tǒng)設(shè)計(jì)在對(duì)降溫進(jìn)行優(yōu)化上的靈活性是QSFP-DD的一項(xiàng)主要優(yōu)勢(shì)。平頂?shù)脑O(shè)計(jì)通過(guò)在熱工方面眾多可行的創(chuàng)新，可以對(duì)頂部的散熱器和/或熱管：進(jìn)行優(yōu)化。這種靈活性上的范例包括一系列的端口入口、端口排氣口以及邊對(duì)邊的冷卻選項(xiàng)。

高密度系統(tǒng)采用的是各不相同的印刷電路板（PCB）布局、風(fēng)扇放置方式以及氣流控制方案，從而允許對(duì)路由、模塊布局和氣流進(jìn)行優(yōu)化。前部對(duì)前部的布局可以將QSFP-DD模塊置于印刷電路板上相對(duì)的兩側(cè)。在這種設(shè)計(jì)中，流過(guò)印刷電路板兩側(cè)的氣流為模塊的冷卻帶來(lái)一定的優(yōu)勢(shì)。與堆疊式的卡籠相比，這樣還可為進(jìn)入模塊內(nèi)部的高速走線實(shí)現(xiàn)更好的信號(hào)完整性。前部對(duì)前部布局的一個(gè)缺點(diǎn)就是印刷電路板上組件的高度受到限制，并且高功率交換芯片上散熱器的高度需要減小。

另一個(gè)方案，即堆疊布局，可以將QSFP-DD模塊安放到印刷電路板的同一側(cè)，從而氣流只會(huì)在一側(cè)流動(dòng)。通過(guò)將散熱器的高度提升到最大程度，這種布局可以為交換芯片的冷卻帶來(lái)優(yōu)勢(shì)。采用這種堆疊設(shè)計(jì)的主要挑戰(zhàn)在于向上方堆疊卡籠進(jìn)行高速走線時(shí)的信號(hào)完整性，以及下方卡籠模塊的冷卻問(wèn)題（如圖4）。

開(kāi)展了熱工測(cè)試以描述在指定工作范圍內(nèi)QSFP-DD模塊和卡籠的熱力性能，并且確保產(chǎn)品操作過(guò)程中耐受極端溫度時(shí)QSFP-DD解決方案的穩(wěn)健性。這些廣泛測(cè)試的結(jié)果詳細(xì)記錄下了氣流和熱：工測(cè)試的結(jié)果，其中使用了溫升作為系統(tǒng)設(shè)計(jì)的主要參數(shù)。在每個(gè)測(cè)試用例中，目標(biāo)熱力性能是使從環(huán)境溫度到模塊外殼的溫升保持在30°C以下。

3熱工測(cè)試1：堆疊卡籠測(cè)試用例

在上下插槽中同時(shí)對(duì)模塊進(jìn)行冷卻的能力要求將散熱器集成到2x1的卡籠中。開(kāi)展了測(cè)試以確定模塊-卡籠-散熱器與高功率光學(xué)模塊這-組合的熱力性能。使用了邊對(duì)邊的2x1卡籠來(lái)代表1RU的交換機(jī)，從而開(kāi)展了模塊熱工測(cè)試。

熱工測(cè)試的主要關(guān)注點(diǎn)在于固定的1RU系統(tǒng)設(shè)計(jì)，原因在于，從熱設(shè)計(jì)的角度來(lái)說(shuō)，這種設(shè)計(jì)通常最具挑戰(zhàn)性。對(duì)風(fēng)扇空間進(jìn)行了限制，這一形狀系數(shù)代表了最復(fù)雜的模塊熱設(shè)計(jì)。線卡向外拉出的模塊化系統(tǒng)設(shè)計(jì)通常配有尺寸更大的風(fēng)扇，在各組件之間能夠提供更大的氣流。通常情況下，與固定設(shè)計(jì)相比，模塊化系統(tǒng)中的溫升要低5～7°C。

每次測(cè)試中，將兩個(gè)2x1的QSFP-DD卡籠以邊對(duì)邊的方式進(jìn)行設(shè)置。全部熱工測(cè)試都在海平面上，在20°C到22°C的室溫范圍內(nèi)進(jìn)行。氣流方向?yàn)閺那暗胶?，并且測(cè)試中使用的氣流范圍視為是系統(tǒng)設(shè)計(jì)的一個(gè)典型范圍。在某些測(cè)試用例中，使用了測(cè)力計(jì)/測(cè)力傳感器來(lái)將散熱器的下壓力設(shè)為一個(gè)指定值，以便達(dá)到一致的測(cè)試結(jié)果。

在堆疊卡籠的熱工測(cè)試中，在預(yù)設(shè)為低壓力或預(yù)設(shè)為高壓力的情況下，使用夾具造成溫度升高。這樣就產(chǎn)生了非常接近的溫度結(jié)果，表明夾具設(shè)計(jì)獲得的緊固力較為適宜。當(dāng)每個(gè)2x1的卡籠中的氣流約為7CFM時(shí)，模塊外殼的平均溫升在21到22°C。溫升圖表明，如果每個(gè)2x1卡籠上的氣流超過(guò)8CFM，則模塊外殼的溫升可以小于20°C。大多數(shù)情況下，在經(jīng)測(cè)試的CFM范圍內(nèi)，2x1卡籠中的底部模塊運(yùn)行時(shí)可以比頂部模塊的溫度高出2到4°C。溫升與功率圖確認(rèn)了QSFP-DD模塊/卡籠的組合在小于30°C溫升情況下為所需的15W功率提供支持的能力（如圖5）。

前部對(duì)前部的設(shè)計(jì)中采用的散熱器安裝在表面安裝卡籠的頂部。這種設(shè)計(jì)在1U的交換機(jī)設(shè)計(jì)中應(yīng)當(dāng)提供最優(yōu)的模塊氣流。這是-項(xiàng)組件級(jí)別的測(cè)試，采用了兩個(gè)1x2的QSFP-DD卡籠，設(shè)置在測(cè)試板的兩側(cè)。全部熱工測(cè)試都在40°C的溫度下開(kāi)展。氣流方向?yàn)閺那暗胶螅⑶覝y(cè)試中使用的氣流范圍視為是系統(tǒng)設(shè)計(jì)的一個(gè)典型范圍。前部對(duì)前部的熱工測(cè)試同時(shí)采用了14W和15W的模塊功耗。結(jié)果顯示，模塊中心/后部的功耗偏置可帶來(lái)熱力性能上的顯著改善。

在氣流從前向后流動(dòng)的前部對(duì)前部系統(tǒng)中，當(dāng)每個(gè)模塊的氣流為6.4CFM時(shí)，在46°C的環(huán)境溫度下，15W模塊的外殼溫度可以保持在70°C以下。在40°C的環(huán)境氣溫下，模塊的最大功耗增至18W。對(duì)熱環(huán)境和/或定制散熱器（更高的散熱片高度和/或更大的散熱片密度）進(jìn)行優(yōu)化，可以將模塊的最大功耗提升至18W以上。需要6.5CFM的氣流才能達(dá)到所需的熱力性能。在2.5英寸水柱的壓降下使風(fēng)扇反向旋轉(zhuǎn)即可做到這一點(diǎn)。

4靈活性與經(jīng)濟(jì)性

QSFP-DD模塊的熱力性能已針對(duì)高性能數(shù)據(jù)中心環(huán)境下的使用進(jìn)行了廣泛評(píng)估。獲得的數(shù)據(jù)清楚的表明，溫升與氣流的對(duì)比充分驗(yàn)證了15WQSFP-DD模塊在現(xiàn)實(shí)的數(shù)據(jù)中心環(huán)境下的可行性。

作為一種靈活的低成本解決方案，QSFP-DD模塊充分利用了在系統(tǒng)、模塊和卡籠的熱設(shè)計(jì)以及策略上的豐富經(jīng)驗(yàn)。熱工測(cè)試確認(rèn)了該形狀系數(shù)可在產(chǎn)品的定制方面為行業(yè)提供最大的靈活性。在堆疊卡籠和前部對(duì)前部的配置中，QSFP-DD模塊都可為所需的熱負(fù)荷提供支持，滿足對(duì)于下一代高帶寬應(yīng)用的需求。