11版權(quán)聲明ODCC（開放數(shù)據(jù)中心委員會）發(fā)布的各項成果，受《著作權(quán)法》保護(hù)，轉(zhuǎn)載、摘編或利用其它方式使用ODCC成果中的文字或者觀點的，應(yīng)注明對于未經(jīng)著作權(quán)人書面同意而實施的剽竊、復(fù)制、修改、銷售、改編、匯編和翻譯出版等侵權(quán)行為，ODCC及有關(guān)單位將追究其法律責(zé)任，感謝各單位I編寫組數(shù)字經(jīng)濟(jì)時代，算力需求不斷增加，算力基礎(chǔ)設(shè)施能耗節(jié)節(jié)攀升，液冷因其顯著的散熱優(yōu)勢，成為數(shù)據(jù)中心的主要散熱技術(shù)，滿足政策和行業(yè)雙重需求。其中，冷板式液冷技術(shù)發(fā)展成熟、生態(tài)完本規(guī)范制訂的目的主要在于指導(dǎo)行業(yè)進(jìn)行液冷服務(wù)器系統(tǒng)及部件的可靠性測試，提升液冷產(chǎn)品的設(shè)計、生由于時間倉促，水平所限，錯誤和不足之處在所難免，歡迎各冷板式液冷服務(wù)器可靠性測試規(guī)范O I II IV 1 1 3 4 4 5 7 9 10 10 11 12 13 13 15 17 17 17 17V冷板式液冷服務(wù)器可靠性測試規(guī)范O 18 19 20 20 21 22 23 23 24 24 25 26 27 28 29 30 30 31 32 33 34 34 35 36冷板式液冷服務(wù)器可靠性測試規(guī)范O 37 37 38 38 39 39 39 40冷板式液冷服務(wù)器可靠性測試規(guī)范O冷板式液冷服務(wù)器可靠性測試規(guī)范本規(guī)范適用于液冷服務(wù)器系統(tǒng)及部件的可靠性測試，包括機(jī)電、液冷、結(jié)構(gòu)、軟件以及認(rèn)證測試的各個場景，本規(guī)范中“液冷服務(wù)管路及CDU。本規(guī)范用以指導(dǎo)液冷產(chǎn)品開發(fā)的可靠性測試，項目可二、規(guī)范性引用文件下列文件對于本文件的應(yīng)用是必不可少的。凡是注日期的引用GB/T2423.2電工電子產(chǎn)品環(huán)境試驗第2部分：試驗方法試驗GB/T2423.3環(huán)境試驗第2部分：試驗方法試驗Cab：恒定濕GB/T2423.5環(huán)境試驗第2部分：試驗方法試驗Ea和導(dǎo)則：沖擊1冷板式液冷服務(wù)器可靠性測試規(guī)范OYD/T3980-2021數(shù)據(jù)中心冷板式液冷服務(wù)器系統(tǒng)技術(shù)要求和測IEC62368-1音頻/視頻、信息和通信技術(shù)設(shè)備第1部分：安全2冷板式液冷服務(wù)器可靠性測試規(guī)范OISO7779信息技術(shù)設(shè)備和電信設(shè)備發(fā)出的空ISO9296Acoustics;declarednoiseemissGB/T14832-2008標(biāo)準(zhǔn)彈性體材料與液壓BSENISO9080Plasticspipingandductingsystems-Determinationofthelong-termhydrostaticstrengthofthermoplasticsmaterialsinpipeETSIEN300753AcousticNoiseEmittedByTelecom三、術(shù)語和定義指采用液體作為傳熱工質(zhì)在冷板內(nèi)部流道流動，通過熱傳遞對3冷板式液冷服務(wù)器可靠性測試規(guī)范O用于向機(jī)柜內(nèi)各液冷冷板分配水或其他冷卻工質(zhì)，一般介于冷量分配單元與冷板之間的冷卻工質(zhì)供回裝置。在總線盲插架構(gòu)中，背門熱交換器Reardoorheatexchanger一種安裝在機(jī)柜背面的熱交換器，通過內(nèi)部流動的液冷，將經(jīng)過的熱空氣進(jìn)行冷卻，冷卻后的空氣再循環(huán)到數(shù)據(jù)中心，從而減少對傳統(tǒng)機(jī)房空調(diào)制冷設(shè)備的需求，一般設(shè)計成機(jī)柜背門形態(tài)。也可冷板式液冷整機(jī)柜服務(wù)器Coldplateliquidcoolingrack機(jī)柜管理單元、分液歧管、背門熱交換器（可選）等集成在機(jī)柜內(nèi)的一體化服務(wù)器產(chǎn)品，一般采用冷板式液冷散熱，以整機(jī)柜一體化（一）液冷的定義液冷是以液體工質(zhì)為傳熱介質(zhì)，帶走設(shè)備熱量的散熱方式。液冷散熱系統(tǒng)通常由至少兩個相互隔離的循環(huán)回路組成，其中供給設(shè)4備的內(nèi)循環(huán)也稱作二次側(cè)，將熱量傳遞給外界環(huán)境的循環(huán)也叫一次流體工質(zhì)吸收熱量的方式有兩種：一種是通過流體溫度升高而吸收熱量，此時流體形態(tài)始終保持液態(tài)，也稱作單相液冷；另一種是由液態(tài)轉(zhuǎn)變?yōu)闅鈶B(tài)通過汽化潛熱轉(zhuǎn)移熱量，此時流體的形態(tài)發(fā)生（二）液冷一次側(cè)的散熱方式一次側(cè)的設(shè)備通常由客戶根據(jù)實際的應(yīng)用條件，綜合考慮成本進(jìn)行部署和安裝。主要的散熱設(shè)備包括主要有三種：干冷器、冷卻其中，干冷器通常由管翅式風(fēng)液換熱器和風(fēng)扇組成，管內(nèi)走封5冷卻塔靠蒸發(fā)冷卻，換熱和空氣濕球溫度相關(guān)，利用水與空氣流動接觸后進(jìn)行冷熱交換產(chǎn)生蒸汽，蒸汽揮發(fā)帶走熱量達(dá)到蒸發(fā)散熱、對流傳熱和輻射傳熱等原理來散去工業(yè)上或制冷空調(diào)中產(chǎn)生的余熱來降低水溫的蒸發(fā)散熱裝置，以保證系統(tǒng)的正常運行，裝置一般為桶狀，故名為冷卻塔；按水和空氣的接觸方式可分為直接冷卻制冷機(jī)組則是采用空調(diào)式的蒸發(fā)-壓縮-冷凝循環(huán)，利用制冷劑6從能耗上來看，制冷機(jī)組>>干冷器>冷卻塔，但是冷卻塔需要消耗大量的水，對于無水區(qū)域則難以使用。從制取水溫上看，制冷機(jī)組可以獲得7-12℃的冷卻水；干冷器出來的冷卻水高于環(huán)境干球溫度8.3-11.1℃（即T環(huán)+△T，一般適用于溫度較低的區(qū)域，否則水溫太高，高達(dá)到50-60℃);冷卻塔可以獲得高于環(huán)境濕球溫度2.8-3.9℃（開式）/3.9-6.7℃（閉式）的冷卻水（即T環(huán)+△T，一般（三）液冷二次側(cè)散熱的實現(xiàn)形式二次側(cè)的散熱，根據(jù)工質(zhì)與發(fā)熱器件的距離可以將液冷分為以78柜級冷卻即機(jī)柜內(nèi)安裝風(fēng)液熱交換器，工質(zhì)進(jìn)熱交換器，設(shè)備（四）板級液冷系統(tǒng)的基本構(gòu)成板級液冷系統(tǒng)主要由CDU、Manifold和冷板構(gòu)成，三者通過管內(nèi)部主要部件是泵、板換、管路以及監(jiān)控配電部件，一方面輸送液體到各個機(jī)柜，另一方面將來自各個機(jī)柜的熱量通過板換交換到一次側(cè)；它的控制主要是控制一次側(cè)流量和二次側(cè)進(jìn)液溫度，以及負(fù)9冷板式液冷服務(wù)器可靠性測試規(guī)范O體分配給機(jī)柜內(nèi)各個單板，并將各個單板載熱后的熱流體收集并回冷板（coldplate）則對應(yīng)原風(fēng)冷散熱器的位置，通過Tim/硅脂等材料和各發(fā)熱芯片接觸，冷板內(nèi)部走流體，通過流體進(jìn)出帶走熱（五）應(yīng)用技術(shù)要求存儲時間3個月以內(nèi)：-30℃~+60℃（-22℉~+140℉)存儲時間6個月以內(nèi)：-15℃~+45℃（5℉~113℉)冷板式液冷服務(wù)器可靠性測試規(guī)范O存儲時間1年以內(nèi)：-10℃~+35℃（14℉~95℉)）：a.風(fēng)液復(fù)合半液冷：僅處理器或處理器和內(nèi)存采用冷板液冷散b.風(fēng)液復(fù)合全液冷：處理器和內(nèi)存采用冷板液冷散熱，其他部c.全冷板液冷：處理器、內(nèi)存、硬盤、標(biāo)卡、PSU以及節(jié)點內(nèi)d.整機(jī)柜服務(wù)器供電輸入應(yīng)支持2N供電系統(tǒng)，宜采用集中供注：2N供電是指供電輸入有2個供電源，呈備份關(guān)系，每個供電源提供N(1)柜級分液歧管技術(shù)要求：a.應(yīng)在最高點設(shè)置自動排氣閥，用于排放系統(tǒng)部署及運行過程中產(chǎn)生的氣體（自動排氣閥占用空間不應(yīng)干涉服務(wù)器節(jié)點插拔維）；d.柜級分液歧管宜選用不銹鋼、鋁、PPR等材料，且系統(tǒng)中不應(yīng)有兩種電位差較大的金屬共存，避免電化學(xué)腐蝕的發(fā)生，如果必e.盲插系統(tǒng)所使用的分液歧管宜配備防止快接頭故障噴射、漏a.配備快接頭浮動機(jī)構(gòu)（僅采用盲插設(shè)計時適用），以滿足節(jié)c.管路設(shè)計應(yīng)滿足相應(yīng)的彎曲半徑要求，銅管不小于1.6倍管徑（直徑），非金屬軟管不小于3倍，以避免在裝配、運輸、維護(hù)冷板式液冷服務(wù)器可靠性測試規(guī)范Of.機(jī)柜和節(jié)點宜配套完善的漏液導(dǎo)流排出系統(tǒng)，以便在漏液發(fā)g.機(jī)柜底部應(yīng)配備具有漏液檢測功能的傳感器，用于感知漏液五、失效模式液冷產(chǎn)品最有特點的三大失效模式為，堵塞、泄漏、凝露，除此以外還有其他的失效故障，可參考電子產(chǎn)品常見失效模式的分析（一）堵塞與風(fēng)冷不同，液冷采用液體的循環(huán)流體散熱，有專門的流體通道，當(dāng)循環(huán)系統(tǒng)中的某個節(jié)點發(fā)生堵塞，工質(zhì)流道遇阻，會導(dǎo)致設(shè)備無法散熱、高溫告警、芯片降頻甚至宕機(jī)；堵塞有兩種形式：雜a.雜質(zhì)（堵塞物）一般來源于加工、現(xiàn)場施工、運行過程沉淀等，聚集在焊接位置、縫隙較小的流道位置或者過濾器位置；零部對于此類堵塞，系統(tǒng)上采用備份方式避免，如下圖一次側(cè)、二次側(cè)c.堵塞的分析及驗證，應(yīng)結(jié)合以上具體場景，挖掘所有可能出（二）泄漏接口和密封方式眾多，往往產(chǎn)生泄漏點，部冷板式液冷服務(wù)器可靠性測試規(guī)范O例3：FEP套寶塔，內(nèi)部寶塔采用尼龍材質(zhì)，長期受管路的擠壓產(chǎn)生蠕變，竹節(jié)結(jié)構(gòu)向內(nèi)變形，管和竹節(jié)之間的密封力下降，產(chǎn)冷板式液冷服務(wù)器可靠性測試規(guī)范O（三）凝露熱空氣遇到低溫的工質(zhì)容易在部件表面產(chǎn)生凝露，溫度、相對濕度液冷系統(tǒng)一般會自動控制進(jìn)出水溫度，避免產(chǎn)生凝露；但控制六、試驗方法（一）密閉性測試測試目的：確認(rèn)液冷部件及整機(jī)柜（節(jié)點與機(jī)柜連接狀態(tài)）的冷板式液冷服務(wù)器可靠性測試規(guī)范Oa.將轉(zhuǎn)接管的其中一端母頭與壓力表對接，將轉(zhuǎn)接管的另外一b.將無油空壓機(jī)（或帶減壓閥的氮氣瓶）與另一個分液歧管液），）；b.測試時間：穩(wěn)壓10Min后當(dāng)前壓力值記為P1，分別保壓冷板式液冷服務(wù)器可靠性測試規(guī)范O測試判據(jù)：壓降值（P1-P2及P1-P3）符合生產(chǎn)企業(yè)內(nèi)部規(guī)范要（二）液冷管路耐壓力測試a.在管路對外接口處裝上工裝接頭，所有對外接口密封，內(nèi)部b.通過注液工裝或試驗機(jī)，向被測樣品中注入工質(zhì)，使其壓力c.確定系統(tǒng)內(nèi)部壓力均勻、穩(wěn)定后，穩(wěn)壓1min后檢查樣品有無e.完成以上測試，如果沒有異常；則繼續(xù)注入壓力，使其壓力f.確定系統(tǒng)內(nèi)部壓力均勻、穩(wěn)定后，穩(wěn)壓1min后檢查樣品有無a.0.5P壓力情況下：穩(wěn)壓1min，外觀檢查，變形鼓包不超過冷板式液冷服務(wù)器可靠性測試規(guī)范Oa.5倍最大正常工作壓力（滿足冷板散熱流量情況下各部件的）；）；（三）液冷接頭插拔測試a.不帶壓狀態(tài)下插拔：在實際系統(tǒng)使用環(huán)境中或模擬系統(tǒng)運行的循環(huán)工裝進(jìn)行插拔測試，對冷板組件與分液歧管的液冷接頭公、b.對分液歧管充入工質(zhì)，并加壓至300Kpa（或?qū)嶋H最大工作壓力），再對冷板組件與分液歧管的液冷接頭公、母頭進(jìn)行250次插（四）雜質(zhì)堵塞測試測試目的：驗證冷板管路長期沖刷或加工過程中殘余的雜質(zhì)，工質(zhì)長期不流通結(jié)晶沉淀物在快接頭長期斷開和連接可能存在堵塞冷板式液冷服務(wù)器可靠性測試規(guī)范Ob.配比100mL乙二醇污染溶液，通過軟管注入至液冷公頭或母c.24h后，對插液冷公、母頭10次，同時觀察快接頭是否被石英砂和工質(zhì)沉淀物堵塞不回彈，目測觀察是否存在漏液，及完成后（五）脈沖壓力測試測試目的：評估液冷組件（含冷板組件、分液歧管、液冷接頭a.液冷部件接入壓力脈沖試驗機(jī)，排氣注入工質(zhì)（或去離子）；b.設(shè)定壓力循環(huán)模式為正弦波曲線，波峰壓力為350Kpa，波谷）；冷板式液冷服務(wù)器可靠性測試規(guī)范Oa.被測樣品，有多種狀態(tài)的部件，連通和斷開狀態(tài)需要分別測試，測試數(shù)據(jù)和基礎(chǔ)數(shù)量一致，如快接頭有插拔連通密封、斷開密（六）沖刷腐蝕測試b.將被測樣品接入實際工作系統(tǒng)或等效工況工裝中，測試樣品a.無上電業(yè)務(wù)需求，測試樣品可單獨將液冷服務(wù)器內(nèi)部的冷板冷板式液冷服務(wù)器可靠性測試規(guī)范O（七）液冷管路溫度循環(huán)測試），b.測試條件：溫度范圍-40~70℃a；溫度變化速率1℃/min；峰對于產(chǎn)品規(guī)格、或產(chǎn)品實際應(yīng)用中達(dá)到的最高/最低溫度；超過（-40℃~70℃)范圍時，根據(jù)產(chǎn)品能達(dá)到的最嚴(yán)酷條件來測試。（八）液冷管路溫度沖擊測試a.對待測液冷部件充壓入工質(zhì)，并加壓至350Kpa，并放入溫箱b.測試條件：溫度范圍5~70℃a；溫度變化速率10℃/min；峰冷板式液冷服務(wù)器可靠性測試規(guī)范O按產(chǎn)品規(guī)格、或產(chǎn)品實際應(yīng)用中達(dá)到的最高/最低溫度，超過（5℃~70℃)范圍時，根據(jù)產(chǎn)品能達(dá)到的最嚴(yán)酷條件來測試。（九）液冷管路高溫高濕測試測試目的：評估管路部件是否能滿足高溫高濕環(huán)境長期運行要a.對待測液冷部件充壓入一半體積工質(zhì)，加壓至350Kpa，并放管路內(nèi)充入工質(zhì)量不宜充滿，至少預(yù)留50%空隙以作為壓力變（十）漏液檢測能力測試測試目的：檢驗被測液冷設(shè)備的漏液檢測能力是否符合技術(shù)規(guī)冷板式液冷服務(wù)器可靠性測試規(guī)范Oa.液冷設(shè)備灌滿冷卻液，上電自循環(huán)，查詢并記錄漏液檢測狀b.通過排液孔排液將液冷設(shè)備冷卻液排放到液冷設(shè)備底部，液c.去除液冷設(shè)備底部液體，使漏液傳感器處于干燥狀態(tài)，查詢（十一）非金屬介質(zhì)兼容性測試a.將系統(tǒng)中涉及與工質(zhì)接觸的所有非金屬材料（參考下表），拉伸性能GB/T528、GB/T1690軟管標(biāo)準(zhǔn)樣條GB/T1690邵氏硬度GB/T531.1、GB/T1690拉伸性能GB/T528、GB/T1690軟管/密封墊標(biāo)準(zhǔn)樣條GB/T11547拉伸性能GB/T1040抗沖性能GB/T1843a.若無法制備標(biāo)準(zhǔn)樣條，可制取一定規(guī)格的樣片進(jìn)行測試，同c.若O形圈尺寸過小，不易測試，可按照橡膠密封墊的測試方（十二）非金屬老化測試測試目的：評估非金屬材料在液冷工質(zhì)下長期接觸工質(zhì)，可能冷板式液冷服務(wù)器可靠性測試規(guī)范Oa.選取至少5組樣品，樣品為非金屬部件的零件狀態(tài)，將軟管b.將準(zhǔn)備好的零部件放入高壓罐體中，加滿工質(zhì)，并加壓至c.測試完成后，取出樣品，組裝成成品，分別注入工質(zhì)并打壓本表推薦的溫度及測試周期是基于特定材料定義，實際可基于（十三）金屬耐腐蝕性測試測試目的：模擬液冷系統(tǒng)中金屬部件在工質(zhì)中的腐蝕場景，驗a.將金屬樣片（數(shù)量不低于5pcs）固定在工裝上（工裝材質(zhì)與）；冷板式液冷服務(wù)器可靠性測試規(guī)范Oc.或?qū)⒈粶y金屬實物樣品接入測試系統(tǒng)（實際工作機(jī)柜或等效），b.金屬樣片厚度按照實際樣品最薄壁厚，或直接在樣品最薄壁（十四）中性鹽霧測試測試目的：驗證液冷部件實際使用過程中，在相應(yīng)環(huán)境下耐腐a.測試條件設(shè)置為：5%氯化鈉溶液（NaCl）鹽溶液，pH值冷板式液冷服務(wù)器可靠性測試規(guī)范O（十五）電源備份測試測試目的：檢驗被測電源模塊在單路輸入異常時輸出電壓是否a.將被測電源模塊的2路輸入（為了方便描述，分別命名為A路/B路）分別上電，保證輸入電壓在正常范圍內(nèi)，電源指示燈應(yīng)處于綠燈常亮狀態(tài)，系統(tǒng)開始運行，待系統(tǒng)運行到穩(wěn)定狀態(tài)后開始測b.將A路輸入下電，觀察系統(tǒng)工作是否出現(xiàn)異常，是否有除輸c.恢復(fù)A路供電，將B路輸入下電，觀察系統(tǒng)工作是否出現(xiàn)異d.通過BMC下發(fā)命令切換供電來源，觀察系統(tǒng)工作是否出現(xiàn)e.斷開A路供電，通過BMC下發(fā)命令由B路切換到A路，或a.手工切換輸入源后系統(tǒng)正常工作，無除輸入掉電之外的告警b.BMC命令切換后系統(tǒng)正常工作，電源可準(zhǔn)確切換到對應(yīng)供電冷板式液冷服務(wù)器可靠性測試規(guī)范Oc.其中一路供電不具備供電能力的情況下，電源不響應(yīng)BMC（十六）噪聲測試b.整機(jī)柜進(jìn)入運行狀態(tài)，按照下圖17點法或21點法進(jìn)行測試）：b.單節(jié)點進(jìn)入運行狀態(tài)，按照下圖9點法進(jìn)行測試（依據(jù)尺寸）；（十七）氣候環(huán)境試驗測試目的：模擬氣候要素中溫度/濕度及其變化對單節(jié)點或整機(jī)a.受試產(chǎn)品在箱內(nèi)安裝應(yīng)保證除必要的支點外，全部暴露在傳冷板式液冷服務(wù)器可靠性測試規(guī)范Ob.試驗持續(xù)時間應(yīng)從樣品在規(guī)定的試驗條件上穩(wěn)定的瞬間開始e.試驗嚴(yán)酷度等級的確定應(yīng)考慮產(chǎn)品在實際的貯存、運輸與使用中出現(xiàn)的概率，一般取20%;f.檢測儀器的精度至少應(yīng)為被測變量容差的三分之一；（十八）低氣壓測試a.受試產(chǎn)品在箱內(nèi)安裝應(yīng)保證除必要的支點外，全部暴露在傳b.試驗持續(xù)時間應(yīng)從樣品在規(guī)定的試驗條件上穩(wěn)定的瞬間開始冷板式液冷服務(wù)器可靠性測試規(guī)范O（十九）工作隨機(jī)振動測試c.機(jī)箱模擬實際安裝狀態(tài)，緊固在機(jī)架或等效固定工裝上。如果機(jī)箱在機(jī)架內(nèi)的實際安裝情況有滑道支撐，存在后掛耳等情況，（二十）工作沖擊測試?yán)浒迨揭豪浞?wù)器可靠性測試規(guī)范Oc.機(jī)箱模擬實際安裝狀態(tài)，緊固在機(jī)架或等效固定工裝上。如果機(jī)箱在機(jī)架內(nèi)的實際安裝情況有滑道支撐，存在后掛耳等情況，（二十一）運輸包裝件碰撞測試測試目的：考量產(chǎn)品在包裝運輸時，其包裝緩沖能力是否滿足b.包裝：按實際發(fā)貨要求，將所需的服務(wù)器整機(jī)及配套附件包a.包裝本體不能失去原有功能，如托盤斷裂、外箱撕裂及緩沖冷板式液冷服務(wù)器可靠性測試規(guī)范Ob.內(nèi)裝設(shè)備外觀應(yīng)無人眼可見的變形、凹坑、掉漆、劃痕或絲c.各部件的機(jī)械固定和連接處，如螺釘、鉚接及卡接等部位，（二十二）運輸包裝件跌落測試測試目的：考量產(chǎn)品在包裝運輸時，其包裝緩沖能力是否滿足b.包裝：按實際發(fā)貨要求，將所需的服務(wù)器整機(jī)及配套附件包a.包裝本體不能失去原有功能，如托盤斷裂、外箱撕裂及緩沖b.內(nèi)裝設(shè)備外觀應(yīng)無人眼可見的變形、凹坑、掉漆、劃痕或絲c.各部件的機(jī)械固定和連接處，如螺釘、鉚接及卡接等部位，（二十三）運輸包裝件滾動測試測試目的：考量產(chǎn)品在包裝運輸時，其包裝緩沖能力是否滿足b.包裝：按實際發(fā)貨要求，將所需的服務(wù)器整機(jī)及配套附件包a.包裝本體不能失去原有功能，如托盤斷裂、外箱撕裂及緩沖b.內(nèi)裝設(shè)備外觀應(yīng)無人眼可見的變形、凹坑、掉漆、劃痕或絲c.各部件的機(jī)械固定和連接處，如螺釘、鉚接及卡接等部位，（二十四