Direct-to-Chip Liquid Cooling چیست؟ بررسی مهندسی Cold Plate، Manifold و Coolant Loop

  • فیدار کوثر
  • 1405/7/13
چرا سیستم D2C برای زیرساخت هوش مصنوعی ضروری است؟
Direct-to-Chip Liquid Cooling چیست؟ بررسی مهندسی Cold Plate، Manifold و Coolant Loop
 

فهرست مطالب

۱. دیوار حرارتی هوش مصنوعی و پردازش با تراکم بالا

افزایش تصاعدی توان پردازشی در زیرساخت‌های هوش مصنوعی (AI) و محاسبات سریع (HPC)، محدودیت‌های فیزیکی خنک‌کننده‌های مبتنی بر هوا را نمایان کرده است.

معماری سنتی جریان هوا (Air Cooling) زمانی که توان مصرفی رک‌ها از مرز ۳۰ تا ۴۰ کیلووات عبور می‌کند، به بن‌بست ترمودینامیکی می‌رسد. با ظهور پردازنده‌هایی با توان حرارتی بیش از ۱۰۰۰ وات و رسیدن تراکم رک‌ها به ارقامی نظیر ۱۴۰ کیلووات[رک‌های تراکم بالا در دیتاسنتر]، ظرفیت حرارتی هوا دیگر برای جلوگیری از گلوگاه حرارتی (Thermal Throttling) کافی نیست.

فناوری خنک‌کننده مایع مستقیم روی تراشه (Direct-to-Chip Liquid Cooling - D2C) پاسخ مهندسی به این بحران است. آب و سیالات مبتنی بر گلیکول دارای ظرفیت حرارتی حجمی تا ۳۵۰۰ برابر بیشتر از هوا هستند.

با این حال، یکی از بزرگترین تصورات اشتباه این است که D2C نیاز به تهویه مطبوع هوا را کاملاً حذف می‌کند. در واقعیت، سیستم‌های خنک‌کننده مایع یک راهکار هیبریدی هستند.

  • بخش مایع (۷۰-۷۵٪): کلد پلیت‌ها حرارت تولید شده توسط پردازنده‌های اصلی (CPU و GPU) را جذب می‌کنند.
  • بخش هوایی (۲۵-۳۰٪): سایر قطعات مانند حافظه، درایوها و تجهیزات جانبی همچنان نیازمند خنک‌کننده‌های هوایی (مانند CRAH یا RDHx) هستند.
نتیجه‌گیری مدیریتی: مهاجرت به زیرساخت D2C یک ارتقای ساده در لوله‌کشی نیست، بلکه یک تغییر پارادایم در مدیریت حرارتی و ریسک است. مدیران دیتاسنتر باید این فناوری را به‌عنوان یک معماری ترکیبی (هیبریدی) در نظر بگیرند که نیازمند بازطراحی همزمان هر دو بخش تأسیسات (Facility) و زیرساخت فناوری اطلاعات (IT) است.

 

۲. معماری سیستم D2C: تفکیک حلقه‌های FWS و TCS

بزرگترین چالش در طراحی سیستم‌های خنک‌کننده مایع، نحوه اتصال تأسیسات زیربنایی خنک‌کننده (مانند چیلرها) به سرورهای حساس است، بدون اینکه خطر نشت و آلودگی ایجاد شود.

برای رفع این چالش، معماری D2C به دو حلقه کاملاً مجزا و ایزوله تقسیم می‌شود:

  • حلقه تاسیسات (FWS - Facility Water System): مدار اولیه که شامل آب خنک‌کننده ساختمان است و با چیلرها و برج‌های خنک‌کننده ارتباط دارد. این آب تصفیه صنعتی شده اما برای ورود به قطعات میکروسکوپی سرورها بیش از حد ناخالص است.
  • حلقه تجهیزات فناوری اطلاعات (TCS - Technology Cooling System): مدار ثانویه که یک سیال شیمیایی دقیق و تصفیه‌شده (معمولا مبتنی بر گلیکول) را مستقیماً به تجهیزات IT (سرورها و کلد پلیت‌ها) ارسال می‌کند.
استاندارد مرجع: بر اساس دستورالعمل‌های ASHRAE TC 9.9 ویرایش ۲۰۲۴، دستگاه توزیع خنک‌کننده (CDU) باید به‌عنوان نقطه دقیق تفکیک (Demarcation Point) بین دو حلقه FWS و TCS عمل کند. این طراحی تضمین می‌کند که آلاینده‌های ساختمانی وارد مدار حساس پردازنده‌ها نشوند.

 

The D2C Demarcation: FWS vs. TCS Architecture

 

۳. واحد توزیع خنک‌کننده (CDU): قلب تپنده سیستم

دستگاه Coolant Distribution Unit (CDU) صرفاً یک پمپ ساده نیست[معماری دیتاسنتر کانتینری]، بلکه یک تجهیز استراتژیک است که پنج وظیفه مهندسی بحرانی را بر عهده دارد:
  • ایزولاسیون (Isolation): مبدل حرارتی صفحه‌ای داخل CDU، گرما را بین مدارهای FWS و TCS منتقل می‌کند، در حالی که از ترکیب فیزیکی آنها جلوگیری می‌نماید.
  • پمپاژ و افزونگی (Pumping & Redundancy): غلبه بر مقاومت هیدرولیکی عظیم مدار. خرابی پمپ می‌تواند در عرض چند ثانیه تا حداکثر یک دقیقه (بسته به بار حرارتی پردازنده) باعث افت عملکرد (Throttling) و خاموشی پردازنده‌ها شود. به همین دلیل افزونگی N+1 در سطح پمپ و گاهی در سطح دستگاه (برای Tier III/IV) الزامی است.
  • کنترل نقطه شبنم (Dew Point Control): تنظیم خودکار دمای سیال ورودی تا از ایجاد میعان جلوگیری کند.
  • فیلتراسیون (Filtration): جذب ذرات میکروسکوپی و جلوگیری از مسدود شدن مجاری کلد پلیت‌ها.
  • مانیتورینگ و محافظت (Monitoring): پایش مستمر فشار، دبی جریان، رسانایی الکتریکی و تشخیص نشتی.
هشدار ایمنی: سیستم کنترلی CDU باید همواره دمای سیال ارسالی (Supply Temperature) را حداقل ۲ تا ۳ درجه سانتی‌گراد بالاتر از نقطه شبنم (Dew Point) دیتاسنتر نگه دارد. کاهش دما به زیر نقطه شبنم باعث ایجاد میعان قطرات آب روی قطعات و اتصالی فاجعه‌بار در مادربردها خواهد شد.

 

۴. کلد پلیت (MLCP): مهار شار حرارتی در سطح سیلیکون

هسته اصلی جذب گرما در این معماری، Micro-Channel Liquid Cold Plate (MLCP) است. این صفحات فلزی (معمولاً مسی) مستقیماً بر روی سطح پردازنده نصب می‌شوند. ابتدا گرما از طریق هدایت (Conduction) از سطح سیلیکون به فلز کلد پلیت منتقل شده و سپس از طریق همرفت (Convection) به سیالِ در حال حرکت انتقال می‌یابد.

پردازنده‌های نسل جدید شار حرارتی (Heat Flux) فوق‌العاده بالایی تا محدوده ۵۰۰ الی ۶۰۰ W/cm² تولید می‌کنند. برای مهار این انرژی، پره‌های میکروسکوپی (Microchannels) به عرض ۲۷ تا ۱۰۰ میکرون (در حد ضخامت موی انسان) داخل کلد پلیت تعبیه شده است که سطح تماس سیال با فلز را به شدت افزایش می‌دهد.

نتیجه‌گیری مهندسی: بهینه‌سازی کلد پلیت یک بازی دوگانه بین راندمان حرارتی و مقاومت هیدرولیکی است. افزایش سرعت سیال، دمای پردازنده را کاهش می‌دهد، اما افت فشار (ΔP) و استهلاک پمپ را به صورت نمایی بالا می‌برد.

 

میکروکانال‌های خنک‌کننده مایع

 

۵. مانیفولد رک و اتصالات سریع (Rack Manifold & UQD/UQDB)

برای توزیع یکنواخت سیال بین ده‌ها سرور متراکم در یک رک (مانند استانداردهای ORv3)، از مانیفولدهای عمودی استفاده می‌شود. نقطه اتصال این مانیفولدها به سرورها، مهم‌ترین بخش از نظر ریسک نشتی و قابلیت تعمیر و نگهداری (Maintainability) محسوب می‌شود.

در این نقاط از کانکتورهای Universal Quick Disconnect (UQD) استفاده می‌گردد که دارای شیرهای قطع‌کننده دوگانه (Dry-Break) هستند. این فناوری اجازه می‌دهد سرورها را بدون نیاز به تخلیه مدار خنک‌کننده، قطع و وصل کرد.

 

۵.۱ مقایسه فناوری‌های اتصال: دستی (UQD) در برابر کور (UQDB)

انتخاب بین اتصالات دستی استاندارد و اتصالات خودتراز (Blind Mate)، یکی از تصمیمات کلیدی در معماری زیرساخت است:
معیار ارزیابی اتصال دستی استاندارد (UQD) اتصال خودتراز (UQDB - Blind-Mate)
مکانیسم اتصال فشاری/دستی با نیاز به دید مستقیم و دو دست فشاری خودکار با تراز هدایت‌شونده (بدون ابزار)
تلورانس تراز شعاعی فاقد تلورانس (نیاز به دقت دقیق اپراتور) ±۱ میلی‌متر شناوری (Radial Float)
میزان نشتی در قطعی قطرات میکروسکوپی (0.02ml تا 0.07ml) کاملاً مشابه UQD (Trace Amounts)
سرعت هات‌سواپ متوسط - نیازمند دسترسی فیزیکی به پشت رک بسیار سریع (کاهش ۶۰ تا ۸۰ درصدی زمان نصب)
بهترین کاربرد رک‌های با عمق استاندارد و تراکم متوسط رک‌های هوش مصنوعی (ORv3) و محیط‌های بدون دسترسی از پشت

تحلیل تصمیم‌گیری: تصور رایج مبنی بر "عدم نشت مطلق" در این کانکتورها اشتباه است. استانداردهای OCP مقادیر بسیار ناچیز (Trace Amounts) را مجاز می‌دانند. برای رک‌های عمیق، استفاده از UQDB یک الزام عملیاتی است تا شناوری ۱ میلی‌متری آن مانع از شکستگی هنگام جا زدن نودهای سنگین سرور شود.

 

Anatomy of an OCP UQDB (Blind-Mate) Connector

 

۶. شیمی سیال خنک‌کننده: پیشگیری از قاتلان خاموش (خوردگی و رسوب)

بزرگترین اشتباه استراتژیک در سیستم‌های مایع، استفاده از آب مقطر یا دیونیزه خالص است. در سیستم‌های D2C که از فلزات ناهمگون استفاده می‌کنند (مثلا کلد پلیت مس در کنار مانیفولد آلومینیوم)، آب خالص مانند یک الکترولیت عمل کرده و خوردگی گالوانیک (Galvanic Corrosion) ایجاد می‌کند.

این واکنش باعث ایجاد سوراخ‌های میکروسکوپی (Pitting) و نشتی‌های خطرناک در سیستم می‌شود. برای مهار این خطر، استاندارد صنعتی استفاده از مایعات پایه پروپیلن گلیکول (مانند PG25) به همراه پکیج‌های بازدارنده (Inhibitors) است.

خطر / ریسک علت مهندسی راهکار پیشگیری / ماده افزودنی
خوردگی گالوانیک مس/آلومینیوم اختلاف پتانسیل الکتریکی فلزات در مدار مشترک استفاده از بازدارنده‌های Azole (برای مس) و Carboxylate
تخریب واشرهای لاستیکی (EPDM) واکنش شیمیایی سیال با الاستومرهای کانکتور فرمولاسیون سازگار با EPDM (استاندارد OCP)
رشد بیولوژیک و باکتری دمای ایده‌آل آب و کاهش مواد بازدارنده حفظ سطح ORP بین ۲۰۰ تا ۴۰۰ میلی‌ولت و بایوساید
اسیدی شدن سیال و رسوب‌گذاری تخریب حرارتی گلیکول به اسیدهای خورنده پایش مستمر pH (محدوده 6.8 تا 8.5) و بافر شیمیایی
نتیجه‌گیری مدیریتی: سیال خنک‌کننده یک ماده "یکبار تزریق" نیست. پایش مستمر پارامترهای شیمیایی (pH، رسانایی و ORP) برای جلوگیری از استهلاک یکباره زیرساخت‌های گران‌قیمت الزامی است.

 

۷. چالش‌های مهندسی: دوراهی فیلتراسیون در برابر افت فشار (ΔP)

یکی از بحث‌برانگیزترین نقاط ضعف در عملیات D2C، تضاد مهندسی بین "پاکیزگی مایع" و "قدرت پمپاژ" است. کلد پلیت‌های مدرن مجاری میکروسکوپی (۵۰ میکرون) دارند که نیازمند فیلترهای ۲۵ میکرونی برای محافظت هستند[مدیریت خنک‌سازی مرکز داده].

اما عبور سیال با سرعت بالا از فیلتر ریز، افت فشار شدید (۱۰ تا ۳۰ کیلوپاسکال) به همراه دارد. در صورت انتخاب فیلتر درشت‌تر برای کاهش بار پمپ، زنجیره شکست زیر رخ می‌دهد:

  1. ورود آلاینده: ذرات بسیار ریز از فیلتر درشت (مثلاً ۱۰۰ میکرونی) عبور می‌کنند.
  2. گرفتگی (Clogging): رسوبات مستقیماً وارد شیارهای ۵۰ میکرونی کلد پلیت شده و جریان آرام (Laminar) را مسدود می‌کنند.
  3. افت عملکرد (Throttling): دمای اتصالی پردازنده گرافیکی (GPU) به شدت بالا رفته و سیستم برای فرار از خرابی فیزیکی، توان خود را کاهش می‌دهد که مستقیماً باعث افت سرعت محاسبات می‌شود.

 

The Microchannel Clogging Cascade

 

۸. ماتریس سناریوهای بحران (Crisis Scenario Matrix)

طراحی مقاوم زیرساخت D2C نیازمند درک دقیق سناریوهای قطعی و داشتن پروتکل‌های واکنش خودکار و دستی است.

جدول زیر متداول‌ترین بحران‌های این سیستم را بررسی می‌کند:

نوع بحران علت احتمالی واکنش سیستم (Automated) اقدام اصلاحی (Manual)
از کار افتادن پمپ (Pump Failure) نقص مکانیکی یا الکتریکی در VFD پمپ اصلی CDU سوئیچ خودکار به پمپ افزونه N+1 و ارسال سیگنال هشدار ایزوله کردن پمپ معیوب و تعویض هات‌سواپ (در دستگاه‌های پشتیبانی‌کننده)
گرفتگی فیلتر (Filtration Clogging) رسوب بیولوژیک یا ذرات معلق ناشی از خوردگی شبکه تشخیص افت فشار هیدرولیک (ΔP) و ارسال الارم به BMS تغییر مسیر جریان به فیلتر بای‌پس (Bypass) و تعویض کارتریج فیلتر اصلی
هشدار نقطه شبنم (Dew Point Alarm) افزایش ناگهانی رطوبت سالن یا کاهش دمای چیلر تاسیسات مدولاسیون شیر سه‌راهه CDU برای بالا بردن دمای Supply (بالاتر از شبنم) بررسی عملکرد سیستم هواساز سالن (CRAH) جهت تثبیت رطوبت نسبی

 

۹. چک‌لیست ارزیابی زیرساخت مایع (D2C Readiness)

پیش از سرمایه‌گذاری و اجرای سیستم‌های خنک‌کننده مایع، مدیران زیرساخت باید معیارهای زیر را به دقت ممیزی کنند:
  • [ ] ارزیابی افزونگی (Redundancy): آیا CDU انتخابی دارای پمپ‌های داخلی N+1 است و توانایی کنترل نوسانات حرارتی را در زمان سوئیچ کردن پمپ‌ها دارد؟
  • [ ] سازگاری فلزات (Metallurgy): آیا تطابق کامل شیمیایی بین کلد پلیت‌ها (مس)، مانیفولدها (آلومینیوم/استیل) و فیتینگ‌ها با سیال PG25 تایید شده است؟
  • [ ] تحمل فیزیکی اتصالات: آیا الاستومرهای EPDM درون کانکتورهای UQD توانایی تحمل هزاران سیکل قطع و وصل شدن را بر اساس مستندات تولیدکننده دارند؟
  • [ ] ساختار رک‌ها: در صورت انتخاب سیستم Blind-mate، آیا شاسی و ساختار فلزی رک‌ها برای پوشش دادن تلورانس شعاعی ۱ میلی‌متری (Radial Float) مهندسی شده‌اند؟
  • [ ] ظرفیت باقی‌مانده هوا (Hybrid Cooling): آیا سیستم سرمایش سنتی دیتا سنتر (CRAH) توانایی دفع ۲۵ تا ۳۰ درصد از بار حرارتی باقی‌مانده را دارد؟

 

۱۰. سوالات متداول (FAQ)

  1. تفاوت بین حلقه‌های FWS و TCS چیست؟ مدار FWS (سیستم آب تأسیسات) مدار اولیه و متصل به چیلرهای ساختمان است. TCS (سیستم خنک‌کننده تکنولوژی) مدار ثانویه، تمیز و محافظت‌شده است که مستقیماً به سرورها متصل می‌شود. CDU سد فیزیکی بین این دو است.
  2. چرا نمی‌توان از آب دیونیزه یا مقطر استاندارد در سیستم D2C استفاده کرد؟ آب فاقد مواد بازدارنده در مجاورت فلزات متفاوت مانند مس و آلومینیوم مانند یک الکترولیت عمل کرده و سبب خوردگی گالوانیک می‌شود که به سرعت منجر به نشتی و سوراخ‌شدگی می‌گردد.
  3. استاندارد اتصالات OCP UQDB چیست؟ مخفف Universal Quick Disconnect Blind-Mate است. این استاندارد به کانکتورهای خودتراز با ±۱ میلی‌متر شناوری اجازه می‌دهد تا سرورها بدون نیاز به ابزار، دید مستقیم و دخالت دستی به سیستم خنک‌کننده متصل شوند؛ که برای هات‌سواپ رک‌های سنگین AI حیاتی است.
  4. آیا مهاجرت به D2C تجهیزات خنک‌کننده هوایی را حذف می‌کند؟ خیر. سیستم مستقیم روی تراشه نهایتاً ۷۰ تا ۷۵ درصد حرارت را جذب می‌کند. ۲۵ تا ۳۰ درصد باقیمانده (تولید شده توسط حافظه و منبع تغذیه) همچنان نیازمند سرمایش هوایی (CRAH) یا In-Row است.

 

۱۱. نتیجه‌گیری و چشم‌انداز آینده

سیستم Direct-to-Chip Liquid Cooling تنها یک پاسخ مقطعی به گرمای تراشه‌های متراکم نیست، بلکه فونداسیون معماری نسل بعدی دیتاسنترهای هوش مصنوعی است. اجرای موفقیت‌آمیز این فناوری نیازمند عبور از مرزهای دانش تأسیسات سنتی و تسلط بر ترمودینامیک، کنترل افت فشار هیدرولیک و مدیریت الکتروشیمیایی سیالات است.

تصمیم‌گیرندگان فناوری اطلاعات باید از ادعاهای بازاریابی عبور کرده و زیرساختی مبتنی بر استانداردهای ASHRAE و OCP بنا کنند تا از حداکثر توان پردازشی زیرساخت‌های چند میلیون دلاری خود، با بالاترین سطح تاب‌آوری و بدون ریسک خرابی قطعات، محافظت نمایند.

ارتقای زیرساخت دیتاسنتر به فناوری خنک‌کننده مایع (D2C)

پیاده‌سازی موفق معماری مایع نیازمند ممیزی دقیق ظرفیت‌های حرارتی، مهندسی سیالات و استانداردهای پایداری است. تیم مهندسی فیدارکوثر با تخصص در طراحی زیرساخت‌های نوین، آماده ارائه مشاوره استراتژیک برای محافظت از سرورهای پردازشی شماست.

درخواست مشاوره تخصصی دیتاسنتر کانتینری

     

نظرات :
ارسال نظر :

بعد از ورود به حساب کاربری می توانید دیدگاه خود را ثبت کنید