در سال های اخیر، توسعه سریع هوش مصنوعی به طور قابل توجهی تقاضای محاسباتی در مراکز داده را افزایش داده است. آموزش مدل زبان بزرگ، استنتاج هوش مصنوعی و محاسبات با عملکرد بالا، همگی باعث گسترش بیشتر سرورهای GPU می شوند.

همانطور که قدرت سرور همچنان در حال افزایش است، یک موضوع عملی اهمیت فزاینده ای پیدا می کند:
چگونه یک مرکز داده می تواند مقادیر زیادی گرما را از تجهیزات محاسباتی با چگالی بالا به روشی پایدار و کارآمد حذف کند؟
مراکز داده سنتی عمدتاً بر خنک کننده هوا متکی بوده اند. با این حال، با افزایش چگالی توان رک، مدیریت خنک کننده هوا دشوارتر می شود.
قدرت رک بالاتر به جریان هوای بیشتر، قدرت فن بیشتر و طراحی پیچیده تر راهروهای گرم و سرد نیاز دارد.
به همین دلیل، سیستم های خنک کننده مایع و خنک کننده مبتنی بر آب در مراکز داده با چگالی بالا رایج تر می شوند.
هنگامی که یک مرکز داده شروع به استفاده از سیستمهای بزرگ آب سرد میکند، موضوع دیگری مهم میشود: ظرفیت خنککننده چگونه تولید، ذخیره و تحویل میشود.
اینجاست کهمخازن ذخیره آب سردو سیستم های ذخیره انرژی حرارتی شروع به ایفای نقش بزرگتری می کنند.
در عین حال، مخازن بزرگ آب سرد در یک دمای یکنواخت کار نمی کنند. طبقه بندی دما در داخل مخزن ایجاد می شود و نیاز بهپایش دمای چند نقطه ای.
چرا سرورهای هوش مصنوعی نیاز به خنک کننده آب را افزایش می دهند؟

در مقایسه با سرورهای سنتی، سرورهای هوش مصنوعی معمولاً چگالی توان بسیار بالاتری دارند.
سرورهای GPU می توانند به طور مداوم مقادیر زیادی گرما را در طول آموزش مدل و استنتاج تولید کنند.
در مراکز داده با چگالی کمتر، خنکسازی اغلب از طریق تهویه مطبوع اتاق، سیستمهای فن و جریان هوای کنترلشده انجام میشود.
با این حال، با افزایش قدرت رک، تکیه بر هوا کارآمدتر و مدیریت آن دشوارتر می شود.
آب و سایر مایعات می توانند گرما را بسیار موثرتر از هوا منتقل کنند. این اجازه می دهد تا گرما به طور مستقیم از CPU، GPU و سایر اجزای پرقدرت حذف شود.
سیستم های خنک کننده رایج مورد استفاده در مراکز داده مدرن عبارتند از:
- خنک کننده مایع مستقیم به تراشه؛
- واحدهای توزیع مایع خنک کننده یا CDU ها؛
- سیستم های آب تاسیسات؛
- حلقه های آب سرد؛
- برج خنک کننده؛
- کولرهای خشک
گرما ابتدا توسط صفحات سرد و خنک کننده از اجزای سرور حذف می شود. سپس از طریق CDU ها، مبدل های حرارتی و سیستم های آب سرد قبل از رد شدن به محیط بیرون منتقل می شود.
به همین دلیل، رشد محاسبات هوش مصنوعی نه تنها باعث افزایش تقاضا برای پردازندههای گرافیکی و سرورها میشود.
همچنین تقاضا برای موارد زیر را افزایش می دهد:
تجهیزات خنک کننده، مبدل های حرارتی، سیستم های آب سرد و سیستم های ذخیره انرژی حرارتی.
اگر یک مرکز داده از قبل چیلر دارد، چرا یک مخزن ذخیره آب سرد مورد نیاز است؟
این یک سوال رایج در پروژه های خنک کننده بزرگ مرکز داده است.
یک چیلر از قبل می تواند آب سرد تولید کند.
چرا یک مخزن ذخیره آب سرد بزرگ اضافه کنید؟
دلیلش ساده است:
انرژی خنک کننده همیشه نیازی به تولید در زمان دقیق مصرف ندارد.
یک مخزن ذخیره آب سرد به یک مرکز اجازه می دهد تا ظرفیت خنک کننده را در دوره های کم بار تولید و ذخیره کند.
آن خنک کننده ذخیره شده می تواند بعداً با افزایش تقاضای خنک کننده استفاده شود.
به عبارت ساده، یک سیستم ذخیره آب سرد مانند نوعی ذخیره انرژی عمل می کند.
باتری انرژی الکتریکی را ذخیره می کند.
یک مخزن آب سرد انرژی حرارتی را به شکل ظرفیت خنک کننده ذخیره می کند.
چرا ذخیره آب سرد می تواند در مراکز داده بزرگ هوش مصنوعی مفید باشد؟
1. مدیریت تغییرات بار خنک کننده
بارگذاری سرور هوش مصنوعی همیشه ثابت نیست.
هنگامی که گروه های بزرگی از پردازنده های گرافیکی همزمان شروع به آموزش یا استنتاج بارهای کاری می کنند، مصرف انرژی IT می تواند به سرعت افزایش یابد.
توان الکتریکی بیشتر به معنای گرمای بیشتر است.
این بدان معناست که سیستم خنک کننده نیز باید به بار بیشتری پاسخ دهد.
اگر تمام سرمایش باید به طور مستقیم توسط چیلرها در هر لحظه تامین شود، چیلرها، پمپ ها و زیرساخت های الکتریکی ممکن است نیاز به اندازه گیری در حدود بارهای اوج بالاتر داشته باشند.
با ذخیره آب سرد، سیستم می تواند از موارد زیر استفاده کند:
چیلرها + خنک کننده ذخیره شده
برای حمایت از بخشی از حداکثر تقاضای خنک کننده.
این به سیستم خنک کننده انعطاف بیشتری در هنگام تغییر بار سرور می دهد.
2. کاهش قدرت خنک کننده در دوره های پیک
چیلرهای بزرگ مقدار قابل توجهی برق مصرف می کنند.
اگر سرورهای هوش مصنوعی در حال حاضر با قدرت بالا کار می کنند در حالی که کارخانه خنک کننده نیز با حداکثر خروجی کار می کند، این مرکز ممکن است این موارد را تجربه کند:
تقاضای بالای انرژی IT + تقاضای بالای قدرت خنک کننده
در همان زمان
یک سیستم ذخیره سازی حرارتی می تواند آب سرد را در دوره های کم بار تولید کند.
به عنوان مثال:
انرژی خنک کننده را می توان در شب یا در دوره هایی با تقاضای کمتر ذخیره کرد.
سپس در دوره های با بار بالاتر تخلیه می شود.
این می تواند بخشی از تقاضای برق خنک کننده را در ساعات اوج کار کاهش دهد.
برای مراکز داده بزرگ، این می تواند برای مدیریت انرژی و کنترل اوج تقاضا مفید باشد.
3. کاهش حداکثر فشار ظرفیت چیلر
یک مرکز داده ممکن است در بیشتر روز با بار خنک کننده متوسط کار کند اما برای دوره های کوتاه تری تقاضای خنک کننده بالاتری را تجربه کند.
اگر اندازه تمام تجهیزات فقط برای حداکثر بار کوتاه مدت باشد، ممکن است کارخانه خنک کننده به چیلرها، پمپ ها و ظرفیت الکتریکی بزرگتری نیاز داشته باشد.
یک سیستم ذخیرهسازی آب سرد میتواند به چیلرها اجازه دهد تا بار خنککننده پایه را تحمل کنند در حالی که خنککننده ذخیرهشده بخشی از اوج تقاضا را پشتیبانی میکند.
طراحی واقعی سیستم به عوامل زیادی بستگی دارد، از جمله:
- مشخصات بار فناوری اطلاعات؛
- بار خنک کننده؛
- قیمت گذاری برق؛
- الزامات افزونگی؛
- سطح طراحی مرکز داده؛
- استراتژی عملیاتی
ذخیره آب سرد برای هر پروژه ضروری نیست، اما می تواند انعطاف پذیری عملیاتی بیشتری را در سیستم های بزرگ متمرکز آب سرد فراهم کند.
4. ارائه ظرفیت بافر خنک کننده
مراکز داده هوش مصنوعی به سطوح بالایی از تداوم عملیاتی نیاز دارند.
سرورها ممکن است دارای سیستم های UPS و ژنراتورهای آماده به کار باشند، اما خنک کننده نیز باید در دسترس باشد.
اگر در حین قطع خنکسازی، برق سرور در دسترس باقی بماند، پردازندههای گرافیکی پرقدرت میتوانند به تولید گرما ادامه دهند.
یک مخزن ذخیره آب سرد می تواند مقدار مشخصی بافر خنک کننده را در طی موارد زیر فراهم کند:
- تعویض تجهیزات؛
- تنظیمات سیستم؛
- خرابی جزئی تجهیزات؛
- وقفه های موقت چیلر؛
- تغییرات بار خنک کننده کوتاه مدت
مخزن ذخیره آب سرد جایگزین یک سیستم خنک کننده کامل نمی شود.
با این حال، می تواند به یک بخش حمایتی مهم از استراتژی کلی خنک کننده تبدیل شود.
آیا هر مرکز داده هوش مصنوعی به مخزن ذخیره آب سرد نیاز دارد؟
خیر
طراحی های خنک کننده به طور قابل توجهی از یک مرکز داده به مرکز دیگر متفاوت است.
برخی از سیستمهای خنککننده مایع با دمای بالا میتوانند گرما را از طریق کولرهای خشک یا دیگر اشکال خنککننده آزاد دفع کنند و وابستگی به سیستمهای آب سرد معمولی را کاهش دهند.
بنابراین، نادرست است که بگوییم هر مرکز داده هوش مصنوعی به ذخیره سازی آب سرد نیاز دارد.
ارزش ذخیره سازی حرارتی به طور کلی در پروژه هایی که دارای موارد زیر هستند بیشتر است:
- بارهای محاسباتی بزرگ هوش مصنوعی؛
- سیستم های متمرکز آب سرد؛
- تقاضای خنک کننده بالا؛
- تغییرات بار اوج قابل توجه؛
- اوج نیازهای مدیریت برق؛
- الزامات تداوم خنک کننده بالا؛
- نیاز به بهینه سازی برنامه های عملیاتی چیلر
با ادامه افزایش مقیاس مراکز داده هوش مصنوعی، این نوع برنامه ها احتمالاً توجه بیشتری را به خود جلب می کنند.
چرا یک مخزن ذخیره آب سرد به پایش دما نیاز دارد؟

هنگامی که یک مخزن ذخیره آب سرد کار می کند، یک سوال مهم این است:
هنوز چقدر ظرفیت خنک کننده مفید داخل مخزن موجود است؟
مخازن بزرگ ذخیره آب سرد اغلب به طبقه بندی حرارتی طبیعی متکی هستند.
در شرایط عملیاتی معمولی، مخزن معمولاً سه منطقه اصلی ایجاد می کند:
بخش بالایی: آب گرمتر
بخش میانی: ترموکلاین
بخش پایین: آب سردتر
از آنجایی که چگالی آب با دما تغییر می کند، سیستم های ورودی و خروجی با طراحی مناسب می توانند به حفظ جدایی نسبتاً پایدار بین آب گرمتر و سردتر کمک کنند.
این طبقه بندی دما برای عملکرد مخزن ذخیره مهم است.
اگر آب سرد و گرم بیش از حد مخلوط شوند، ظرفیت خنک کننده قابل استفاده مخزن کاهش می یابد.
چرا یک سنسور دما کافی نیست؟

یک مخزن ذخیره آب سرد را در نظر بگیرید که 20 متر ارتفاع دارد.
دمای آب در پایین ممکن است 5 درجه باشد.
در بالا، ممکن است در حال حاضر 12 درجه باشد.
اگر فقط یک سنسور دما در نزدیکی پایین نصب شده باشد، می تواند تأیید کند که آب سرد هنوز وجود دارد.
اما نمی تواند نشان دهد که لایه آب سرد چقدر امتداد دارد.
اگر فقط بخش بالایی نظارت شود، وضعیت لایه آب سرد پایین ناشناخته باقی می ماند.
به همین دلیل، یک مقدار دمای واحد اطلاعات محدودی را ارائه می دهد.
آنچه واقعاً اهمیت دارد این است:
توزیع دما از بالای مخزن به پایین.
ترموکلاین در مخزن ذخیره آب سرد چیست؟
راترموکلاینمنطقه انتقال بین لایه آب سرد و لایه آب گرمتر است.
در این منطقه، دما به تدریج در ارتفاع تغییر می کند.
به عنوان مثال:
| ارتفاع تانک | دمای آب |
|---|---|
| 18 m | 12.6 درجه |
| 16 m | 12.3 درجه |
| 14 m | 11.8 درجه |
| 12 m | 9.7 درجه |
| 10 m | 7.1 درجه |
| 8 m | 5.9 درجه |
| 6 m | 5.4 درجه |
| 4 m | 5.1 درجه |
| 2 m | 5.0 درجه |
این نوع مشخصات دما به وضوح بخش بالایی گرمتر، بخش پایینی سردتر و منطقه انتقال بین آنها را نشان می دهد.
در طول شارژ و تخلیه، موقعیت ترموکلاین از طریق مخزن حرکت می کند.
نظارت بر این حرکت برای درک نحوه عملکرد سیستم ذخیره سازی مهم است.
چرا یک مخزن ذخیره آب سرد به پایش دمای چند نقطه ای نیاز دارد؟
مستقیم ترین هدف نظارت چند نقطه ای ایجاد یک پروفایل دمایی عمودی از مخزن ذخیره سازی است.
با نظارت بر دما در ارتفاعات مختلف، اپراتورها می توانند موارد زیر را مشاهده کنند:
- ارتفاع لایه آب سرد؛
- ارتفاع لایه آب گرم؛
- موقعیت ترموکلاین؛
- ضخامت ترموکلاین؛
- فرآیند شارژ؛
- فرآیند تخلیه؛
- مخلوط کردن بیش از حد؛
- مناطق دمای غیر طبیعی
این داده های دما همچنین می توانند برای تجزیه و تحلیل و کنترل بیشتر به سیستم های PLC، BMS یا SCADA منتقل شوند.
چرا از کابل سنسور دما چند نقطه ای استفاده کنیم؟
اگر یک مخزن ذخیره آب سرد 20 متری یا 30 متری نیاز به نظارت بر دما در ارتفاعات مختلف داشته باشد، نصب کاوشگرهای دمای جداگانه می تواند تعداد زیادی از موارد زیر را ایجاد کند:
- سنسورها؛
- کابل ها؛
- اتصال دهنده ها؛
- نقاط نصب؛
- اتصالات سیم کشی
با افزایش تعداد نقاط اندازه گیری، نصب و نگهداری پیچیده تر می شود.
یک جایگزین عملی عبارت است از:
کابل سنسور دما چند نقطه ای
چندین سنسور دما در یک کابل واحد ادغام شده اند که به صورت عمودی در داخل مخزن نصب می شود.
به عنوان مثال، یک کابل دمای 20 متری را می توان با موارد زیر طراحی کرد:
- 10 نقطه دما؛
- 15 نقطه دما؛
- 20 نقطه دما؛
- یا مقدار دیگری با توجه به نیاز پروژه.
فاصله سنسور نیز می تواند سفارشی شود.
گزینه های معمولی ممکن است شامل موارد زیر باشد:
0.5 m / 1 m / 2 m
یا فواصل دیگر با توجه به وضوح نظارت مورد نیاز.
این امکان جمع آوری داده های دما را از ارتفاعات مخازن متعدد با استفاده از یک مجموعه کابل فراهم می کند.
هنگام انتخاب کابل دمای مخزن آب سرد چه نکاتی را باید در نظر گرفت؟

1. تعداد نقاط دما
تعداد سنسورهای مورد نیاز عمدتاً به موارد زیر بستگی دارد:
ارتفاع مخزن؛
طبقه بندی دمای مورد انتظار؛
الزامات کنترل؛
وضوح دمای مورد نیاز
یک مخزن بلندتر معمولاً به نقاط اندازه گیری بیشتری نیاز دارد.
2. فاصله سنسور
اگر پروژه به نظارت دقیق ترموکلاین نیاز دارد، فاصله سنسور کوچکتر ممکن است مناسب تر باشد.
برای پایش طبقه بندی اولیه، فاصله بزرگتر ممکن است کافی باشد.
به همین دلیل، کابل های دمای مخزن ذخیره آب سرد اغلب نیاز به پشتیبانی سفارشی دارند:
طول کابل و مقدار سنسور
3. عملکرد ضد آب
کابل ممکن است برای مدت طولانی در آب غوطه ور بماند.
بنابراین عوامل مهم عبارتند از:
ضد آب ژاکت کابل؛
آب بندی سنسور؛
آب بندی کانکتور؛
پایداری غوطه وری طولانی مدت
4. سازگاری اندازه گیری
برای نظارت بر مخزن آب سرد، دقت هر سنسور جداگانه مهم است.
با این حال، سازگاری بین سنسورهای مختلف نیز مهم است.
این سیستم اغلب دماهای بین ارتفاعات مجاور را برای ارزیابی طبقه بندی حرارتی مقایسه می کند.
اگر سنسورهای جداگانه تفاوت های اندازه گیری زیادی داشته باشند، تحلیل ترموکلاین ممکن است کمتر قابل اعتماد شود.
5. ارتباطات داده
مراکز داده بزرگ معمولاً نیاز به ادغام داده های دمای مخزن در یک سیستم نظارت مرکزی دارند.
بسته به پروژه، سیستم نظارت بر دما ممکن است از موارد زیر پشتیبانی کند:
RS485;
Modbus RTU;
واحدهای اکتساب داده؛
PLC;
BMS;
اسکادا.
این اجازه می دهد تا مشخصات دمای مخزن به بخشی از سیستم مدیریت خنک کننده کلی تبدیل شود.
چرا رشد هوش مصنوعی می تواند تقاضا برای مخزن آب سرد را افزایش دهد؟
مانیتورینگ دما؟
وقتی به عنوان بخشی از زنجیره خنک کننده مرکز داده در نظر گرفته شود، درک این رابطه آسان تر است.
رشد محاسبات هوش مصنوعی قدرت سرور را افزایش می دهد.
قدرت سرور بالاتر گرمای بیشتری ایجاد می کند.
تراکم حرارتی بالاتر نیاز به خنک کننده مایع و سیستم های خنک کننده مبتنی بر آب را افزایش می دهد.
سیستم های بزرگتر آب سرد تقاضای بیشتری برای تولید، توزیع و ذخیره سازی خنک کننده کارآمد ایجاد می کند.
برخی از مراکز داده بزرگ از مخازن ذخیره آب سرد برای موارد زیر استفاده می کنند:
- ذخیره انرژی خنک کننده؛
- مدیریت بار پیک؛
- بهینه سازی انرژی؛
- ظرفیت بافر خنک کننده
هنگامی که یک مخزن ذخیره آب سرد کار می کند، درک طبقه بندی دمای داخلی ضروری است.
یک نقطه دمایی نمی تواند به طور کامل وضعیت مخزن را توصیف کند.
به همین دلیل، نظارت بر دما در ارتفاعات چندگانه به طور فزاینده ای ارزشمند می شود.
این یکی از دلایل اصلی استکابل های سنسور دمای چند نقطه ای برای مخازن ذخیره آب سرددر حال تبدیل شدن به سیستم های خنک کننده مدرن مرکز داده.
تاثیر هوش مصنوعی به تراشه ها و سرورها محدود نمی شود.
با افزایش ظرفیت محاسباتی مرکز داده، منبع تغذیه، خنک کننده، خنک کننده مایع، سیستم های آب سرد و زیرساخت های ذخیره انرژی حرارتی نیز باید توسعه یابد.
برای مراکز داده ای که از سیستم های متمرکز آب سرد استفاده می کنند، مخازن ذخیره آب سرد می توانند از مدیریت بار اوج، ظرفیت بافر خنک کننده و عملکرد سیستم انعطاف پذیرتر پشتیبانی کنند.
با این حال، یک مخزن ذخیره بزرگ دمای یکنواختی ندارد.
برای درک شرایط عملیاتی واقعی آن، لازم است مشخصات دما از بالای مخزن به پایین نظارت شود.
کابل سنسور دما چند نقطه ای می تواند داده های دما را در ارتفاعات مختلف با استفاده از یک مجموعه کابل عمودی ارائه دهد.
این داده ها می توانند به اپراتورها کمک کنند تا طبقه بندی حرارتی، حرکت ترموکلاین، شرایط شارژ و تخلیه، و عملکرد کلی ذخیره آب سرد را نظارت کنند.
با ادامه حرکت مراکز داده هوش مصنوعی به سمت چگالی توان بالاتر،خنک کننده مایع مرکز داده، ذخیره انرژی حرارتی آب سرد، و نظارت بر دمای مخزن چند نقطه ایبه احتمال زیاد به بخش مهمی از زیرساخت های پشتیبانی تبدیل می شوند.
سوالات متداول
1. مخزن ذخیره آب سرد چیست؟
مخزن ذخیره آب سرد، انرژی خنک کننده را به شکل آب با دمای پایین ذخیره می کند.
این سیستم میتواند آب سرد را در دورههای کمبار تولید کند و بعداً زمانی که تقاضای خنککننده افزایش مییابد، از خنککننده ذخیرهشده استفاده کند.
2. چرا مراکز داده هوش مصنوعی از خنک کننده آب استفاده می کنند؟
سرورهای هوش مصنوعی، به ویژه سرورهای GPU، می توانند چگالی توان بسیار بالایی داشته باشند.
آب و سایر مایعات می توانند گرما را موثرتر از هوا حذف کنند و خنک کننده مایع را برای محیط های محاسباتی با چگالی بالا مناسب تر می کند.
3. آیا هر مرکز داده هوش مصنوعی به مخزن ذخیره آب سرد نیاز دارد؟
خیر
تصمیم گیری به معماری خنک کننده، اندازه مرکز داده، بار خنک کننده، قیمت برق، نیازهای افزونگی و استراتژی عملیاتی بستگی دارد.
ذخیره آب سرد به طور کلی بیشتر مربوط به تاسیسات بزرگ با استفاده از سیستم های متمرکز آب سرد است.
4. چرا یک سنسور دما برای یک مخزن ذخیره آب سرد کافی نیست؟
مخازن بزرگ ذخیره آب سرد معمولا طبقه بندی دما دارند.
دمای آب در بالا، وسط و پایین مخزن می تواند به طور قابل توجهی متفاوت باشد.
یک سنسور نمی تواند ارتفاع لایه آب سرد یا موقعیت ترموکلاین را نشان دهد.
به همین دلیل، نظارت بر دمای چند نقطه ای معمولا مفیدتر است.
5. ترموکلاین چیست؟
ترموکلاین ناحیه انتقال دما بین لایه آب سرد و لایه آب گرمتر در داخل یک مخزن ذخیره طبقه بندی شده است.
موقعیت و ضخامت آن می تواند به نشان دادن وضعیت عملکرد مخزن ذخیره کمک کند.
6. آیا می توان کابل دمای مخزن ذخیره آب سرد را سفارشی کرد؟
بله.
بسته به پروژه، پارامترهای زیر را می توان سفارشی کرد:
طول کل کابل؛
تعداد سنسورهای دما؛
فاصله سنسور؛
خروجی سیگنال؛
روش جمع آوری داده ها
به عنوان مثال، چیدمان های مختلف حسگر را می توان برای ارتفاعات 20 متری، 30 متری یا سایر ارتفاعات مخزن طراحی کرد.
7. آیا می توان داده های دمای مخزن را به PLC یا BMS متصل کرد؟
بله.
با استفاده از یک واحد جذب دما و رابط های ارتباطی صنعتی مانند RS485 یا Modbus، داده های دمای چند نقطه ای را می توان به:
سیستم های PLC؛
پلتفرم های BMS؛
سیستم های اسکادا؛
سایر سیستم های مدیریت خنک کننده
