Корейская телекоммуникационная компания SK Telecom (SKT), фирма Iceotope и разработчик смазочных материалов SK Enmove, по сообщению ресурса Datacenter Dynamics, займутся созданием систем жидкостного охлаждения (СЖО) нового поколения для дата-центров, ориентированных на ресурсоёмкие задачи ИИ.

Говорится, что стороны подписали меморандум о взаимопонимании с целью внедрения технологии прецизионного жидкостного охлаждения (Precision Liquid Cooling, PLC). В рамках проекта планируется применять специальные жидкости SK Enmove и испытательный стенд SKT. Утверждается, что система PLC обеспечивает высокую эффективность отвода тепла от серверных компонентов и экономию энергии по сравнению с альтернативными решениями.

В рамках соглашения SKT разработает интегрированный блок распределения охлаждающей жидкости (CDU) для использования в составе СЖО разных типов. В этом проекте примут участие специалисты Iceotope. В перспективе новое изделие, как ожидается, найдёт применение в ЦОД, поддерживающих работу ИИ.

Источник изображения: Iceotope

Кроме того, SKT планирует разработать автономную систему охлаждения на базе ИИ. Речь идёт о технологии, учитывающей текущую температуру и нагрузку в дата-центре. На основе полученных показателей будет автоматически оптимизироваться работа CDU и других компонентов СЖО с целью достижения наиболее эффективного отвода тепла при минимальных затратах энергии.

Отмечается, что стремительное развитие средств генеративного ИИ приводит к росту нагрузок в дата-центрах. Это, в свою очередь, порождает необходимость внедрения высокопроизводительных компонентов, включая ускорители. В результате растут показатели энергопотребления и выделяемого тепла. Поэтому операторы ЦОД всё активнее переходят на СЖО. Iceotope, SKT и SK Enmove рассчитывают, что их изделия помогут частично решить проблему растущих энергозатрат в сегменте дата-центров.

Дата-центры выбрасывают немало горячего воздуха, и в IBM Japan и NTT Comware надеются, что смогут анализировать эти выбросы с большой пользой. Как сообщает The Register, новый подход поможет учитывать энергопотребление и выбросы углекислого газа, чтобы в конечном итоге снизить и то и другое. Технология использует температурные датчики вокруг ЦОД, поэтому внутреннюю инфраструктуру для получения данных переделывать не придётся.

Технологию уже протестировали в прошлом году в японском ЦОД NTT Comware. Предсказуемо выяснилось, что температура уже использованного для охлаждения воздуха пропорциональна энергопотреблению. Корреляцию между этими показателями выявили с помощью модели машинного обучения, о способностях которой стороны пока предпочитают не рассказывать. Дополнительно используется пакет приложений IBM Maximo для управления активами и бизнес-процессами.

Известно, что партнёры намерены организовать точный контроль систем охлаждения на основе оценки коллективного энергопотребления серверов. Операторы ЦОД являются первоочередными пользователями разрабатываемой технологии, поскольку охлаждение составляет одну из ключевых статей расходов дата-центров, причём для полноценной работы оборудования необходимо обеспечить оптимальную температуру.

Источник изображения: Walkerssk/pixabay.com

Хотя серверы и сами могут передавать данные о своей производительности, изоляция и конфиденциальность являются основой хорошего хостинга. При этом технология оценки тепловых выбросов позволяет получать данные по косвенным признакам, не отпугивая клиентов, а также потенциально снизить себестоимость эксплуатации, в том числе энергопотребление и даже углеродный выброс. Технология уже демонстрируется в новой японской штаб-квартире IBM в Toranomon Hills Station Tower.

В рамках проекта Data Center Ridge в Западной Вирджинии (США) будет изучена эффективность применения шахтных вод с заброшенных рудников для охлаждения местных ЦОД, передаёт Datacenter Dynamics. В частности, планируется задействовать 37,8 млн м³ воды с бывшей шахты Bullitt близ городка Аппалачия (Appalachia) в округе Уайз (Wise). Проект ожидает грант в размере $3 млн в рамках федеральной программы Abandoned Mine Land Economic Revitalization (AMLER), ещё $1,5 млн намерено выделить Министерство энергетики США.

Проект включен в план по перестройке и обустройству территории угольной шахты (26,3 тыс. га), закрытой ещё в 1990-х годах. Финансирование будет поступать из разных источников, включая некоммерческую организацию объединение Energy Delta Lab, поддерживаемую местными властями, бизнесом и коммунальными службами. Data Center Ridge займёт площадь более 160 га и получит до 1 ГВт «чистой» энергии. Он позиционируется как самый экоустойчивый и энергоэффективный кампус ЦОД в мире.

Источник изображения: Energy Delta Lab

Energy Delta Lab разработала HVAC-систему с закрытым контуром, которая использует подземные воды с температурой ниже 12 °C. Она же работает над типовым проектом дата-центра мощностью 36 МВт и площадью 23 тыс. м², включающего офисные помещения, телеком-инфраструктуру, электро- и техническое оснащение, а также системы безопасности. Для обслуживания такого объекта потребуется порядка 40 человек. Предполагается, что такие типовые дата-центры заинтересуют гиперскейлеров.

Кампус является часть гораздо более крупной инициативы Virginia Energy Plan объёмом до $8,25 млрд. Energy Delta Lab как раз и была сформирована в рамках этой инициативы. Организация будет реализовать различные инициативы в области энергетики, в том числе связанные с природным газом и водородом, АЭС, ветряной и солнечной энергией, а также аккумуляторными хранилищами. Территория шахты, например, была выбрана в качестве потенциальной площадки для ЦОД с питанием от малых модульных реакторов (SMR). Ожидается, что подобные проекты помогут привлечь в регион новые ЦОД.

Тайваньское подразделение корпорации Intel и Научно-исследовательский институт промышленных технологий Тайваня (ITRI) сообщили об открытии совместной лаборатории по сертификации систем охлаждения для HPC-платформ. Новая структура получила название ITRI-Intel.

О планах по запуску лаборатории стороны объявили в конце 2023 года. Тогда говорилось, что Intel расширяет сотрудничество с тайваньскими партнёрами с целью разработки и вывода на рынок передовых систем охлаждения для дата-центров, включая ЦОД, ориентированные на задачи ИИ.

По данным Международного энергетического агентства (IEA), в 2022 году потребление энергии дата-центрами по всему миру колебалось от 0,9 % до 1,3 % от общих энергозатрат. При этом выбросы углекислого газа в сегменте ЦОД составили 0,3 % от глобального объёма. Ожидается, что внедрение новых технологий, включая системы иммерсионного (погружного) охлаждения, поможет поднять энергоэффективность дата-центров и сократить выбросы СО₂ в соответствующем сегменте на 45 %.

Источник изображения: ITRI-Intel

Лаборатория ITRI-Intel будет предлагать комплексные услуги по сертификации технологий охлаждения НРС-систем на соответствие международным стандартам. Это, в частности, тестирование свойств материалов, оценка совместимости с серверными компонентами и анализ жизненного цикла. Отмечается также, что ITRI разрабатывает однофазную технологию погружного охлаждения с очень низким энергопотреблением. При этом не используются фторированные растворители (PFAS), которые, как считается, могут оказывать негативное влияние на здоровье людей.

Компания Danfoss заключила с Google соглашение о внедрении в ЦОД последней новых систем охлаждения. Как сообщает пресс-служба Danfoss, решения компании помогут утилизировать избыточное тепло дата-центров, а Google в рамках партнёрства обеспечит доступ к своим ИИ-сервисам. Это позволит оптимизировать взаимодействие Danfoss с с клиентами, внутренние рабочие процессы и поднять производительность в целом.

Danfoss разрабатывает системы охлаждения, отопления, преобразования энергии, управления двигателями и иное промышленное оборудование. В дата-центрах Google компания намерена внедрить малошумные безмасляные компрессоры Turbocor с магнитными подшипниками, применяемые в системах воздушного или водяного охлаждения. Дополнительно будут использоваться модули Danfoss для повторного использования тепла, которые обеспечат «зелёный» обогрев не только помещений самой Google, но и расположенных поблизости коммерческих и жилых строений.

Источник изображения: Danfoss

Применение ИИ-решений Google позволит Danfoss оптимизировать внутренние операции и пользовательский опыт. Например, ИИ можно применять для сбора информации, автоматизации базы знаний, а также создания описаний продуктов и использования чат-ботов в электронной коммерции.

Как заявляют в Google, речь идёт о сотрудничестве с лидером в создании энергоэффективных систем, именно такие решения помогут выполнить цель техногиганта по полному переводу ЦОД на «безуглеродную» энергию к 2030 году. В Danfoss также подчеркнули, что ИИ поможет произвести революцию в строительстве и декарбонизации ЦОД. Ранее Google и Danfoss совместно с Schneider Electric и Danish Data Center Industry учредители в Дании платформу Net Zero Innovation Hub, основной целью которой является ускорение «зелёной трансформации» дата-центров.

Компания Shell, по сообщению ресурса Datacenter Dynamics, установила резервуары иммерсионного (погружного) охлаждения GRC в своём техасском ЦОД в Хьюстоне. Они используются для отвода тепла от кластерного оборудования Penguin Solutions на основе процессоров AMD.

Установки GRC S10 Duo смонтированы в ЦОД Skybox компании Element Critical. Каждый из модулей S10 Duo может вмещать оборудование мощностью до 200 кВт (100 кВт на стойку стандарта 42U) с использованием тёплой воды с температурой около +32 °C. При снижении температуры воды до +7 °C производительность каждой системы GRC может быть увеличена практически в два раза.

По имеющейся информации, Shell установила в техасском дата-центре 864 двухпроцессорных сервера (судя по логотипам, это системы Penguin Solutions) с 96-ядерными чипами AMD Epyc 9654 Genoa. Таким образом, в общей сложности задействованы 1728 процессоров и 165 888 ядер. В ЦОД используются как минимум шесть погружных модулей S10 Duo.

Источник изображения: GRC via Datacenter Dynamics

Сама Shell, как и многие другие нефтяные компании, разрабатывает специальные жидкости для систем погружного охлаждения, предназначенных для применения вместе с вычислительным оборудованием высокой плотности. Например, состав Shell S3 X производится из природного газа.

Ещё в конце 2022 года Shell присоединилась к программе GRC ElectroSafe по сертификации альтернативных жидкостей для систем погружного охлаждения. Речь идёт о диэлектрических составах, которые должны соответствовать определённым требованиям в плане экологичности, эффективности и безопасности.

Modine Manufacturing решила диверсифицировать свои активы, вложившись в иммерсионное охлаждение. Как сообщает Datacenter Dynamics, компания приобрела активы стартапа TMGcore, предлагавшего однофазные и двухфазные системы иммерсионного охлаждения для HPC-систем. Сейчас Modine принадлежит производитель чиллеров Airedale.

TMGcore ещё в 2019 году представила роботизированную двухфазную иммерсионную платформу OTTO, а позже показал мобильную платформу OTTO EdgeBox. Также в портфолио компании есть компактная (2,4 м²) однофазная 200-кВт 48U-платформа ComputeCore и аналогичная платформа CryptoCore для тех, кто занимается майнингом.

Источник изображения: TMGcore

Modine приобрела как интеллектуальную собственность, так и другие активы TMGcore, заявив, что это укрепит позиции компании в качестве провайдера комплексных решений для охлаждения вычислительной техники. При этом само юридическое лицо, стоящее за TMGcore, не приобреталось. По словам представителя Modine, покупка активов поможет компании предлагать системы воздушного, жидкостного и гибридного охлаждения.

Хотя иммерсионные системы пока считаются нишевой технологией для майнинга и высокопроизводительных вычислений, давно предсказывается, что рост плотности размещения вычислительных мощностей позволит таким СЖО выйти на более широкий рынок, а катализатором станет развитие ИИ-платформ. В Modine ссылаются на оценки экспертов, которые прогнозируют, что рынок систем иммерсионного охлаждения к 2028 году вырастет до $7,8 млрд.

Оператор дата-центров Stack Infrastructure, по сообщению ресурса Datacenter Dynamics, планирует размещать на своих площадках, ориентированных на задачи ИИ, стойки для оборудования высокой плотности с поддержкой общей мощности до 300 кВт или даже больше.

Stack намерена применять конфигурируемые решения, которые смогут поддерживать мощность до 30 кВт на стойку с традиционным воздушным охлаждением или до 50 кВт на стойку с теплообменниками на задней двери. При переходе на прямое жидкостное охлаждение мощность будет достигать 100 кВт на стойку. Stack также заявляет, что в дальнейшем намерена обеспечить мощность 300 кВт на стойку или выше благодаря внедрению погружного охлаждения.

Заявленный показатель — это весьма большое значение, и в настоящее время лишь несколько компаний объявили о подобных проектах. Так, CyrusOne предложила дизайн ЦОД, специально оптимизированный для работы с ИИ: он также предусматривает мощность до 300 кВт на стойку при использовании погружного охлаждения. Digital Realty готовит колокейшн-площадки со стойками на 70 кВт. В свою очередь, Equinix намерена использовать СЖО в более чем 100 ЦОД по всему миру.

Источник изображения: Stack

Stack в Северной Америке оперирует площадками в Атланте, Калгари, Чикаго, Далласе-Форт-Уэрте, Нью-Олбани, Северной Вирджинии, Фениксе, Портленде, Кремниевой долине и Торонто. В регионе EMEA компания работает в Копенгагене, Франкфурте, Женеве, Милане, Осло, Стокгольме и Цюрихе. В Азиатско-Тихоокеанском регионе у неё есть ЦОД в Канберре, Мельбурне, Осаке, Перте, Сеуле и Токио. В дальнейшем Stack намерена активно расширяться, для чего недавно было привлечено долговое финансирование на сумму более $290 млн.

Корпорация Intel, по сообщениям сетевых источников, расширяет сотрудничество с тайваньскими партнёрами с целью разработки и вывода на рынок передовых систем охлаждения для дата-центров, поддерживающих ресурсоёмкие задачи, в частности, приложения ИИ.

В проекте принимают участие компании Kenmec и Auras Technology. Кроме того, Intel сотрудничает с Тайваньским институтом промышленных исследований (ITRI): стороны намерены сформировать новую лабораторию для сертификации технологий охлаждения НРС-систем на соответствие международным стандартам.

Источник изображения: Intel

Инициатива Intel предусматривает создание первого в отрасли открытого решения для развёртывания полноценных систем иммерсионного (погружного) охлаждения. Кроме того, будет предложен эталонный дизайн такой платформы. Предполагается, что технология поможет поднять производительность ЦОД. Intel говорит о разработке модульной системы охлаждения на основе сверхтекучей жидкости, которая обеспечит возможность отвода тепла от компонентов мощностью 1500 Вт и более.

Новая СЖО, как ожидается, будет внедряться в тайваньских и международных дата-центрах. Отмечается, что ЦОД, ориентированные на задачи ИИ, требуют всё большей плотности размещения компонентов при повышении энергоэффективности и надёжности. Во многом достижение этих показателей зависит от возможностей систем охлаждения.

Kenmec уже предлагает ряд продуктов для жидкостного охлаждения — от блоков распределения охлаждающей жидкости (CDU) до специализированных стоек Open Rack version 3 (ORv3). Причем некоторые такие решения уже сертифицированы Intel.

Как заявили представители подающего надежды австралийского облачного провайдера ResetData, владельцам зданий стоит рассмотреть не только постепенно распространяющиеся технологии вроде обогрева помещений за счёт тепла ЦОД, но и более необычные варианты. Как сообщает The Register, собственный дата-центр в здании может стать очередным предложением для арендаторов. ResetData как раз и намеревается предлагать такие микро-ЦОД.

Компания разработала модули Hiperdrive с погружной СЖО для снижения энергопотребления и повышения теплоотдачи. Стартап дорабатывает Intel-серверы Dell таким образом, чтобы те могли работать с иммерсионным охлаждением Submer с сохранением гарантии производителя, причём у него, как сообщается, соответствующая сертификация. Как и прочие стартапы такого профиля, ResetData обеспечивает отдачу тепла на нагрев воды, в том числе для систем отопления.

Фото: Submer

Погружные системы охлаждения обычно тяжелее традиционных, иногда они чересчур тяжелы даже традиционных ЦОД. Поэтому ResetData оптимизировала конструкцию модулей и предложила размещать их в подвалах — там обычно прохладно, а рядом находятся все коммуникации, от канализации и водопровода до электричества. В компании считают, что владельцы бизнес-центров и офисных кампусов могут рассмотреть установку таких микро-ЦОД и сдавать вычислительные мощности и/или хранилища данных арендаторам.

Преимуществом размещения ЦОД в подвале будет минимальная задержка доступа к данным. Кроме того, СЖО обеспечивают высокую плотность размещения аппаратных мощностей, что позволяет даже небольшому модулю обслуживать нескольких клиентов. ResetData предлагает законченное решение на базе OpenStack или AzureStack HCI. В скором будущем ожидается поддержка решений Red Hat, Citrix и VMware. Если арендаторам понадобятся ИИ-вычисления или 3D-графика, Hyperdrive может предоставить серверы с ускорителями NVIDIA A40.