Компания Microsoft намерена развернуть системы охлаждения LG Electronics в своих дата-центрах. Речь идёт о неизвестном пока числе готовящихся к работе ИИ ЦОД, сообщает Datacenter Dynamics. О партнёрстве объявлено после того, как LG Electronics представила обновлённую серию охлаждающих решений, объединив в одном портфолио существующие и новые решения, в том числе СЖО.

Как заявили в LG, между смартфонами дома, ноутбуками на работе и, например, смарт-ТВ стоят ЦОД, играющие ключевую роль в повседневной жизни. А её решения для охлаждения играют решающую роль в обеспечении корректной работы серверного оборудования. LG намерена стать уникальным игроком, она готова удовлетворить спрос на соответствующие компоненты будущим проектам ЦОД и упростить строительство с помощью эффективных предложений «под ключ».

LG предлагает водоблоки, CDU, чиллеры, системы кондиционирования, интеллектуальную платформа мониторинга и управления охлаждением, а также другие комплексные решения. Компания объявила, что намерена сотрудничать с Microsoft для внедрения систем терморегулирования LG и технологии охлаждения в дата-центрах «следующего поколения». Объёмы и рамки сделки не раскрываются.

Источник изображения: LG Electronics

Ранее в этом году LG заявляла, что будет работать с Microsoft над рядом ИИ-проектов, включая создание ИИ-агентов для разных объектов, от домов до транспорта, отелей и офисов. Компания начала более агрессивно развивать решения для сектора ЦОД в прошлом году и заявила, что подписала крупную сделку на более 100 чиллеров для ЦОД, которая оценивается в десятки миллионов долларов.

Международный холдинг Freedom Holding Corp. приступил к строительству одного из ключевых объектов цифровой инфраструктуры Казахстана — дата-центра Freedom Cloud. Об этом в своем Telegram-канале сообщил владелец и главный акционер Freedom Holding Corp. Тимур Турлов.

Торжественная церемония начала строительства Freedom Cloud состоялась 18 апреля в специальной экономической зоне «Парк инновационных технологий» (СЭЗ ПИТ «Алатау»). ЦОД, который расположится на площади 2,5 га, станет альтернативным транзитным пунктом передачи данных между Европой и Китаем через территорию Казахстана. По словам Тимура Турлова, холдинг сотрудничает с NVIDIA, Intel и AWS. У Freedom Holding в Казахстане уже есть семь дата-центров, приобретенных в 2024 году.

Freedom Holding планирует завершить строительство площадки за два года. На первую фазу строительства объекта будет направлено ₸40 млрд, на вторую — ₸35 млрд. Общая сумма всех инвестиций в проект, включая закупку оборудования и развертывание вычислительных мощностей, составит ₸175 млрд. ЦОД вместит 480 стоек мощностью до 15 кВт каждая с возможностью увеличения до 25 кВт. Полезная IT-ёмкость составит 7,2 МВт, общая мощность — 13 МВт, включая системы охлаждения и резервного питания.

Источник изображения: Kate Ibragimova / Unsplash

По данным iKS-Consulting, к концу 2024 года в коммерческих ЦОД Казахстана насчитывалось в общей сложности 3775 стоек, что на 9 % больше предыдущего года. По итогам 2023 года лидерами по количеству стоек в Казахстане являлись АО «Казахтелеком» (1522 стоек, что соответствует 44,8 % от общего количества), «Транстелеком» (851 стоек, доля 24,6 %) и «Национальные информационные технологии» (280 стоек, доля 8,1 %).

Идея передачи энергохранилищами дата-центров электричества в энергосети в часы пиковых нагрузок может показаться многообещающей, но операторы ЦОД, похоже, после нескольких тестов в Ирландии смотрят на эту идею без особого энтузиазама. Причина в высокой цене проектов обратной передачи энергии в сеть и технической сложности реализации, сообщает The Register.

ЦОД с «интерактивными» системами резервного питания, использующие аккумуляторные хранилища (BESS), должны были передавать электричество обратно в магистральные электросети, когда это необходимо для стабилизации спроса и предложения во времена пиковых нагрузок — тем более, что сети всё чаще зависят от источников возобновляемой энергии вроде ветра и солнца. В частности, эксперименты по использованию таких систем проводили Microsoft и Digital Realty в районе Дублина. Дублин выбрали не случайно, поскольку очень много дата-центров расположено именно вокруг столицы, а в 2023 году на ЦОД пришлась пятая часть всего энергопотребления страны.

Microsoft объединила усилия с Eaton ещё в 2022 году, а Digital Realty начала внедрять аналогичную схему в прошлом году. Агрегатором в обоих случаях является Enel X, продающая энергию из различных источников ирландскому энергооператору EirGrid. На энергию из возобновляемых источников, которые не отличаются стабильностью отдачи, приходится значительная часть поставок — более 35 % только на ветряную энергию. Поэтому Ирландия остро нуждается в стабилизации поставок электричества в сеть хотя бы в минимальных объёмах. Идея «умных» BESS предусматривает передачу части запасённой в АКБ энергии в общие сети. Считается, что операторы ЦОД смогут даже заработать на этом.

Источник изображения: Federico Beccari/unsplash.com

Тем не менее, по словам Digital Realty, обратная передача в сеть — вопрос довольно непростой, поскольку немногие ЦОД имеют для этого специальную инфраструктуру, а для реализации такой схемы требуются дополнительные инвестиции. Другие эксперты придерживаются схожих мнений о том, что организовать «двухсторонний» поток энергии намного сложнее, чем в одну сторону. Кроме того, главная функция BESS — питать критически важное оборудование в случае отключения подачи энергии в течение заданного срока, поэтому заряд необходимо хранить для самих ЦОД «на всякий случай».

Microsoft подтвердила, что в Дублине её «интерактивная» система всё ещё функционирует, но реализация схожей модели на других рынках будет зависеть от конкретных условий на местах, такой проект нельзя будет реализовать где угодно. Впрочем, уже рассматриваются и другие локации. В IDC отмечают, что для ЦОД строить избыточные резервные мощности слишком дорого, поэтому операторы даже не будут рассматривать такую схему. Напротив, собственные энергохранилища стоило бы создать самим коммунальным компаниям — такой «буфер» был бы вполне востребован во времена пиковых нагрузок.

Источник изображения: Federico Beccari/unsplash.com

В Digital Realty напомнили, что Ирландия — вообще уникальный случай, поскольку речь идёт о небольшой стране с энергосетью ограниченных размеров при полном отсутствии свободных мощностей, поскольку электричество буквально пожирается ЦОД. По некоторым оценкам, на дата-центры уже приходится около 30 % энергопотребления всей Ирландии, тогда как во Франции их доля составляет лишь 4 %, а в Германии и Великобритании — 6 %.

Частью проблемы, как считают в Digital Realty, являются и сами электрические сети. В некоторых местах вроде Франции наблюдается даже перепроизводство энергии, но от этого не легче. Энергокомпания EDF готова отдать земли при АЭС для ЦОД — или оператор доставляет энергию к ЦОД, или ЦОД приходится строить там, где есть энергия. Но во Франции энергия для дата-центров нужна в Париже и Марселе, а АЭС расположены в глубинке. Пытаясь генерировать собственное электричество оператор ЦОД фактически превратится в энергокомпанию.

Проблемы с присоединением к энергосетям наблюдаются по всей Европе и США. Многие операторы уже реализуют проекты генерации электричества от газовых турбин, включая Crusoe и других игроков. Отмечаются и попытки найти нетривиальные решения. В США IT-гиганты вроде Microsoft и Amazon всё чаще пытаются перепрофилировать АЭС для снабжения своих ЦОД, хотя на реализацию могут уйти годы.

Согласно последнему докладу Apple Environmental Progress Report, на питание её дата-центров и колокейшн-объектов ушло 2,5 ТВт∙ч в 2024 году. Это больше, чем годом ранее — тогда речь шла о более 2,3 ТВт∙ч, сообщает Datacenter Dynamics. Рост энергопотребления связан со вводом в эксплуатацию ЦОД Waukee в Айове. Объект общей площадью 37 тыс. м ² готовили ещё с 2017 года, но подключения к энергосети удалось добиться только в октябре прошлого.

Всего у компании есть восемь собственных ЦОД в Северной Америке, Европе и Азии. По словам Apple, 100 % энергии для них поступило из возобновляемых источников — с солнечных, ветряных и гидроэлектростанций. В этом наборе доминирует солнечная энергия, на неё приходится 72 % действующих энергопроектов, поддерживаемых компанией. В 2024 году продолжилось строительство солнечных электростанций. Компания подписала соглашения о покупке энергии (PPA) с Ib Vogt — о получении 105 МВт от проекта Castaño Solar в Сеговия (Segovia) к северо-западу от Мадрида.

Источник изображения: Grzegorz Walczak/unsplash.com

В целом в своих ЦОД Apple использует самую разную возобновляемую энергию, но, как это обычно и бывает, в основном речь идёт не о прямом питании, а о PPA. В Аризоне компания потребила 530 ГВт∙ч. Это на 100 % солнечная энергия, причём 4,67 МВт отдают элементы, установленных на парковке дата-центра. В Неваде Apple использовала 454 ГВт∙ч, которые целиком были получены от солнца. В том числе от солнечной электростанции Fort Churchill Solar Array мощностью 20 МВт, которая использует зеркала для концентрации света на фотоэлектрических элементах.

В Северной Каролине ЦОД потребил 466 ГВт∙ч солнечной и ветряной энергии, 68 % и 32 % соответственно. В Орегоне ЦОД потребил 255 ГВт∙ч — 56 % получено за счёт ветряной и 43 % за счёт солнечной энергии, а 1 % — за счёт микро-ГЭС. Apple отметила, что управляет в регионе одним подобным проектом, мощности построены вдоль ирригационного канала.

Источник изображения: Apple

В Дании ЦОД потребил 59 ГВт∙ч энергии, он тоже на 100 % обеспечен за счёт солнечного (42 МВт) и ветряного (17 МВт) проектов. На два ЦОД в Китае пришлось 214 ГВт∙ч, энергия поровну поступает от солнечных и ветряных электростанций. Детальных данных по ЦОД в Айове пока нет, но он в каком-то смысле заменил проданный ранее калифорнийский дата-центр Apple.

Объёмы использования энергии колокейшн-мощностями не раскрывается. Компания отмечает, что использование полезных ископаемых для питания на колокейшн-объектах находится вне контроля Apple. Использование облачных мощностей также держится в секрете. Apple является давним клиентом Google Cloud, и предполагается, что она — крупнейший клиент платформы.

Источник изображения: Apple

Также в докладе указывается, что компания снизила общие выброс парниковых газов более чем на 60 % — это часть более обширной цели по достижении углеродной нейтральности по всем типам операций к 2030 году. В рамках этой цели планируется снизить выбросы на 75 % и компенсировать остальное с помощью соглашений об удалении углерода из атмосферы сторонними игроками. Цель — удалять по 1 млн т CO₂ в год. Всего глобальная цепочка поставок компании получает 17,8 ГВт возобновляемой энергии. Это, как утверждают в Apple, снизило углеродный выброс на 41 млн тонн в 2024 году.

Что касается попыток снизить водопотребление, Apple сообщила, что программа Supplier Clean Water Program позволила сохранить более 340,6 млн м³ с 2013 года. В 2024 году было «спасено» 53 млн м³, в среднем поставщики повторно используют 42 % воды.

Впрочем, любая статистика — инструмент довольно гибкий. Например, несмотря на попытки Google добиться нулевых выбросов к 2030 году, по итогам 2023-го выбросы за пять лет взлетели на 48 %, во многом из-за ИИ. Apple, по-видимому, ожидает та же участь в связи с закупкой мощных ИИ-систем NVIDIA.

Новые мощности АЭС могли бы потенциально обеспечить около 10 % предполагаемого роста спроса на электричества для дата-центров в следующие десять лет. По данным экспертов Deloitte, спрос на электричество для ЦОД в США может вырасти с 33 ГВт в 2024 году до 176 ГВт в 2035 году, сообщает Datacenter Knowledge. Но чтобы успеть справиться с таким ростом, надо ускорить ввод в строй новых атомных мощностей.

По мнению аналитиков консалтинговой компании, на фоне стремительного роста спроса именно атомная энергия способна стать потенциальным решением для обеспечения части мощностей ЦОД электричеством благодаря надёжности и относительной экобезопасности АЭС. В течение ближайшиъ десяти лет будет введены генерируюшие мощности на 35–62 ГВт, так что порядка 10 % требований будущих ЦОД она удовлетворит. А по многим параметрам, от высокой энергетической плотности до низких углеродных выбросов, атомная энергетика является самым предпочтительным решением для питания ЦОД.

В числе недавних проектов — финансирование AWS малых модульных реакторов (SMR) в штате Вашингтон, соглашение Google с Kairos Power о строительстве SMR к 2030 году, а также соглашение о покупке энергии (PPA), заключённое между Microsoft и оператором АЭС Three Mile Island в Пенсильвании, закрытой в 2019 году (теперь её придётся вернуть в строй). Дополнительно известно, что Meta✴ запрашивала обеспечение до 4 ГВт атомных мощностей. Разработчик атомных решений Oklo намерена поставить 12 ГВт оператору ЦОД Switch.

Источник изображения: Lukáš Lehotský/unsplash.com

В минувшем марте коалиция крупнейших компаний, включая некоторых крупнейших операторов ЦОД, обеспечила кросс-секторные обязательства, подчёркивающие критическое значение АЭС в укреплении энергетической безопасности и надёжности. Группа, включающая Amazon, Meta✴ и Google, присоединилась к 14 финансовым институтам, 140 представителям атомной индустрии и руководству более 30 стран в поддержке инициативы World Nuclear Association по утроению атомных мощностей к 2050 году.

Хотя Deloitte сделала акцент на многочисленных преимуществах атомной энергетики для решения проблем ЦОД, аналитики признают, что общественно мнение об АЭС «сложное и изменчивое». Эксперты рекомендуют причастным к атомным проектам организациям «упростить» свою деятельность для ускорения и повышения их эффективности, решения проблем со сроками строительства и перерасходом средств. В то же время необходимо заниматься инновациями для обеспечения безопасности и утилизации отходов.

С учётом современных геополитических условий, Deloitte также выражает обеспокоенность эффективностью механизмов поставок обогащённого урана. США, крупнейший в мире рынок ЦОД, закупают его в основном у России и Китая, что якобы ставит под угрозу энергетическую безопасность страны и возможность строительства передовых реакторов. Помимо этого, проблемой являются и другие факторы — от сложной цепочки поставок комплектующих до трудностей производства крупных компонентов в США.

Инвестор, бизнесмен и шоумен Кевин О’Лири (Kevin O’Leary) объявил о строительстве «крупнейшего в мире» ИИ ЦОД, сообщает Tech Republic. Проект Wonder Valley (букв. «Чудо-долина» или «Долина чудес») предусматривает строительство крупного ИИ ЦОД без подключения к магистральным энергосетям в муниципальном округе Гринвью (Greenview) провинции Альберта на западе Канады.

Кампус займёт территорию более 2400 га, общая мощность составит беспрецедентные 7,5 ГВт. Первую фазу на 1,56 ГВт должны закончить в 2027–2028 гг., она обойдётся в $2 млрд.

По словам О’Лири, дата-центры — своеобразная «золотая лихорадка» современности. Вместе с тем получение питания для ЦОД стало большой проблемой, поскольку на присоединение может уйти пять или более лет. Он привёл пример, когда оператор ЦОД запрашивает 250 МВт сразу и ещё 250 МВт в течение двух лет, а в ответ ему предлагают 25 МВт с задержкой на три года, тогда как сейчас нужны проекты, которые будут готовы к работе уже через 24 месяца. Поэтом для питания нового кампуса будет использоваться природный газ.

Источник изображения: Richard Hedrick/unsplash.com

Wonder Valley представляет собой не просто крупнейший в мире дата-центр, но и экоустойчивый кампус на лоне дикой природы. Он сможет работать без подключения к магистральным электросетям и, более того, владельцы намерены поставлять энергию местным жителям. В регионе достаточно земли, природного газа, ВОЛС, кадров, инфраструктуры и др. По словам О’Лири, ИИ ЦОД рентабельны при реализации крупных проектов, так что теперь бизнес ищет другие площадки с государственной поддержкой и дешёвой энергией как в Альберте.

По мнению О’Лири, при строительстве ИИ ЦОД надо в целом менять подход и вместо того, чтобы забирать электроэнергию из уже загруженных сетей, повышая тем самым стоимость электричества для остальных, стоит самостоятельно генерировать энергию и передавать её часть местным жителям и бизнесу. Появление кампуса в Альберте даст не только дешёвое электричество для ИИ ЦОД, но создаст рабочие места для местных, сократит вредные выбросы (за счёт утилизации попутного газа и захвата углерода), а также пополнит бюджет за счёт налоговых поступлений.

Хотя газовые проекты для дата-центров в Северной Америке в последнее время очень популярны, производители газовых турбин, едва справляющиеся с заказами для дата-центров, опасаются расширять производство. А крупнейшая в США энергокомпания NextEra Energy предупреждает, что полагаться в энергетике только на газ очень опрометчиво. Что касается «крупнейшего с мире ЦОД», совсем недавно на это звание претендовал проект индийской Reliance с мощностью 3 ГВт.

Fujitsu, Supermicro и Nidec объявили об объединении усилий с целью снижения энергопотребления ЦОД. Речь идёт о создании платформы, которая поможет операторам дата-центров повысить коэффициент эффективности использования энергии (PUE).

Отмечается, что стремительное внедрение ИИ приводит к быстрому росту нагрузки на ЦОД. Это, в свою очередь, провоцирует увеличение энергопотребления, что объясняется установкой мощных серверов с ускорителями на базе GPU. Тем не менее, многие дата-центры продолжают использовать воздушное охлаждение. Хотя жидкостное охлаждение обеспечивает значительно более высокую эффективность, проектирование, строительство и эксплуатация таких систем требуют высокого уровня технических знаний и навыков.

В рамках нового проекта партнёры объединят ПО для мониторинга и управления жидкостным охлаждением Fujitsu, высокопроизводительные GPU-серверы Supermicro и высокоэффективную систему жидкостного охлаждения Nidec. В частности, Fujitsu намерена использовать свой 40-летний опыт в области СЖО, которые применяются в суперкомпьютерах. Supermicro предоставит высокопроизводительные серверные комплексы высокой плотности, оптимизированные для жидкостного охлаждения: такие устройства позволят сократить энергопотребление и снизить уровень шума благодаря отсутствию вентиляторов.

Источник изображения: Nidec

Nidec будет отвечать за поставки компонентов СЖО, включая блоки распределения охлаждающей жидкости (CDU), насосы и пр. Система охлаждения Nidec, как ожидается, улучшит управление температурой и снизит энергопотребление.

В целом, как заявляют партнёры, новая инициатива поможет повысить общую энергоэффективность ЦОД до 40 % по сравнению с традиционными методами воздушного охлаждения. Fujitsu оценит преимущества решения в своем центре обработки данных Tatebayashi.

Компания CoolIT Systems анонсировала блок распределения охлаждающей жидкости (CDU) CHx2000 для дата-центров, ориентированных на задачи ИИ и НРС. Новинка обеспечивает отвод более 2 МВт тепла: это, как утверждается, на сегодняшний день самый высокий показатель для CDU данного класса.

Устройство выполнено в виде шкафа с размерами основания 750 × 1200 мм. Заявленный расход жидкости составляет 1,2 л/мин. на кВт (LPM/kW): допускается охлаждение до двенадцати стоек NVIDIA GB200 NVL72 мощностью 120 кВт. По сравнению со своим предшественником (модель CHx1500) новинка обеспечивает повышение охлаждающей способности на 66 %.

При создании CHx2000 компания CoolIT Systems сделала упор на долговечность, безотказную работу и простоту обслуживания. Применены два насоса с возможностью горячей замены (N+N), обеспечивающие производительность 1500 л/мин. Трубы изготовлены из нержавеющей стали. В конструкции используются 4″ муфты Victaulic.  Благодаря резервированию критически важных компонентов доступность находится на уровне 99,9999 %.

Источник изображения: CoolIT Systems

Предусмотрена интегрированная система управления и мониторинга (Redfish, SNMP, TCP/IP, Modbus, BACnet и др.). Причём допускается групповое управление одновременно до 20 экземпляров CDU. Во время обслуживания возможен доступ с лицевой и тыльной сторон с поддержкой горячей замены насосов, фильтров и датчиков. Заявленная потребляемая мощность составляет 12,24 кВт при работе одного насоса (1500 л/мин). Во фронтальной части корпуса располагается информационный дисплей.

Блок CHx2000 уже доступен для заказа. CoolIT Systems предоставляет комплексную поддержку и услуги по проектированию, монтажу и обслуживанию в более чем 70 странах по всему миру.

Sitronics Group намерена принять участие в разработке и продвижении единых стандартов для рынка модульных ЦОД. Об этом в ходе конференции Data Fusion заявил директор профильного департамента компании Игорь Анисимов, призвав участников отрасли присоединиться к инициативе.

В России сектор ЦОД развивается и адаптируется к новым нагрузкам, в первую очередь к ИИ. При этом возрастает нагрузка на энергетическую инфраструктуру, что потенциально может спровоцировать дефицит. По словам Анисимова, участникам рынка следует заняться решением таких вопросов, как рост плотности энергопотребления, а также стандартизация строительства и эксплуатации дата-центров, ориентированных на ИИ-нагрузки. При этом необходимо сохранить рентабельность бизнеса с учётом технологических требований для развёртывания ЦОД. Модульные дата-центры позволяют заказчикам в сжатые сроки создавать платформы для ИИ, получив мощности в аренду или же масштабировав собственные посредством типовых модулей.

«Сегодня нет единого стандарта для центров обработки данных с ИИ-нагрузкой, который позволил бы снизить капитальные затраты за счёт уменьшения затрат на разработку уникальных решений для каждого ЦОД. Стандартизация позволит проработать совместимость инфраструктуры ЦОД с системами ИИ. Мы намерены активно участвовать в этом процессе, особенно в части разработки стандартов для модульных ЦОД, которые, на наш взгляд, обладают большим потенциалом для эффективного размещения систем искусственного интеллекта», — говорит Анисимов.

Источник изображения: Sitronics Group

По его словам, при развёртывании дата-центров для ИИ прежде всего требуется бесперебойное электроснабжение и эффективное охлаждение. Сама Sitronics Group ведёт разработки в соответствующих областях: в частности, компания занимается созданием системы фрикулинга с экономайзерами. Кроме того, при стандартизации ЦОД необходимо определить форм-фактор серверов (стандартный или OCP), оптимальную температуру теплоносителя на входе в стойку и на уровне процессора, изучить вопросы совмещения зон для стандартных и ИИ-вычислений в рамках одного объекта, рассчитать мощности инженерных систем и пр.

Совместный ЦОД-проект Stargate, реализуемый в США компанией OpenAI при участии SoftBank, Oracle, MGX и других партнёров, в ближайшие годы могут расширить. Предполагается организация площадок в Европе, сообщает The Financial Times. По информации издания, главным претендентом на строительство регионального объекта Stargate пока является Великобритания, но переговоры и обсуждения ещё находятся на самой ранней стадии.

В рамках Stargate планируется потратить только в ближайший год около $100 млрд, а в течение четырёх лет — порядка $500 млрд. Всю инфраструктуру пока планируется строить в Соединённых Штатах. Дальнейшее развитие запланировано только при условии, что OpenAI преуспеет в реализации Stargate в США. Лишь после этого компания и партнёры начнут уделять серьёзное внимание другим рынкам. По словам одного из источников, участвующих в совместных работах, в качестве кандидатов для развития Stargate также рассматриваются Германия и Франция.

Источник изображения: Mariia Shalabaieva/unsplash.com

На данный момент Великобритания считается в OpenAI самым перспективным кандидатом с учётом усилий местных властей по развитию ИИ и даже превращению в «ИИ-сверхдержаву» с помощью атомной энергетики. Франция также начала реализацию крупных ИИ-проектов в рамках более широкой инициативы по стимулированию инвестиций в экономику.

Издание не исключает, что «утечки» из OpenAI и прочих участников проекта могут использоваться для организации косвенного давления на европейские страны, побуждая те конкурировать друг с другом, предлагая налоговые льготы и упрощённые бюрократические процедуры. Ранее глава OpenAI Сэм Альтман (Sam Altman) заявил, что «хотел бы реализовать проект Stargate Europe» и сообщил, что уже провёл многообещающие беседы на континенте.