Ускоряющееся развитие ИИ-технологий превращает дата-центры в ключевых потребителей энергии. По мнению экспертов, связанный с обучением искусственного интеллекта и ИИ-сервисами спрос на электричество за десятилетие вырастет вчетверо, что сделает ЦОД одними из наиболее динамично растущих энергопотребителей в мире, Bloomberg.

В краткосрочной перспективе нарастающий дефицит энергии, вероятно, поможет покрыть генерация на ископаемом топливе. В долгосрочной перспективе победителем, как ожидается, окажется «чистая» энергия, поскольку операторам ЦОД приходится учитывать давление политиков, заявленные цели по достижению нулевых выбросов и мнение собственных клиентов, требующих роста, но не желающих наносить лишний ущерб окружающей среде.

К 2035 году энергопотребление ЦОД достигнет 1,6 тыс. ТВт∙ч, т.е. около 4,4 % от общемирового. Фактически, по уровню потребления речь идёт о четвёртом месте после Китая, США и Индии. Наибольшие изменения ожидаются в США — предполагается, что страна останется крупнейшим в мире рынком ЦОД в течение десятилетия. По темпам роста спроса на электричество в ключевых регионах США дата-центры, в частности, обгоняют электромобили и другие перспективные технологии.

Источник изображения: BloombergNEF

ИИ-инфраструктура стала самым значимым элементом энергетического ландшафта. Если ещё в 2010 года более половины всех ЦОД потребляли менее 5 МВт, то теперь стандартный планируемый дата-центр требует уже сотни мегаватт, а некоторые замахиваются и на гигаваттные масштабы.

В то же время повышается эффективность оборудования. По прогнозам экспертов, к 2030 году средний коэффициент энергоэффективности (PUE) ЦОД должен уменьшиться с 1,4 до 1,2. Однако рост спроса на вычислительные мощности не позволит в полной мере компенсировать рост энергоэффективности.

Источник изображения: BloombergNEF

Обучение ИИ-моделей требует высокой концентрации вычислительных мощностей, поэтому возникает новый класс ЦОД, преобразующих не только облака, но и сами электросети.

Бум ИИ сегодня — не просто вычислительная задача, но и энергетическая гонка. Для передовых участников рынка доступ к электричеству жизненно необходим. Компании быстро строят объекты, часто ещё до появления поступлений от клиентов, причём приоритет отдаётся площадкам с быстрым доступом к электричеству, земле и разрешениям регуляторов. Лидерами в США традиционно выступают Вирджиния, Орегон, Техас и Огайо, но появляются и новые территории, поскольку скорость доступа к энергии и другим ресурсам иногда может быть важнее близости к конечным пользователям ИИ.

Источник изображения: BloombergNEF

Удовлетворение спроса подразумевает использование существующих и новых энергосистем. В краткосрочной перспективе ставка делается на природный газ — именно газовые электростанции обеспечивают электроэнергией значительную часть новых ЦОД в Соединённых Штата, особенно там, где это топливо является ключевым энергоносителем.

На днях появилась новость о том, что Meta✴ намерена стать энергокомпанией и самой продавать электричество для эффективного управления потребностями своих ЦОД, а AWS, Google и Microsoft уже делают то же самое. В начале сентября президент США Дональд Трамп (Donald Trump) пообещал операторам ЦОД решить проблемы с энергоснабжением дата-центров с помощью комплекса специальных мер.

Китай строит крупный кластер ЦОД на острове в городе Уху (Wuhu) на реке Янцзы в рамках проекта, который уже называют «китайским Stargate». Впрочем, по масштабам с оригинальным Stargate он пока не сопоставим, сообщает The Financial Times.

Кластер в Уху — лишь часть более масштабного плана Пекина по укреплению своих позиций в качестве ИИ-сверхдержавы. Новый шаг сделан в ответ на усилия США по сохранению лидерства в сфере ИИ. По оценкам Epoch AI, на Америку сегодня приходится до ¾ мировых вычислительных мощностей, на Китай — пока лишь 15 %.

В марте Пекин представил план, согласно которому в отдалённых от побережья западных регионах будут сосредоточены ЦОД, специализирующиеся на обучении ИИ-моделей — они не требуют столь малого времени отклика, как ЦОД для инференса, которые строятся ближе к ключевым населённым пунктам. Одним из примеров последних стал «остров данных» (Data Island) в Уху для четырёх ИИ ЦОД компаний Huawei, China Telecom, China Unicom и China Mobile, которые будут обслуживать богатые города в дельте Янцзы: Шанхай, Ханчжоу, Нанкин и Сучжоу.

Источник изображения: Ryan Moulton/unsplash.com

Всего в Уху построили ЦОД 15 компаний, общий объём инвестиций составил ¥270 млрд юаней ($37 млрд). Местное правительство предлагает субсидии, покрывающие до 30 % затрат на ИИ-чипы, в других регионах субсидии значительно скромнее. ЦОД в Уланчаб во Внутренней Монголии будет обслуживать Пекин и Тяньцзинь, ЦОД в Гуйчжоу будут обеспечивать сервисами Гуанчжоу, а Цинъян в Ганьсу будет обслуживать Чэнду и Чунцин.

Оптимизация работы ЦОД призвана компенсировать невыгодное положение КНР в сравнении с США, на руку которым играет и жёсткий экспортный контроль, не позволяющий Китаю закупать передовые ИИ-ускорители и связанное оборудование. Китайским производителям вроде Huawei и Cambricon нелегко заполнить пустующую нишу, в том числе из-за ограниченных производственных мощностей в КНР.

Китайским ЦОД приходится полагаться на менее производительные отечественные решения или закупать чипы на чёрном рынке — в КНР уже имеется сеть посредников, скрытно импортирующих решения NVIDIA. Один из поставщиков — базирующаяся в Уху компания Gate of the Era, закупающая партии серверов с ускорителями Blackwell для китайских ЦОД. Не так давно стало известно о гигантском ИИ ЦОД для 115 тыс. ускорителей NVIDIA, расположенном на окраине пустыни Гоби в Синьцзяне. В самой NVIDIA утверждают, что контрабанда ускорителей обречена на провал с технической и экономической точки зрения.

Источник изображения: Nuno Alberto/unsplash.сom

Инициатива East Data, West Computing, которая предполагала строительство ЦОД в богатых энергоресурсами отдалённых провинциях вроде Ганьсу и Внутренней Монголии, оказалась не вполне успешной. Недостаток технических компетенций и локального спроса, а также дороговизна каналов связи до востока страны привли к тому, что эти ИИ ЦОД не используются на полную мощность, а то и вовсе проставивают. Во многих случаях закупка чипов субсидировалась местными властями, которые не горят желанием отдавать ускорители кому-то ещё.

Поэтому Пекин рассчитывает использовать сетевые технологии China Telecom и Huawei для объединения мощностей разрозненных ускорителей на разных объектах, создав децентрализованный вычислительный кластер. Китайские телеком-гиганты применяют сетевое оборудование для «трансляции» вычислительных мощностей с запада на восток страны. Тем не менее, эксперты DC Byte считают, что использование множества небольших ЦОД менее эффективно, чем одного нового крупного дата-центра.

NVIDIA и OpenAI объявили о подписании соглашения о намерениях в рамках стратегического партнёрства, согласно которому NVIDIA поставит OpenAI ускорители для развёртывания ИИ-инфраструктуры мощностью не менее 10 ГВт, что позволит обучать и запускать модели следующего поколения на пути к созданию суперинтеллекта.

Для поддержки планов OpenAI, включающих строительство нескольких дата-центров, NVIDIA обязалась инвестировать в неё до $100 млрд, но поэтапно и по мере развёртывания новых ИИ-кластеров NVIDIA. Запуск первого этапа запланирован на II половину 2026 года с началом поставок платформы Vera Rubin. Первые $10 млрд от NVIDIA станут доступны после того, как стороны достигнут окончательного соглашения о покупке OpenAI её ИИ-платформ. Ожидается, что детали нового этапа стратегического партнёрства будут определены в ближайшие недели. Проект не связан со Stargate.

Агентство Reuters отметило взаимовыгодный характер сделки, в результате которой NVIDIA получает долю в крупнейшей в мире компании в области ИИ, уже являющейся её важным клиентом. В свою очередь, OpenAI получает необходимые денежные средства и доступ для покупки передовых чипов, которые необходимы ей в первую очередь для сохранения своего доминирования в условиях растущей конкуренции. По словам источника Reuters, близкого к OpenAI, сделка будет включать две отдельные, но взаимосвязанные транзакции. Стартап сам заплатит NVIDIA за чипы, в то время как деньги NVIDIA пойдут на приобретение миноритарной доли акций.

Источник изображения: Lucas Jennis / Wikipedia

Согласно пресс-релизу, OpenAI будет сотрудничать с NVIDIA в качестве приоритетного стратегического партнёра в области вычислений и сетевых технологий для реализации планов по развитию ИИ-фабрик. Компании будут совместно оптимизировать свои планы по разработке ПО OpenAI для моделирования и инфраструктуры, а также аппаратного и программного обеспечения NVIDIA. Напомним, что NVIDIA поддержала OpenAI в раунде финансирования на $6,6 млрд в октябре 2024 года.

Генеральный директор NVIDIA Дженсен Хуанг (Jensen Huang) сообщил телеканалу CNBC, что 10 ГВт эквивалентны от 4 до 5 млн GPU. По его словам, именно такой объём компания поставит в этом году, что «вдвое больше, чем в прошлом году». «Спрос на ускорители NVIDIA фактически является неотъемлемой частью разработки передовых ИИ-моделей», — заявил аналитик eMarketer Джейкоб Борн (Jacob Bourne), отметив, что подобные сделки также должны снизить опасения по поводу потери продаж в Китае. Он добавил, что это также опровергает предположение о том, что конкурирующие производители чипов или кастомные разработки крупных технологических платформ способны потеснить NVIDIA.

Масштаб инвестиций NVIDIA может привлечь внимание антимонопольных органов, пишет Reuters. Министерство юстиции США и Федеральная торговая комиссия США (FTC) достигли соглашения в середине 2024 года, которое открыло путь для потенциальных расследований роли Microsoft, OpenAI и NVIDIA в ИИ-индустрии. Однако администрация Дональда Трампа (Donald Trump) пока придерживается более мягкого подхода к вопросам конкуренции по сравнению с предыдущей администрацией. Инвестиции NVIDIA последовали за недавним раундом вторичного финансирования, в ходе которого OpenAI получила у ряда инвесторов оценку в $500 млрд.

По словам президента США Дональда Трампа (Donald Trump), глава и основатель Dell Майкл Делл (Michael Dell) входит в группу бизнесменов, намеренных купить американский бизнес TikTok, сообщает The Register. Об этом Трамп заявил Fox News, добавив, что в группу, заинтересованную в приобретении TikTok USA, также входит основатель Oracle Ларри Эллисон (Larry Ellison). Ранее в Белом доме сообщали, что США и Китай достигли соглашения о продаже американского сегмента TikTok.

Облако Oracle уже распоряжается всем трафиком, связанным с деятельностью TikTok в Соединённых Штатах в рамках т.н. Project Texas. Представители американских властей объявили, что большая часть бизнеса TikTok в США будет принадлежать американским предпринимателям, граждане США также займут шесть из семи мест в совете директоров местного подразделения.

Трамп не раскрыл подробностей, просто заявив, что «Майкл Делл участвует». Банк BDT & MSD Partners, инвестирующий от имени Майкла Делла, его семьи и иных инвесторов-единомышленников с момента основания в 2009 году, пока не сообщал, будет ли он представлять в случае с TikTok интересы самого Делла, его компании Dell или всех сразу.

Источник изображения: BoliviaInteligente/unsplash.com

От TikTok (ByteDance) требуется обязательно найти американского покупателя для сегмента TikTok USA по соображениям национальной безопасности. Если социальная сеть будет функционировать в облаке Oracle с использованием построенной Dell инфраструктуры, американские граждане могут быть уверены, что площадка будет представлять минимальный риск для их персональных данных. По словам Трампа, «в деле» по покупке TikTok, вероятно, и наследник медиамагната Руперта Мёрдока (Rupert Murdoch) — Лахлан Мёрдок (Lachlan Murdoch).

Трамп и его сторонники неоднократно подчёркивали роль TikTok в организации связи политиков с молодой аудиторией. Они заявляли, что социальная сеть должна продолжить работу в США для сохранения политической дискуссии и на благо американской экономики. В марте 2025 года сообщалось, что компании, выступающие потенциальными покупателями американского сегмента социальной сети, стали обращаться за помощью облаков Microsoft и Google для обеспечения работы соцсети в США. Впрочем, дедлайн для продажи, установленный на 5 апреля, неоднократно переносился.

Телеком-оператор Optus из Австралии оказался косвенно виноват минимум в трёх смертях своих клиентов. Компания признала, что её сотрудники, возможно, не следовали предусмотренным процедурам при обновлении брандмауэра. В результате последовавшего сбоя абоненты не могли дозвониться в экстренные службы 14 часов, сообщает The Register.

Как заявили в компании, за это время умерли как минимум трое клиентов, не имевших возможности обратиться за помощью. Компания обновила брандмауэр — о каком конкретном сервисе идёт речь, не уточняется — около 00:30 по местному времени 18 сентября. Первоначальные мониторинг и тестирование не выявили проблем со звонками, поскольку с обычными вызовами всё было в порядке, а объёмы звонков на национальном уровне не вызывали никаких опасений.

Ранним утром того же дня в колл-центр Optus обратились два клиента, сообщивших о том, что не смогли дозвониться на 000 — единый номер для экстренных служб Австралии, доступ к которому по закону должны предоставлять все телеком-компании страны. Поскольку на тот момент сбоев в работе выявлено ещё не было, техподдержка не располагала информацией, позволявшей предупредить об имеющихся проблемах. Лишь после очередной жалобы клиента в 13:30 Optus начала осознавать всю серьёзность инцидента. В 13:50 компания уведомила о проблемах полицию, а затем другие экстренные службы, регуляторов, гос. ведомства и т.д.

Источник изображения: Gary Runn/unspalsh.com

После этого компания начала откат обновления и восстановление доступа к 000. В результате разбора логов компания связала три смерти с неудавшимися попытками дозвониться до экстренных служб. В воскресенье компания заявила, что проводит беседы с сотрудниками, проводившими модернизацию для выяснения, почему они не следовали установленным инструкциям. Также руководство компании пообещало внедрить процедуру приоритетного оперативного реагирования на сообщения, связанные с работой службы 000.

Хотя в Optus демонстрируют раскаяние в связи со случившимся, австралийские политики говорят о разочаровании деятельностью Optus. В 2022 году компания стала жертвой крупной утечки информации, а также столкнулась с масштабным сбоем в 2023 году.

Сбои в информационных системах происходят довольно часто, и не всегда они несут только финансовые или технические проблемы. Так, в июле 2024 года глобальный сбой из-за обновления CrowdStrike затронул 8,5 млн ПК на Windows. Годом позже выяснилось, что от него пострадало не менее 750 больниц в США, хотя в CrowdStrike резко раскритиковали исследование, назвав его «лженаукой».

Meta✴ Platforms планирует выйти на рынок оптовой торговли электроэнергией, чтобы эффективнее управлять огромными потребностями в ней своих ЦОД, сообщил Bloomberg. По данным ресурса, Atem Energy, «дочка» Meta✴, подала заявку в Федеральную комиссию по регулированию энергетики США (FERC) с просьбой предоставить разрешение «на продажу энергии, мощности и некоторых дополнительных услуг». Компания попросила одобрить её заявку до 16 ноября.

Представитель Meta✴ заявил, что выход на энергетические рынки — это вполне логичный шаг в реализации стремления компании использовать «чистую» энергию для обеспечения ведения своей деятельности. Так, компания выкупила всю энергию АЭС Clinton Clean Energy Center в Иллинойсе на 20 лет вперёд.

Обеспечение электроэнергией своих объектов становится всё более актуальной задачей для технологических компаний, включая Meta✴, Microsoft и Google (Alphabet), которые разрабатывают всё более продвинутые системы и ИИ-инструменты, требующие большие объёмы электроэнергии. При этом Amazon, Google и Microsoft уже являются участниками энергетического рынка и активно торгуют электричеством, о чём свидетельствуют документы, поданным ими в регулирующие органы США.

Источник изображения: Andrew Hall/unsplash.com

Потребляя огромные объёмы энергии, эти компании также имеют контракты на продажу электроэнергии в случае необходимости и экономической целесообразности. «Появятся возможности продавать электроэнергию на оптовых рынках и немного заработать на этом», — говорит о перспективах Meta✴ Павел Молчанов (Pavel Molchanov), аналитик Raymond James.

Также технологические компании, у которых есть аккумуляторы или генераторы на территории их кампусов ЦОД, могут продавать энергию обратно в сеть в случае резкого роста цен, утверждает Энди ДеВриз (Andy DeVries), аналитик CreditSights по коммунальным услугам и энергетике. Согласно прогнозам BloombergNEF, за 10 лет спрос на электроэнергию со стороны ИИ ЦОД вырастет в четыре раза. На фоне резкого роста спроса увеличиваются цены на электроэнергию. Платежи за мощность, которые получают производители на некоторых рынках США, выросли до рекордных значений.

Спрос настолько высок, что некоторые технологические компании, заявлявшие о своих климатических целях, начали вновь рассматривать природный газ в качестве ключевого источника питания для ЦОД. Например, в прошлом месяце регулирующие органы Луизианы одобрили план коммунальной компании Entergy Corp. по строительству трёх электростанций, работающих на природном газе, для обеспечения ЦОД Meta✴ энергией. Ради них даже построят отдельную ЛЭП.

Агентству Bloomberg стало известно о переговорах между Oracle и Meta✴ Platforms о многолетнем соглашении на сумму $20 млрд, в рамках которого Oracle будет предоставлять гиганту социальных сетей вычислительные мощности для обучения и развертывания ИИ-моделей. Сумма сделки не окончательная, как и её условия, которые могут измениться до достижения сторонами окончательного соглашения, предупредили источники Bloomberg, знакомые с обстоятельствами ведения переговоров.

Как полагает SiliconANGLE, сделка Meta✴ с Oracle в сфере облачных технологий, вероятно, является частью масштабной инициативы по созданию ЦОД, о которой компания сообщила в июле. В рамках проекта она инвестирует сотни миллиардов долларов в новую ИИ-инфраструктуру. Первые два кластера ЦОД этого проекта, Prometheus и Hyperion, потребуют по нескольку ГВт электроэнергии каждый.

На прошлой неделе Oracle заключила соглашение с OpenAI на $300 млрд сроком на пять лет на предоставление вычислительный мощностей для обработки ИИ-нагрузок. Компания ранее сообщила, что в I квартале 2026 финансового года заключила многомиллиардные соглашения с тремя клиентами, в результате чего объём оставшихся обязательств по контрактам (RPO) вырос год к году на 359 % до $455 млрд.

Источник изображения: Oracle

По словам гендиректора Oracle Сафры Кац (Safra Catz, на фото выше), в ближайшие несколько месяцев у компании должно появиться еще несколько крупных клиентов с многомиллиардными контрактами, благодаря чему RPO, вероятно, превысит полтриллиона долларов. Дэйв Велланте (Dave Vellante), главный аналитик CUBE Research (SiliconANGLE Media), отметил, что эти достижения свидетельствуют о том, что Oracle вошла в число гиперскейлеров.

Oracle становится ключевым поставщиком вычислительных мощностей для ИИ-нагрузок, конкурируя с лидерами рынка облачных технологий Amazon.com, Microsoft и Google. На фоне успешной работы акции техасской компании выросли в этом году на 84 %.

Согласно публикациям CNBC и The Information, NVIDIA заключила сделку с разработчиком интерконнекта для ИИ-систем Enfabrica стоимостью $900 млн, чтобы лицензировать ряд его технологий, а также переманить его гендиректора и ключевых сотрудников. Оплата сделки, завершённой на прошлой неделе, производилась собственными средствами NVIDIA и её акциями. Глава Enfabrica Рочан Санкар (Rochan Sankar) уже присоединился к команде NVIDIA.

Спрос на вычислительные мощности для поддержки генеративного ИИ со стороны таких компаний, как OpenAI, Anthropic, Mistral, AWS, Microsoft и Google, ставит перед NVIDIA сложную задачу: как создать унифицированный, отказоустойчивый GPU-кластер, способный справиться с такими огромными нагрузками. Решения Enfabrica, основанной в 2019 году, призваны решить эту задачу.

Как пишет Network World со ссылкой на аналитиков, NVIDIA считает интеграцию технологий Enfabrica критически важной для повышения эффективности своих кластеров в обучении новейших ИИ-моделей. Во всяком случае, Enfabrica утверждает, что её технология позволяет бесшовно объединить более 100 тыс. ускорителей в единый кластер. Кроме того, к ускорителям можно добавить CXL-пулы DRAM/SSD.

Источник изображений: Enfabrica

«Используя SuperNIC и фабрику Enfabrica, NVIDIA может ускорить передачу данных в кластерах, обойти текущие ограничения масштабирования сетевых фабрик и снизить зависимость от дорогостоящей памяти HBM», — отметила Рачита Рао (Rachita Rao), старший аналитик Everest Group, имея в виду чип ACF-S, разработанный для обеспечения более высокой пропускной способности, большей отказоустойчивости, меньшей задержки и лучшего программного управления для операторов ЦОД, работающих с ресурсоёмкими ИИ-системами и HPC.

Enfabrica утверждает, что ACF-S более отказоустойчив в сравнении с традиционным интерконнектом, поскольку заменяет двухточечные соединения GPU многопутевой архитектурой, которая снижает перегрузку, улучшает распределение данных и гарантирует, что сбои в работе GPU не приведут к остановке процесса вычислений.

По мнению Чарли Дая (Charlie Dai), главного аналитика Forrester, для NVIDIA также представляет интерес технология EMFASYS, позволяющая дать ИИ-серверам доступ к внешним пулам памяти. По словам Дая, сочетание ACF-S и EMFASYS может помочь NVIDIA добиться более высокой загрузки GPU и снижения совокупной стоимости владения (TCO) — ключевых показателей для гиперскейлеров и разработчиков LLM.

Как сообщает Blocks & Files, Enfabrica привлекла в общей сложности $290 млн венчурного финансирования: $50 млн в раунде A в размере $50 млн в 2022 году при оценке в $50 млн; $125 млн в раунде B в 2023 году с оценкой в размере $250 млн; $115 млн в раунде C в 2024 году. По данным Pitchbook, оценочная стоимость компании сейчас составляет около $600 млн. NVIDIA инвестировала в компанию в раунде B. На этой неделе NVIDIA также объявила об инвестициях в Intel в размере $5 млрд в рамках совместной разработки специализированных чипов для ЦОД и ПК.

Квазислияния получили широкое распространение в Кремниевой долине, поскольку позволяют обойти препоны регуляторов. В начале этого года Meta✴ приобрела за $14,3 млрд 49 % акций Scale AI, переманив его основателя Александра Ванга (Alexandr Wang) вместе с ключевыми сотрудниками. Месяц спустя Google объявила о похожем соглашении с ИИ-стартапом Windsurf, в рамках которого его соучредитель и гендиректор Варун Мохан (Varun Mohan) перешёл вместе с рядом сотрудников в подразделение Google DeepMind. Аналогичные сделки были в прошлом году у Google с Character.AI, Microsoft с Inflection AI и у Amazon с Adept.

Microsoft в течение пяти лет потратит $6,2 млрд на аренду ИИ-мощностей в Норвегии у британского неооблака Nscale при участии норвежской инвестиционной компании Aker ASA, сообщает Bloomberg. Для проекта зарезервирована мощность в местной энергосети, причём речь идёт о полностью «возобновляемом» электричестве. Действие договора начнётся в 2026 году.

Весьма вероятно, речь идёт о том же объекте, что и для OpenAI. Так, Nscale и Aker ещё в июле сообщили о строительстве в Квандале (Kvanndal) близ Нарвика (Narvik) ИИ ЦОД мощностью 230 МВт, позже добавится ещё 290 МВт. Ранее компании заявляли, что мощности будут использоваться и другими игроками помимо OpenAI. Представитель Microsoft заявил, что проект многое значит для клиентов в Норвегии и Европе в целом, ЦОД получит самые передовые ИИ-серверы. В Nscale добавляют, что Нарвик становится стратегическим ИИ-хабом Европы.

Ранее на этой неделе Microsoft объявила об отдельной сделке с Nscale, в рамках которой планируется построить близ Лондона в графстве Эссекс дата-центр, оснащённый более 23 тыс. суперускорителей NVIDIA Grace Blackwell Ultra. Вскоре после этого OpenAI объявила, что будет использовать местные ЦОД Nscale для проекта Stargate. Microsoft объявила, что потратит на ИИ-проекты в Великобритании $30 млрд, в том числе более $15 млрд на облачную инфраструктуру в течение четырёх лет.

Источник изображения: Simon Williams/unsplash.com

Microsoft арендует всё больше ИИ-мощностей у сторонних провайдеров. На прошлой неделе компания подписала сделку на $19,4 млрд с Nebius Group NV. Впрочем, компания и сама строит гигантские ИИ ЦОД.

Компания Meta✴ создала крупный ИИ-кластер из 129 тыс. ускорителей NVIDIA H100, использующий пять расположенных близко к друг другу ЦОД. Для его создания она переместила из дата-центров имевшиеся стойки, сообщает Datacenter Dynamics. По словам компании, сворачивать работу действующих ЦОД невероятно дорого, поскольку речь идёт об уже сделанных крупных инвестициях. Кроме того, эти дата-центры обслуживали актуальные рабочие нагрузки, так что пришлось отключать их настолько быстро, насколько это возможно, при этом стараясь не вызывать заметных пользователям сбоев.

Для того, чтобы проделать все работы быстро, пришлось переделать погрузочные платформы в дата-центрах. Более того, построили новых роботов для перемещения стоек массой более 400 кг и даже переделала упаковку для самих стоек, чтобы ускорить перемещения. Сеть в ЦОД разрослась вчетверо, для чего пришлось даже прорыть новые коммуникационные траншеи, чтобы связать пять зданий в единую высокоскоростную сеть. Все эти работы были выполнены всего за несколько месяцев.

Источник изображения: Glenov Brankovic/unsplash.com

Объясняется, что решение о создании суперкластера на основе действующих ЦОД было принято, поскольку у существующих площадок было достаточно энергетических мощностей для столь большого проекта. Компания не раскрыла местоположения нового ИИ-кластера и признала, что её знания и многолетний опыт создания крупных IT-систем, в том числе дата-центров, из-за стремительного прогресса ИИ устарели. Теперь Meta✴ готова инвестировать «сотни миллиардов долларов в вычисления. Гигаваттный кластер Prometheus должен заработать в следующем году, а Hyperion на 5 ГВт должны ввести в эксплуатацию до конца десятилетия.