По словам экспертов BMI, более половины проектов ЦОД гиперскейл-уровня в США могут столкнуться с ростом препятствий со стороны регуляторов после минувших промежуточных выборов. В компании полагают, что речь, вероятно, идёт политических вмешательствах, но не о существенном изменении государственной политики. Так, общенациональный мораторий на строительство новых ЦОД считают маловероятным, сообщает Datacenter Dynamics.

Согласно опросу, проведённому NBC, при принятии решения на голосовании 56 % респондентами из числа голосовавших важным фактором стало строительство ИИ ЦОД. В BMI прогнозируют, что регуляторы существенно усилят давление на новые проекты ЦОД до конца 2028 года. Важно, что 53 % прироста портфеля проектов ЦОД гиперскейл-уровня относится к Техасу, Джорджии, Огайо и Пенсильвании. В первых трёх победу одержали демократы, ранее уже выступавшие против строительства дата-центров, а Пенсильвания переизбрала главу, который уже ввёл ряд ограничений в отношении ЦОД. Впрочем, Техас их тоже уже ввёл.

Источник изображения: Kelly Sikkema/unsplash.com

По словам BMI, графики строительства ЦОД на 2027 год уже утверждены, поэтому основное внимание уделяется проектам 2028 года и более поздним. При этом относительно капитальных затрат гиперскейлеров остаётся неопределённость. Если будут введены обычные моратории, расходы сократятся. Если же будут приняты другие меры, например, изменения в налоговом законодательстве, требования по самообеспечению ЦОД энергией, увеличение обязательств по закупке «зелёной» энергии, остановки электростанций на ископаемом топливе и т.п., то затраты могут вырасти.

По оценкам аналитиков Cleanview, новые губернаторы могут приостановить реализацию 41 % проектов ЦОД в США. В штатах, где новые губернаторы выступают за приостановку строительства, уже запланированы ЦОД совокупной мощностью 159 ГВт. Ещё 69,2 ГВт приходится на штаты, где победившие кандидаты намерены пересмотреть налоговые льготы и прочие правила, но за моратории на строительство не выступают.

Акции американских технологических гигантов взлетели на торгах в среду — инвесторы отреагировали на новости о победе Демократической партии во многих штатах США. Предполагается, что Конгресс под их контролем замедлит масштабные затраты на ИИ-инфраструктуру, которые негативно сказываются на свободном денежном потоке компаний, сообщает Bloomberg.

Акции Amazon выросли на 8,3 %, Microsoft — на 7 %, а Alphabet и Meta✴ — на 5,9 % и 3,6 % соответственно. Хотя Apple пока избегает крупных трат на ИИ, её акции тоже выросли более чем на 6 %. В целом совокупная рыночная капитализация пяти компаний выросла почти на $1 трлн за торговую сессию.

Демократы на выборах в США на вторник получили большинство в обеих палатах американского Конгресса, в том числе одержав победы в традиционно республиканских штатах, включая Южную Каролину, Техас и Канзас, а также на выборах местного уровня. Ранее кандидаты от Демократической партии выступали за замедление развития ИИ, в частности — за ограничение массового строительства ЦОД. Рынок посчитал, что победа партии знаменует конец масштабного строительства ИИ-инфраструктуры и что гиперскейлеры перестанут тратить колоссальные суммы на строительство ЦОД, в результате чего свободные денежные потоки компаний снова смогут стать положительными.

Источник изображения: Bloomberg

Многие избиратели решительно против строительства новых ЦОД рядом с местами их проживания. По словам экспертов, крупная победа Демократической партии скажется на фондовом рынке в ближайшее время. Одним из ключевых следствий, вероятно, станет усиление мер регулирования ЦОД на уровне штатов.

В последнее время акции Amazon, Microsoft, Alphabet и Meta✴ пребывали под давлением, поскольку инвесторы всё больше беспокоились, что вкладываемые в ИИ-инфраструктуру сотни миллиардов долларов обеспечат достаточную отдачу. При этом свободный денежный поток Amazon, Alphabet и Meta✴ уже стал отрицательным — капитальные затраты компаний выше, чем те получают за счёт своей операционной деятельности. В результате для финансирования расходов приходится привлекать заёмные средства, а также деньги на фондовых рынках.

По итогам торгов вторника индекс Bloomberg, отслеживающий показатели «Великолепной семёрки» технологических компаний, упал на 5,9 % после того, как Meta✴ открыла сезон отчётности гиперскейлеров. В результате с начала года совокупный рост этой группы составил только 4,1 %. В среду акции данной группы компаний подорожали на пике на 3,6 %, наблюдалось движение к лучшему с 21 сентября результату несмотря на снижение котировок NVIDIA и Tesla.

Хотя торги в среду, по словам экспертов, во многом носили спекулятивный характер, они продемонстрировали, насколько важен для инвесторов свободный денежный поток. При этом гиперскейлеры оказались в безвыходном положении. Их критиковали за большие капитальные затраты, но сокращение инвестиций тоже вызвало бы вопросы. В некотором смысле результаты выборов оказались «подарком» для компаний, поскольку теперь их расходы станет ограничивать не руководство, а само государство.

На днях сообщалось, что четыре крупнейших гиперскейлера займут ещё $131 млрд на развитие ИИ-инфраструктуры. В октябре BlackRock заявляла, что приостановка строительства ИИ ЦОД в США может привести к рецессии.

Крупнейшие облачные провайдеры планируют привлечь более $131 млрд в виде заёмных средств и выпуска акций для финансирования развития ИИ-инфраструктуры, сообщает Data Centre Dynamics. За минувшую неделю планы по привлечению финансирования раскрыли Amazon, Google, Microsoft и Oracle — лидером стала первая, которая объявила об открытии кредитной линии на $80 млрд.

Кредитная линия Amazon является одним из механизмов финансирования поставок оборудования для технологической инфраструктуры, гласят поданные в Комиссию по ценным бумагам и биржам (SEC) документы; средства смогут использоваться в период с I квартала 2027 по III квартал 2028 года. Сумма займа «может варьироваться в зависимости от объёма и срока размещения заказов, а также от ценовых условий; максимальный размер составляет приблизительно $80 млрд».

По состоянию на 30 сентября 2026 года у Amazon имелись необеспеченные возобновляемые кредитные линии на общую сумму $20 млрд: одна на $15 млрд открыта в 2023 году, вторая на $5 млрд — по соглашению сроком на один год. В минувшем квартале Amazon направила $77 млрд на строительство ЦОД, закупку ИИ-серверов, развитие складской сети и другие нужды. Этот показатель превысил ожидания аналитиков, но компания пообещала остаться в пределах запланированных на год $220 млрд.

Microsoft объявила о планах привлечь $25 млрд путём выпуска облигаций для финансирования расширения своей инфраструктуры. Компания намерена «использовать чистую выручку от размещения для общих корпоративных целей, включая, помимо прочего, пополнение оборотного капитала, капитальные вложения, обратный выкуп акций, приобретение других компаний и погашение существующей задолженности. Как ожидается, размещение завершится 4 ноября 2026 года». Ставки по облигациям варьируются от 4,85 % до 6,35 %. На минувшей неделе Microsoft опубликовала финансовые результаты по итогам квартала. За квартал её капзатраты составили $45,2 млрд; на 2027 год компания прогнозирует расходы в сумме $170 млрд — ранее она оценивала этот показатель в $175 млрд.

Источник изображения: Geoffrey Moffett / unsplash.com

Oracle объявила о планах привлечь $20 млрд. Компания намерена разместить обыкновенные акции на сумму $10 млрд и выпустить облигации старшего приоритета с плавающей процентной ставкой на те же $10 млрд. Компания планирует потратить средства на оборотный капитал, капитальные затраты, исполнение контрактных обязательств, выплату дивидендов, обратный выкуп акций, а также погашение уже имеющихся задолженностей и прочие цели. По сравнению с конкурентами объём капзатрат Oracle значительно ниже — компания ожидает, что по итогам года они составят $90–$95 млрд. Компания завершила анонсированное ранее размещения акций на $20 млрд. Ранее Oracle заявляла о намерении в течение 2027 финансового года привлечь $40 млрд за счёт выпуска долговых обязательств и акций. С учётом последнего размещения цель достигнута.

Google разместит облигации на сумму €6 млрд ($6,7 млрд) со ставками от 3,7 % до 5,25 %. Не вполне удачный финансовый отчёт спровоцировал падение акций компании: выяснилось, что отрицательные денежный поток составил $9,01 млрд. Этот показатель в холдинге объяснили «инвестициями в капзатраты» — на них компания в минувшем квартале направила $51,36 млрд. Прогноз по годовым показателям она менять не стала: в 2027 году он потратит до $205 млрд, в 2028 году — $300 млрд. После публикации этих данных акции Google на внебиржевых торгах упали на 12 %.

Примечательно, что в сопоставимых масштабах ищут финансирование и более мелкие неооблачные компании. Но источники финансирования начинают иссякать. OpenAI ранее сократила объёмы привлечения капитала; рейтинги многих компаний стали снижаться из-за роста долговой нагрузки и опасений относительно того, окупятся ли вложения. Доходность выпущенных под 9,67 % облигаций CoreWeave, в частности, подскочила до 15 %. Значительная часть этих долгов обеспечена лишь гипотетическими контрактами. Спрос на вычислительные мощности для ИИ существует, но его реализация — процесс, который зависит от множества факторов: наличия земельных участков и электроэнергии, доступности оборудования и инфраструктуры. И необходимый для финансирования этого капитал оказывается астрономическим.

Ранее стало известно, что фактические объёмы долгов у техногигантов оказались значительно выше, чем указано в их отчётности — $1,64 трлн для Google, Microsoft, Amazon, Meta✴ и Oracle. Amazon в июле выпустила облигации на сумму $25 млрд, чтобы покрыть расходы на ИИ-инфраструктуру. Долговые схемы нередко имеют циклический характер: Broadcom одолжила Anthropic $42 млрд для финансирования расходов на инфраструктуру, в том числе на покупку чипов самой Broadcom.

Более 11 % ИИ-ускорителей в суперкластере Meta✴ Prometheus в Нью-Олбани (New Albany, штат Огайо) либо уже вышли из строя, либо простаивают. Последние ожидают, когда перестанет функционировать ещё один из уже активных чипов, сообщает The Register со ссылкой на информацию самой компании.

Такой резерв ускорителей — лишь одна из мер, принимаемых гиперскейлером для обеспечения бесперебойного обучения ИИ-моделей. Prometheus представляет собой один из крупнейших вычислительных проектов Meta✴, оснащённый стоечными системами Grace Blackwell и в будущем Vera Rubin. Meta✴ рассчитывает масштабировать комплекс до 1 ГВт с использованием порядка миллиона ускорителей.

При этом увеличение количества ускорителей обычно ведёт к росту числа проблем. В узле с восемью ускорителями вероятность отказа невелика, но в кластере из 100 тыс. ускорителей отказы неизбежны. Масштаб проекта Meta✴ значительно больше, причём распределённые вычисления осуществляются сразу в нескольких ЦОД. Поэтому поддержание бесперебойной работы инфраструктуры до следующей контрольной точки обучения — непростая задача. В корпоративном блоге Meta✴ рассказала о мерах, принимаемых для защиты процесса обучения моделей от аппаратных сбоев.

На первом этапе развёртывания Prometheus в Нью-Олбани происходило порядка 1 тыс. прерываний вычислений в сутки на каждые 8 тыс. ускорителей. Прерывания не обязательно означают отказ ускорителя. Речь идёт практически о любом сбое, в результате которого процесс приходится останавливать и «откатываться» к последней успешно сохранённой контрольной точке.

Источник изображения: Meta✴

По данным Meta✴, за последовавший год компания сократила количество таких прерываний на 99 %, до порядка 11 на каждые 8 тыс. ускорителей. Один из способов — постоянно держать часть из них в резерве. Кластер работает на основе комбинации систем GB200 и GB300, каждая из которых включает 72 ускорителя в одном домене NVLink. В каждый отдельный момент работают только 64 из них, а оставшиеся восемь находятся в «горячем резерве».

Такую схему внедрили, поскольку даже отказ одного ускорителя мог прервать процесс обучения во всей стойке. Теперь в случае отказа сразу задействуется резервный экземпляр, что позволяет сэкономить время. Прерывание вычислений по-прежнему происходит, но затраты времени на восстановление значительно сокращаются.

Чтобы уменьшить последствия подобных сбоев, Meta✴ использует принцип параллелизма данных, при котором в одном кластере одновременно работают несколько копий модели. В случае сбоя неисправность локализуется в одной из копий, а остальные продолжают обучение, повторно выполняя соответствующий этап. В результате совокупная производительность лишь ненадолго снижается, а обучение не приходится начинать с нуля. Распределённая архитектура сохранения контрольных точек тем временем обеспечивает запись состояния модели в многоуровневую систему хранения.

Источник изображения: Meta✴

По данным Meta✴, одной из сложнейших задач стало обеспечение с помощью NVLink работы 72 ускорителей как единого целого. В системах H100 и H200 использовалось всего по восемь чипов на домен, поэтому соединения были значительно короче, а их количество — меньше. Для Blackwell размер одного домена увеличился в девять раз — при наличии более 600 тыс. соединений даже небольшое падение качества сигнала приводит к частым циклам восстановления соединений NVLink. Для решения проблемы пришлось внедрить систему непрерывного телеметрического мониторинга, а также проводить стресс-тесты уровня L11, позволяющие выявлять ненадёжные соединения до начала эксплуатации систем.

Ещё одна проблема связана с обеспечением электропитания. Одновременное включение и выключение десятков тысяч ускорителей при запуске и завершении задач может вызывать скачки энергопотребления, перегружающие оборудование, отвечающее за электропитание. Meta✴ даже пришлось добавить в PyTorch опцию PYTORCH_NO_POWERPLANT_BLOWUP, которая загружает ускорители бессмысленной работой в моменты простоя.

По данным Meta✴, меры по повышению стабильности и надёжности кластера позволили добиться доли полезной вычислительной работы (так называемого goodput) на уровне более 85 % при предварительном обучении и более 90 % при обучении с подкреплением последней модели Muse Wonder.

На этом амбиции Meta✴ не заканчиваются: компания по-прежнему стремится создать инфраструктуру на миллион ускорителей. Частоту прерываний предполагается снизить до двух в сутки на каждые 8 тыс. ускорителей. Также компания рассчитывает обеспечить среднее время между прерываниями на уровне 100 тыс. GPU-часов.

Аналитики Jefferies задались вопросом, приведёт ли падение затрат на искусственный интеллект из-за появления дешёвых открытых китайских моделей к «перезагрузке» всей отрасли ИИ, в то время как поставщики облачных услуг стремятся окупить триллионные капитальные затраты, пишет The Register.

Около половины из резервов по контрактам Microsoft, Alphabet, Amazon и Oracle в общей сложности на $2,3 трлн связаны с OpenAI и Anthropic, говорится в недавней исследовательской заметке Jefferies, посвящённой азиатским рынкам. При этом китайские модели ИИ, открытые модели и малые языковые модели грозят обрушением ценовой политики, которую устанавливают два лидера отрасли из США, что ставит под сомнение их будущие доходы.

На агрегаторе OpenRouter за неделю, завершившуюся 27 сентября, китайские модели обработали 76,12 трлн токенов — в конце апреля этот показатель составлял 4,37 трлн. На модели четырёх крупнейших американских разработчиков пришлись 14,2 трлн токенов. В авангарде китайская Moonshot AI Kimi K3, которая состязается напрямую с Anthropic Claude Fable 5.

В этом году крупнейшие гиперскейлеры в общей сложности потратят от $600 млрд до $800 млрд на строительство ИИ ЦОД, финансируя эти проекты всё больше за счёт долговых обязательств, а не собственных средств. И в Jefferies пытаются понять, откуда будут поступать будущие доходы этих компаний: «Больше нельзя исходить из того, особенно с появлением таких систем как Kimi K3, что LLM когда-либо будут прибыльными, учитывая связанный с этим обвал цен на токены. Для гиперскейлеров это чрезвычайно актуально, потому что они вложились в мощности ЦОД, рассчитывая, что их закупят такие компании как Anthropic и OpenAI».

Источник изображения: BoliviaInteligente / unsplash.com

В долгосрочной перспективе ставка на ИИ может представляться целесообразной, но в среднесрочной неопределённость очень велика. «В какой-то момент не столь отдалённого будущего история ИИ должна подвергнуться большой перезагрузке. Действительно ли капзатраты четырёх гиперскейлеров в 2027 году составят $993 млрд?» — задают вопрос аналитики. Важным оказывается и вопрос о том, какая часть заявленной прибыли гиперскейлеров зависит от их инвестиций в разработчиков моделей ИИ, от которых будут также зависеть доходы. Особую важность в отчётности приобретает статья «Прочие доходы и расходы», в которую входит прибыль от вложений. И эти вложения, указывают в Jefferies, «вероятно, будут включать позиции в неторгуемых акциях, связанных с ИИ».

За четыре квартала до II квартала 2026 года приведённая годовая прибыль четырёх крупнейших гиперскейлеров выросла на $222 млрд и достигла $581 млрд, но весь этот рост объясняется статьёй «Прочие внеоперационные доходы/расходы» — показатели по ней выросли на $224 млрд г/г, достигнув $237 млрд, то есть именно на них пришёлся «весь рост прибыли».

Другое исследование показало, какой объём доходов и займов может потребоваться облачным провайдерам для финансирования планов по строительству ЦОД: к 2031 году отрасль ИИ должна генерировать $6 трлн в год, чтобы продолжать финансировать инфраструктуру, необходимую для удовлетворения ожидаемого спроса. То есть отрасли потребуются новые сценарии применения, помимо повышения производительности труда сотрудников.

Уже в следующем году капзатраты гиперскейлеров превысят $1,5 трлн, подсчитали в TrendForce. Google, Meta✴ и Microsoft поддержали обязательство по полной оплате расходов на энергетическую инфраструктуру для ЦОД. В Банке Англии, однако, уверены, что скорой экономической выгоды от ИИ ждать не следует.

Бум ИИ задаёт высокие темпы строительства вычислительной инфраструктуры. В следующем году лидеры рынка облачных услуг сообща направят на эти цели более $1,5 трлн, но даже в этом соответствующая сумма более чем удвоится. На покупку серверных систем в 2027 году будет потрачено более $1,1 трлн.

Такими прогнозами делится TrendForce, учитывая в своей статистике данные о капитальных расходах девяти крупнейших провайдеров облачных услуг (CSP). В текущем году эти затраты они увеличат сразу на 106 % до $957 млрд, лишь немного недотянув до психологически важной отметки в $1 трлн. В следующем году темпы роста капитальных затрат девяти крупнейших CSP вырастут ещё на 60 % и превысят $1,5 трлн, хотя сам прирост будет более скромным по сравнению с текущим годом.

TrendForce к лидерам облачного сегмента относит компании Google, Amazon, Meta✴, Microsoft, Oracle, ByteDance, Tencent, Alibaba и Baidu, которые представляют США и Китай. Ранее аналитики ожидали, что в следующем году перечисленные компании свои совокупные капитальные затраты увеличат только на 50 %, но в силу ряда причин текущий прогноз пересмотрен в сторону прироста на 60 %.

Источник изображения: TrendForce

Три главных фактора способствуют росту расходов этих компаний. Во-первых, цены на готовые серверные системы продолжают расти. Во-вторых, закупки компонентов в условиях дефицита осуществляются в больших объёмах, чем планировалось бы в нормальной ситуации. В-третьих, некоторые поставщики требуют от CSP крупных авансовых платежей в счёт будущих партий продукции.

В сегменте серверов для инфраструктуры ИИ объёмы поставок в текущем году вырастут на 32,2 %, по прогнозам TrendForce. В следующем году темпы роста даже увеличатся до 36 %, поскольку признаков насыщения спроса наблюдаться не будет. В денежном выражении ИИ-серверы сформируют $479 млрд выручки или почти 75 % ёмкости всего рынка серверов в текущем году, которая достигнет $639,2 млрд, по версии TrendForce.

Источник изображения: TrendForce

В следующем году облачные гиганты сосредоточатся на закупках стоечных систем на базе NVIDIA GB300 и VR200, а также AMD Helios. Средняя цена их реализации неизбежно вырастет в условиях дефицита и высокой стоимости микросхем памяти. По прогнозу TrendForce, выручка от реализации серверного оборудования на мировом рынке впервые превысит $1 трлн в 2027 году, причём из этой суммы $920 млрд придутся на выручку от реализации ИИ-серверов. Она вырастет по сравнению с 2026 годом более чем на 90 %. Доля ИИ-серверов на рынке в денежном выражении увеличится примерно до 81 %.

ByteDance занимает приблизительно 20 % всех мощностей ЦОД в КНР. По данным SemiAnalysis, оценившего информацию о тысяче ЦОД и 60 провайдерах в стране, объём рынка ЦОД в Китае составляет более 24 ГВт. 20 ГВт находятся в стадии реализации, и ещё 30 ГВт приходится на прочие анонсированные проекты, сообщает Datacenter Dynamics. Китайские гиперскейлеры арендуют мощности и за пределами КНР — всего порядка 4 ГВт за рубежом, но к 2029 г. этот показатель должен удвоиться.

Из этих 24 ГВт на долю ByteDance приходится пятая часть, но в основном речь идёт об арендованных мощностях. Точные данные о парке ЦОД ByteDance отсутствуют, поскольку компания частная. Тем не менее анализ показывает, что по объёму используемых мощностей ЦОД она впереди Alibaba Cloud, Tencent, Baidu и Huawei. Если Huawei полагается в основном на собственную инфраструктуру ЦОД в Китае, то Alibaba, Tencent и Baidu используют комбинированный подход.

Источник изображения: SemiAnalysis

Не так давно ByteDance, по неподтверждённым данным, подписала соглашение с Vnet на 500 МВт мощностей в Китае. Также компания строит ЦОД в китайской провинции Шаньси (Shanxi), в технопарке Economic Development Zone Big Data Park в городе Датун (Datong) уезда Гуанлин (Guangling).

В сентябре текущего года китайские СМИ сообщали, что ByteDance вела переговоры с операторами ЦОД о том, чтобы добавить ещё 5–6 ГВт вычислительных мощностей в городе Уланчаб (Ulanqab) во Внутренней Монголии. Также ByteDance является клиентом ЦОД ChinData в технопарке Taihang Mountain Energy and Information Technology Industrial Campus близ Датуна (Datong) в провинции Шаньси (Shanxi) на севере Китая.

Вне КНР ByteDance — якорный арендатор объекта Bridge Data Centres в Джохоре (Johor, Малайзия). Также она взаимодействует с DayOne в Сингапуре и нацелена на реализацию проектов в Таиланде, Бразилии и Австралии. В США мощности TikTok размещены в ЦОД Oracle в Техасе, а в Европе арендуются ЦОД у Green Mountain в Норвегии. Также компания ведёт дела с Hyperco и DayOne в Финляндии. Помимо TikTok компания предлагает и собственные облачные сервисы под брендом Volcano Engine.

За 2023 год американские дата-центры использовали более 64,35 млн м3 воды. По статистике Исследовательской службы Конгресса США (CRS) это втрое больше, чем они потребляли в 2014 году, сообщает The Register. CRS подчеркнула, что федеральные власти не оценивают использование воды индустрией ЦОД на постоянной основе. Проблема ещё и в том, что данные о потреблении воды нередко собираются лишь органами власти на уровне штатов, а предоставляться могут и вовсе через суд.

В отчёте, недавно опубликованном Библиотекой Конгресса США, CRS рассказала о затратах воды ЦОД, способах сократить её потребление воды и о том, какую роль в контроле данного вопроса играют федеральные власти, отвечающие за регулирование использование воды операторами ЦОД. Бум ИИ, согласно докладу, привёл к значительному росту объёмов строительства ЦОД с тех пор, как OpenAI представила ChatGPT в конце 2022 года, что вызвало стремительный рост спроса на генеративный ИИ и ИИ-модели. Многие новые дата-центры оптимизированы для ИИ-оборудования, потребляющего больше энергии и требующего более интенсивного охлаждения.

Именно в 2023 году начался бум строительства ИИ-инфраструктуры, поэтому темпы потребления воды утроились в сравнении с 2014 годом. Впрочем, непосредственное потребление воды ЦОД, не связанное, например, с генерацией энергии, составляет всего около 2 % от общего водопотребления в США. На косвенное потребление при этом приходится более 80 % всей используемой ЦОД воды.

Источник изображения: Chamika Jayasri/unsplash.com

CRS не рассказывает подробности о конкретных системах охлаждения, поскольку разные ЦОД могут использовать разные технологии с учётом размера и местоположения объектов, а также требований оборудования к терморегулированию. Хотя СЖО могут оказаться эффективнее воздушных технически, экономически они могут быть менее эффективными. Нередко приходится идти на компромиссы, ищя баланс между потреблением воды и энергии. Испарительные системы охлаждения в целом более энергоэффективнее, чем воздушные, но они потребляют намного больше воды.

Источники воды тоже могут быть разными. Обычно речь идёт об использовании муниципальных систем водоснабжения (97 %), но применяются и очищенные сточные воды, и грунтовые, и получаемые из артезианских скважин. Подчёркивается, что стоимость воды для операторов ЦОД нередко определяется соглашением с местным муниципалитетом и может храниться в секрете. Доступность отраслевых или конкретных данных по отдельным ЦОД нередко ограничена.

Информацию, если этого требует закон, могут собирать коммунальные службы, но пока федеральное правительство вообще не проводило оценки потребления воды ЦОД. В норме обеспечение водой предприятий и населения находится в компетенции отдельных штатов.

Источник изображения: Genessa Panainte/unsplash.com

Не так давно одним из учёных был подан иск против Amazon, в котором утверждалось, что компания публиковала ложные данные об использовании водных ресурсов Северной Вирджинии, с доказательствами, включающими счета и данные о потреблении воды, полученные в соответствии с Законом о свободе информации (FOIA), запросы о которых были направлены в коммунальные службы ключевого для ЦОД США региона.

В целом гиперскейлеры крайне неохотно делятся соответствующими сведениями. Тем не менее Amazon наконец сообщила, что её дата-центры «выпили» почти 9,5 млн м³ в 2025 году, а Microsoft в июне объявила о достижении положительного водного баланса, но не раскрыла объёмы потребления воды. Google тоже пообещала стать водноположительной.

Федеральное финансирование помогло исследователям создать базу данных об использовании водных ресурсов (United States Water Withdrawals Database), в которой имеется статистика по 42 штатам. В неё входит информация о коммунальном, промышленном и коммерческом потреблении, а потребители обязаны предоставлять сведения в соответствии с законами штатов. CRS также изучила связанные с водопользованием ЦОД законопроекты: одни предусматривают улучшение доступности информации о водопотреблении, другие предлагают стимулировать повторное использование воды, но большинство так и осталось на стадии проекта.

В Евросоюзе недавний закон требует от операторов ЦОД указывать ежегодный объём потребления пресной воды, помимо других показателей объектов. В ответ отраслевое объединение CISPE в 2025 году предупредило, что чрезмерно жёсткие требования к контролю расходов воды могут подтолкнуть операторов перенести вычислительную инфраструктуру за пределы Евросоюза. Недавно появились данные о том, что Еврокомиссия смягчает предложенную систему экологической оценки энергоэффективности и водопользования воды ЦОД в ответ на давление отраслевых лоббистов.

В апреле появилась новость, что инвесторы требуют от Amazon, Microsoft и Google прозрачности отчётов о расходах воды и электроэнергии в ЦОД США. И немудрено — согласно мартовским данным, в жаркие дни ИИ ЦОД способны потреблять воды как весь Нью-Йорк за день. Впрочем, заботой об экологии такие требования объясняются далеко не всегда

Исследователи Synergy Research Group обновила оценку крупнейших в мире рынков ЦОД гиперскейл-класса. Всего на 20 штатов и городских агломераций в мире приходится 60 % мощностей ЦОД гиперскейл-уровня. Только на Северную Вирджинию в США и «Большой Пекин» в КНР совокупно приходится 17 %, за ними следуют американские штаты Орегон, Айова и Огайо, агломерация Даллас/Форт-Уэрт (Dallas-Fort Worth) в Техасе, Дублин в Ирландии и Шанхай в Китае.

На вторую двадцатку регионов приходится всего 19 % рынка, в эту группу входит заметно больше площадок за пределами США. Важно, что сегодня за пределами США в первой двадцатке осталось всего пять площадок, тогда как год назад речь шла о шести площадках, а два года назад — о семи. С прошлого года из списка лидеров выбыли Токио, Сидней и Южная Каролина, их заменили Индиана и Теннесси в США и Гуандун в Китае.

Преобладание американских рынков в лидерах определяется в основном двумя факторами — штаб-квартиры в США находятся у 62 % операторов-гиперскейлеров, включая крупнейших, и на страну приходится почти половина всей облачной выручки в нескольких ключевых сегментах. Предполагается, что по масштабу инфраструктуры в будущем продолжат доминировать США и Китай, хотя в рейтинге всё активнее пытаются подняться отдельные быстроразвивающиеся рынки. Прогнозы Synergy о дальнейшем росте во многом основаны на мониторинге перспективных проектов ЦОД гиперскейлеров. На сегодня компании известно о 915 таких объектах на разных стадиях планирования, строительства или оснащения оборудованием.

По данным Synergy, на выбор локаций гиперскейлерами для размещения ЦОД влияет близость к клиентам, доступность и цена земельных участков и энергии, условия для ведения бизнеса, наличие местных финансовых стимулов, а также политическая стабильность и минимальные риски ущерба от природных угроз. Подчёркивается, что на фоне стремительного роста спроса на технологии и ИИ-инфраструктуру всё важнее становится доступность энергии и способность преодолевать противодействие местных жителей, выступающих против строительства дата-центров. Это сильно влияет на географию распределения инфраструктурных проектов.

Источник изображения: Synergy Research Group

Рынки Дублина, Амстердама и Сингапура в последние два года опустились в рейтинге из-за локальных ограничений, и даже Северная Вирджиния частично утратила свои позиции. Тем временем Техас стал одним из наиболее быстро растущих рынков, его гиперскейл-мощности за год выросли на 71 % при среднемировом росте 36 %. Также быстро растут в США Индиана, Теннесси и Южная Вирджиния, Шанхай в Китае, Джохор в Малайзии, Джакарта в Индонезии.

Исследование принимало в расчёт данные об инфраструктуре ЦОД 21 крупнейшей облачной и интернет-компании, включая ключевых операторов на рынках SaaS, IaaS, PaaS, поиска, социальных медиа, электронной коммерции и игровой индустрии. Самые крупные сети ЦОД имеют облачные Amazon, Microsoft и Google. Они располагают не только ЦОД в США, но и множеством объектов в других странах. В совокупности на три эти компании приходится 57 % мировой мощности ЦОД гиперскел-уровня. За лидерами занимают позиции Meta✴, Alibaba, Tencent, Oracle, Apple, ByteDance, CoreWeave и прочие, относительно «более мелкие операторы-гиперскейлеры».

В апреле Synergy сообщала, что более половины всех мощностей ЦОД в мире приходится на гиперскейлеров, а к 2031 году они займут ⅔ рынка. На тот момент на долю крупных облачных провайдеров сейчас приходилось 48 % мировых мощностей ЦОД, из них 60 % — на собственные дата-центры, самостоятельно построенные или находящиеся в собственности гиперскейлеров. На колокейшн-ЦОД, не связанные с гиперскейлерами, приходилось всего 20 % мощности, а ещё 32 % — на корпоративные объекты, расположенные на собственных территориях бизнесов различного профиля.

Everpure (ранее Pure Storage) объявила о победе в тендере на проектирование и поставку решения для «второго из пяти крупнейших гиперскейлеров». Первым клиентом Everpure из числа гиперскейлеров стала Meta✴, с которой она заключила контракт в конце 2024 года. Everpure не стала раскрывать имя нового клиента, отметив, что более важным является то, что теперь две крупнейшие в мире инфраструктурные среды будут использовать технологию Everpure.

Ресурс Blocks & Files указал на то, что в пятёрку крупнейших провайдеров входят AWS, Azure, Google, Meta✴ и Alibaba или Oracle, поэтому, возможно, это один из них. Everpure также сообщила, что значительная часть доходов от нового контракта начнёт поступать, начиная с 2028 финансового года с нарастанием в дальнейшем.

Технология Everpure DirectFlash (DFM) позволяет гиперскейлерам развёртывать согласованную и унифицированную архитектуру на нескольких уровнях производительности в своей иерархии хранения данных. Благодаря высокой плотности, производительности и надёжности она позволяет значительно снизить эксплуатационные расходы, одновременно высвобождая жизненно важные ресурсы — электроэнергию и место в стойках — для рабочих ИИ-нагрузок, заявляет Everpure.

Аналитик William Blair Джейсон Адер (Jason Ader) отметил, что новый контракт является ещё одним важным подтверждением эффективности архитектуры DirectFlash и программно-ориентированного подхода к хранилищам гиперскейлеров: «Дифференцированная архитектура Everpure продолжает завоёвывать доверие как альтернатива традиционным конструкциям на основе SSD и HDD, при этом руководство постоянно подчёркивает преимущества DirectFlash в плане плотности, эффективности и совокупной стоимости владения по сравнению с устаревшей инфраструктурой хранения данных».

Источник изображения: Everpure

Контракт оформлен как генеральное соглашение о поставках (Master Supply Agreement), включающее ПО и компоненты, отличные от NAND. Гиперскейлер будет закупать собственные аппаратные модули, включая NAND, через свою собственную цепочку поставок. Это важный пункт, поскольку ранее Everpure как раз критиковали за невозможность контроля цен и доступности NAND, что отражается на стоимости её СХД в условиях дефицита. Кроме того, у компании есть платформа FlashBlade//EXA для ИИ/HPC-нагрузок, которая лишь частично полагается на фирменные DFM-накопители и позволяет задействовать для хранения обычные x86-узлы с традиционными SSD.

Остальные поставщики массивов All-Flash на основе SSD, за исключением IBM, используют стандартные SSD. Технология DFM от Everpure обладает большей ёмкостью, чем SSD-накопители, теперь до 300 Тбайт на модуль, и управляется на уровне системы, а не на уровне накопителя, что означает меньшую потребность в избыточной ёмкости. Для достижения целевых показателей ёмкости или пропускной способности требуется меньшее количество накопителей DFM, что означает меньшую потребность в электроэнергии.

У IBM есть собственная разработка — накопители Flash Core Module (FCM), теперь уже пятого поколения, которые используются в средах IBM FlashSystem, Elastic Storage System (ESS) и Storage Scale System (SSS). Однако их «сырая» ёмкость составляет 106,6 Тбайт на основе 176-слойной 3D NAND QLC, в то время как ёмкость обычных SSD сейчас достигает 256 Тбайт.