Проект Open19 объявил о проведении ребрендинга и трансформации в структуру Sustainable and Scalable Infrastructure Alliance (SSIA). В рамках реорганизации председатель правления Open19 Закари Смит (Zachary Smith) уйдёт с занимаемой должности.

Инициатива Open19 была анонсирована в 2016 году социальной сетью LinkedIn (заблокирована на территории РФ за нарушение правил хранения персональных данных российских пользователей). Проект нацелен на снижение стоимости владения оборудованием и оптимизацию энергозатрат. Вместе с тем он не настолько широко распространён как OCP (Open Compute Project).

Источник изображения: SSIA

В официальном заявлении говорится, что инициатива Open19 ориентирована на создание открытого стандарта, подходящего под любой 19″ серверный шкаф. В 2021 году организация Open19 присоединилась к Linux Foundation, крупнейшей в мире экосистеме open source. На фоне развития проекта Open19 использование нового бренда и формирование альянса SSIA, как ожидается, поможет ускорить внедрение инноваций в дата-центрах и на периферии.

Говорится, что после трансформации господин Смит продолжит активно участвовать в деятельности SSIA. Вместе с тем в должность председателя правления альянса вступит технический директор Equnix Май Труонг (My Truong). Он помогает в развитии спецификации Open19 V2, которая включает в себя стандарт жидкостного охлаждения, собственное решение питания на 48 В и другие технологии.

Компания ChinData, которая скоро перейдёт в полную собственность Bain Capital, представила набор полнофункциональных модульных продуктов для крупных дата-центров. По данным DataCenter Dynamics, он включает всевозможные элементы, от интегрированных систем энергоснабжения до готовых зданий.

Новые продукты представлены в ходе мероприятия Data Center New Technology Development Forum на конференции 2023 China Computing Conference в Китае. В компании подчёркивают, что продукты предназначены для удовлетворения спроса крупных строителей ЦОД в новую эпоху генеративного ИИ (AIGC).

Значительная часть применяемых технологий поставляется партнёрами. Так, в прошлом году ChinData представила «первую в мире безводную систему охлаждения», которая на поверку оказалось решением Vertiv Liebert DSE для фрикулинга. В этом году речь зашла о безмасляных компрессорах на магнитной подушке, которые, похоже, тоже уходят корнями к Vertiv. В случае с ChinData речь идёт о двухфазной системе охлаждения X-Cooling Maglev на таких компрессорах. Также применяются и другие технологии охлаждения, за управление которыми отвечает специальный ИИ.

Источник изображения: ChinData

Модульная система X-PrePower 3.0 включает блоки питания и распределения энергии с эффективностью 98,5 %. В ChinData подчеркнули, что такие блоки выгоднее немодульных и занимают на 20 % меньше места. Более того, время доставки снижается с двух месяцев до одной недели. Наконец, платформа Kunpeng обеспечивает эксплуатацию, управление, мониторинг и контроль новых модульных решений.

В итоге новый комплекс решений позволяет формировать стойки мощностью до 35 кВт. Упрощённая конструкция с повышенной надёжностью, по данным компании, способна обеспечить годовой показатель Cooling Load Factor (CLF) на уровне 0,08 на севере Китая и 0,15 в Малайзии.

Коммерческий директор Intel Кристоф Шелл (Christoph Schell) уведомил сотрудников о выделении управления продаж AWS, Google, Microsoft и другим особо крупным игрокам в отдельную структуру. Как сообщает CRN, подразделение Global Solutions and Services решено сформировать после того, как топ-менеджер по глобальным продажам Райан МакКарди (Ryan McCurdy) покинул свой пост, став вице-президентом Lenovo в североамериканском регионе. Серверное подразделение Intel продолжает терять выручку и терпеть убытки, а AMD тем временем отбирает у неё долю рынка.

В своём послании группе SMG, ответственной за продажи, маркетинг и коммуникации, её глава и коммерческий директор Intel сообщил, что компании необходимы инновации на только технологическом уровне, SMG тоже должна быть инновационной в освоении рынков. При этом команда МакКарди, который провёл в Intel более 23 лет, обеспечивала около половины из $60 млрд годовой выручки компании. В связи с уходом топ-менеджера Intel разделяет управление крупнейшими клиентскими аккаунтами между двумя подразделениями, подведомственными SMG.

Источник изображения: Intel

За продажи Dell, HP и Lenovo будет отвечать Грег Эрнст (Greg Ernst). Ведение дел с крупнейшими облачными клиентами Intel в лице AWS, Microsoft и Google перейдёт к группе Global Solutions and Services, а основной фокус будет сделан на предоставлении клиентам максимальной ценности с учётом конкретных потребностей. Группу возглавит Дэвид Меффе (David Meffe) — ветеран продаж Intel, которому временно поручили продажи в Network and Edge Group (NEX). Последняя перейдёт в подчинение Global Solutions and Services. Новый глава NEX пока не назначен.

Источник изображения: Intel

Специальная команда будет создана и для формирования стратегии SMG, параллельно будет вестись поиск её главы, а подразделение Transformation Program войдёт в её состав и продолжит управление критически важными трансформациями бизнеса. Планируются и другие изменения. При этом программный бизнес Intel, как ожидается, сохранит собственную маркетинговую команду и софтверные продукты по-прежнему будут продаваться отдельно. Продажи ПО и сбыт SaaS продолжит возглавлять Тахер Бехбехани (Taher Behbehani).

Китайские IT-гиганты начали массовые закупки ускорителей NVIDIA, стремясь обеспечить развитие собственной ИИ-инфраструктуры. Как сообщает Financial Times, только в этом году местным клиентам будут поставлены соответствующие чипы на $1 млрд и ещё на $4 млрд — в следующем.

В Китае только ByteDance уже владеет 10 тыс. ускорителей NVIDIA, а ещё почти 70 тыс. чипов A800 должны быть поставлены в следующем году. По данным Financial Times, один лишь этот заказ оценивается в $700 млн. Сопоставимые закупки сделали или готовы сделать и другие техногиганты из Поднебесной.

В связи с тем, что США ввели ограничения на поставку своих продуктов и технологий в КНР, покупателям из Поднебесной пришлось согласиться на очевидно дискриминационные предложения — для страны выпускаются урезанные варианты ускорителей в лице A800 и H800. Не исключено, что США и их союзники и дальше будут ужесточать экспортную политику, поэтому местные компании принялись активно закупать хотя бы A800 — пока не запретили поставлять и их, что невероятно усложнит обучение больших языковых моделей (LLM).

Источник изображения: NVIDIA

По данным DataCenter Dynamics, прошлым вечером акции NVIDIA упали на 4 % на фоне опасений, что регуляторы США прибегнут к новым ограничительным мерам в отношении китайских компаний и организаций. Дело в том, что президент США уже издал указ, предусматривающий в отношении Китая дальнейшие ограничения, связанные с технологиями ИИ, квантовыми вычислениями и экспортом технологий, связанных с производством чипов.

Производители прибегают к различным уловкам для того, чтобы обойти американские санкции. Так, Intel изменила модельный ряд Xe и представила ИИ-ускоритель Habana Gaudi 2 для китайских покупателей. Готовит особые ускорители и AMD.

Американский транснациональный инвестиционный банк TD Cowen опубликовал отчёт с прогнозом рекордных показателей на рынке аренды ЦОД в 2023 году в связи с высоким спросом на ИИ-сервисы. Согласно данным TD Cowen, за последние 90 дней было подписано договоров об аренде ЦОД на общую мощность 2,1 ГВт, что связано с ростом популярности ИИ-приложений.

Сообщается, что за последние три месяца Google подписала сделку на аренду ЦОД мощностью 600 МВт в Техасе, в то время как Microsoft подписала сделку на аренду на 420 МВт в Лисбурге (штат Вирджиния), сделку в Далласе на аренду оборудования на 360 МВт и в Чикаго на 300 МВт. По оценкам TD Cowen, мощность ЦОД сторонних компаний в США составляет около 10 ГВт.

Один из операторов сообщил TD Cowen, что объём аренды за последние 90 дней вырос с 500 МВт до более чем 1 ГВт. Гиперскейлеры также начали оформлять предварительную аренду мощностей за 2–3 года до сдачи объекта, тогда как в прошлом году это делали за год-полтора до ввода ЦОД в эксплуатацию. Те, кто сможет предоставить ёмкости в течение 2 лет и менее, теперь могут повышать цены.

«На наш взгляд, это отражает растущую нехватку мощностей ЦОД, поскольку гиперскейлеры стремятся защитить свой доступ к будущим мощностям», — сообщает TD Cowen. Это также привело к тому, что теперь тоже заранее арендуют мощности за полгода до сдачи объекта, поскольку им приходится конкурировать с гиперскейлерами в борьбе за доступ к ограниченным ресурсам. Поскольку рабочие нагрузки ИИ менее чувствительны к задержкам, их можно размещать в любом регионе страны. Например, NVIDIA планировала арендовать 50 МВт мощностей в Хиллсборо (Орегон), но когда поняла, что это сделать не удастся, сообщила операторам, что готова арендовать ёмкость в любом месте.

Источник изображения: Marc PEZIN / Unsplash

Если в 2022 году цены на аренду ЦОД выросли из-за удорожания их строительства, то сейчас они увеличились из-за ограниченного предложения и высокого спроса. Банк также отметил проблемы с цепочками поставок. По его данным, один оператор недавно разместил заказ на генераторы Caterpillar мощностью 3 МВт, срок поставки которых составит 130 недель (~2,5 года), примерно такой же срок поставки и у трансформаторов. И эти сроки, как ожидается, увеличатся, поскольку волна договоров аренды ЦОД, подписанных за последние несколько месяцев, вскоре трансформируется в новые заказы на поставку оборудования.

Согласно данным Synergy Research Group, количество крупных дата-центров, управляемых гиперскейлерами, приближается к 900, и на них сейчас приходится 37 % всей ёмкости ЦОД в мире. Примерно половина этой ёмкости размещена в собственных ЦОД гиперскейлеров, вторая половина — в арендованных.

С учётом того, что на колокейшен-ёмкости, которые не относятся к гиперскейлерам, приходится 23 % от мировой ёмкости ЦОД, получается, что на долю обычных ЦОД приходится всего 40 %. Это резко контрастирует с тем, что было пять лет назад, когда их доля составляла почти 60 %. По оценкам Synergy Research Group, в ближайшие пять лет на гиперскейлеров будет приходиться более половины всех мощностей ЦОД, а на локальные — менее 30 %.

При этом общая мощность всех ЦОД будет продолжать неуклонно расти, главным образом за счёт гиперскейлеров, которые практически удвоят ёмкость своих объектов в течение следующих пяти лет. В то время как доля локальных ЦОД в общей ёмкости будет снижаться более чем на два п.п. в год, фактическая мощность локальных ЦОД уменьшится незначительно. Доля колокации в общей ёмкости останется относительно постоянной.

Источник: Synergy Research Group

Synergy Research Group отметила, что 10 лет назад предприятия ежегодно тратили более $80 млрд на аппаратное и программное обеспечение своих собственных ЦОД, инвестируя менее $10 млрд в зарождающиеся сервисы облачной инфраструктуры. Сейчас же расходы на локальные ЦОД растут в среднем всего на 2 % в год, тогда как расходы на облачные сервисы быстро росли, увеличиваясь в среднем на 42 % ежегодно и достигнув $227 млрд в 2022 году.

По мере того как предприятия радикально пересматривали свои инвестиции в ИТ и сокращали расходы на собственные ЦОД, ведущие провайдеры облачных услуг быстро создавали крупные глобальные сети дата-центров гиперскейл-класса. Дальнейшему росту гиперскейлеров способствовало быстрое развитие более ориентированных на потребителя цифровых сервисов, таких как социальные сети, электронная коммерция и онлайн-игры.

Более того, в то время как компании сохраняли на прежнем уровне или медленно увеличивали расходы на оборудование для ЦОД, всё большая доля этого оборудования перемещалась на колокейшн-площадки. По оценкам аналитиков, корпоративные ЦОД не исчезнут в ближайшее время, но всё больше и больше будут уступать по масштабам гиперскейлерам и колокейшн-провайдерам.

Данные Synergy Research Group по гиперскейлерам основаны на анализе работы ЦОД и деятельности 19 крупнейших мировых компаний, предоставляющих облачные и интернет-услуги, включая крупнейших операторов *aaS, поиска, социальных сетей, электронной коммерции и игр. Данные по колокации и аренде ЦОД Synergy Research Group собраны на основе отчётов по более чем 230 компаниям.

Облачная площадка Google Cloud объявила о приёме на работу Криса Вондерхаара (Chris Vonderhaar) — бывшего главы отдела проектирования, строительства и эксплуатации дата-центров Amazon Web Services (AWS). О том, что Вондерхаар покинул AWS, стало известно немногим более месяца назад.

Вондерхар присоединился к Amazon в 2010 году. В последние годы занимал пост вице-президента сети ЦОД AWS. Помимо развития инфраструктуры дата-центров, он курировал инициативы облачного гиганта в области устойчивого развития, включая инвестиции в возобновляемые источники энергии. Как теперь стало известно, Крис Вондерхаар возглавит подразделение, отвечающее за цепочки поставок и работу Google Cloud.

Вместе с тем Урс Хёльцле (Urs Hölzle), который был восьмым по счёту сотрудником Google и руководил проектированием первых дата-центров компании, уходит в отставку. Хёльцле, проработавший в корпорации почти 24 года, сказал, что сосредоточится на предоставлении консультационных услуг, а также на выполнении некоторых технических работ, в частности, связанных с ИИ. В рамках перестановки в руководящем составе вице-президент по инженерным вопросам Google Cloud Бен Трейнор Слосс (Ben Treynor Sloss) начнёт подчиняться непосредственно Томасу Куриану (Thomas Kurian) — генеральному директору Google Cloud.

Источник изображения: Google

AWS, в свою очередь, переманила к себе Рэйджин Скиллерн (Raejeanne Skillern) на должность вице-президента и главного директора по маркетингу (CMO). Скиллерн проработала в Intel с 2002 по 2019 год. Перед уходом из компании она занимала должность вице-президента и отвечала за взаимодействие с облачными провайдерами. На новом месте она будет отвечать за развитие AWS, в том числе за направление ИИ. Примечательно, что позиция CMO в AWS не была занята с сентября 2022 года.

Хотя многие компании считают облако лучшим выбором для обучения и запуска больших приложений ИИ, лишь небольшая часть существующей облачной инфраструктуры на данный момент имеет соответствующие вычислительные мощности, пишет The Wall Street Journal (WSJ). «Сейчас существует довольно большой дисбаланс между спросом и предложением», — сообщил Четан Капур (Chetan Kapoor), директор по управлению продуктами в подразделении AWS EC2. Ниди Чаппелл (Nidhi Chappell), генеральный менеджер Azure AI Infrastructure, отметила наличие «неутолимого» спроса на запуск больших языковых моделей (LLM).

Однако основная часть текущей облачной инфраструктуры не была создана для запуска таких больших и сложных систем. Облако позиционировалось как удобная альтернатива локальным серверам, которую можно легко масштабировать под свои цели с оплатой по факту использования. Большая часть современного облачного пространства состоит из серверов с CPU общего назначения, предназначенных для одновременного выполнения нескольких рабочих нагрузок. И гораздо меньше имеется GPU-серверов и кластеров, оптимизированных для ИИ и больших рабочих нагрузок. При этом AWS, Google, Meta✴ и Microsoft уже увеличили срок эксплуатации имеющегося оборудования с трёх–четырёх до шести лет.

Источник изображения: Google

По словам Капура, оптимизированная для ИИ-нагрузок инфраструктура составляет лишь небольшой процент от общего объёма облачных ресурсов компании, хотя темпы её роста гораздо выше, чем у других сегментов. Капур сообщил, что в течение следующих 12 мес. компания развернёт несколько ИИ-кластеров. Microsoft Azure и Google Cloud Platform заявили WSJ, что тоже работают над тем, чтобы сделать ИИ-инфраструктуру большей частью своего парка. Вместе с тем в Microsoft отметили, что не собираются отказываться от серверов общего назначения, которые по-прежнему ценны для компаний.

А вот Dell ожидает, что высокая стоимость облачных вычислений может подтолкнуть компании к локальному развёртыванию систем. «Существующие экономические модели, в первую очередь, публичной облачной среды, не были оптимизированы для того типа спроса и уровня активности, который мы увидим, когда люди перейдут на ИИ-системы», — заявил технический директор Dell Джон Роес (John Roese). По его словам, в локальной среде компании смогут сэкономить на расходах на сеть и хранение данных. С этим не согласны облачные провайдеры, утверждающие, что у них есть доступные по цене предложения, и что в долгосрочной перспективе on-premise системы обойдутся дороже в связи с необходимостью обновления оборудования.

HPE и вовсе строит собственный публичный облачный сервис для обучения моделей ИИ на базе суперкомпьютера, который будет доступен во второй половине 2023 года. «Он специально создан для крупномасштабных сценариев использования ИИ», — заявил Джастин Хотард (Justin Hotard), исполнительный вице-президент и глава сегмента HPC & AI. Впрочем, поставщики оборудования сходятся во мнении, что ИИ-индустрия всё ещё находится на начальном этапе, и что в конечном итоге решение может быть гибридным, когда только часть вычислений будет выполняться в облаке.

По оценкам аналитиков Synergy Research Group, к концу II квартала 2022 года число дата-центров гиперскейлеров превысило 800 шт., а к концу 2026 года их станет в полтора раза больше. Причём расти будет не только количество таких ЦОД, но и их мощность. При этом 53 % ёмкости ЦОД гиперскейлеров приходится на США, а оставшаяся доля практически поровну поделена между Европой, Китаем и остальным миром.

Наиболее крупные игроки на этом рынке — «большая тройка» облачных провайдеров (Amazon, Google, Microsoft). У каждой из этих компаний имеется более 130 дата-центров, причем не менее 25 в каждом из трёх основных регионов, Североамериканском, Азиатско-Тихоокеанском и Европейском. По мощности дата-центров лидируют компании Amazon, Google, Microsoft, Facebook✴, Alibaba и Tencent. Всего же в исследовании Synergy Research Group учитывались дата-центры 19 крупнейших компаний, оказывающих облачные и иные интернет-услуги.

Источник: Synergy Research Group

По мощности дата-центров лидируют компании Amazon, Google, Microsoft, Facebook✴, Alibaba и Tencent. При этом, как и прежде, более трети мощностей в США приходится на один-единственный штат — Вирджинию, которая обгоняет по этому показателю Европу и Китай. Здесь находится так называемая Аллея дата-центров, охватывающая округи Лаудон (Loudoun), Принс-Уильям (Prince William) и Фэрфакс (Fairfax). ЦОД в основном концентрируются вокруг городов Эшберн (Ashburn), Стерлинг (Sterling), Манассас (Manassas) и Шантийи (Chantilly).

Источник: Cushman & Wakefield Research

Суммарная ёмкость ЦОД в штате достигла 1,7 ГВт. В частности, Amazon именно здесь размещает значительную часть своих ЦОД. Другими крупными игроками на локальном рынке являются Microsoft, Meta✴, Google, ByteDance. Столь привлекательной для операторов ЦОД Вирджиния стала в силу доступности площадей и энергии, развитой инфраструктуры, а также особенностей местного законодательства, в том числе налоговых послаблений. Правда, теперь местные жители жалуются на «катастрофический шум» от дата-центров, а возможностей энергосети стало не хватать.

Что касается других регионов, то в Европе ведущими рынками для гиперскейлеров остаются Ирландия и Нидерланды, где в последнее время также наметился кризис — обе страны больше не рады крупным игрокам, которые один за другим отменяют или приостанавливают проекты по созданию и развитию ЦОД. Китайский рынок остаётся относительно изолированным, поскольку он включает по большей части дата-центры местных IT-гигантов: Alibaba, Tencent и Baidu. В целом же аналитики прогнозируют, что в течение следующих пяти лет важность ключевых на текущий момент рынков ЦОД несколько снизится.

Жители Северной Вирджинии всё более и более недовольны распространению дата-центров гиперскейл-класса и готовы активно противостоять их строительству. По данным DataCenter Dynamics, вслед за жителями округа Принс-Уильям (Prince William), жалующихся на невыносимый уровень шума ЦОД Amazon, обитатели округа Фокир (Fauquier) потребовали от властей запретить строительство дата-центра той же компании, которая за последний десяток лет вложила в местные ЦОД более $35 млрд.

Примечательно, что Северная Вирджиния десятилетиями является едва ли не крупнейшим хабом для строительства дата-центров в мире, последовательно привлекающим новые компании, объекты и инвестиции. Изначально ЦОД концентрировались преимущественно в округе Лаудон, а теперь распространяются на территорию округов Калпепер (Culpeper), Фокир и Принс-Уильям, жители которых начали вести организованную борьбу с инициативами IT-гигантов и местных властей.

Фото: Taylor Vick / Unsplash.com

В наиболее «пострадавшем» округе Лаудон предложили новые правила зонирования для дата-центров, определяющих, где будущие ЦОД можно строить так, чтобы не побеспокоить местных жителей. Кроме того, предложено пересмотреть экологические стандарты строительства и допустимого уровня шума. Ожидается, что в определённых местах будет прекращено и одобрение строительства ЦОД в ускоренном порядке.

Жители округа Калпепер подали в суд, требуя аннулировать разрешение на перезонирование и развитие ЦОД Amazon. В округе Фокир Amazon уже купила более 16 га земли, подала заявку на строительство нового дата-центра и договорилась с местной энергосбытовой компанией Dominion Energy. Изначально местные жители протестовали против строительства 230-кВ линий электропередач над их домами, но потом поняли, что они вообще не понадобятся, если дата-центра не будет.

Местных жителей беспокоит не только экология и комфортность окружающей среды, но и экономика — скупка земли для ЦОД поднимает её цены. Кроме того, всё чаще задаётся вопрос, почему налоги для жителей не падают по мере развития дата-центров. О полном отказе от ЦОД речь не идёт, поскольку они обеспечивают около трети местных налоговых поступлений.