Глава Alphabet и Google Сундар Пичаи (Sundar Pichai) подтвердил, что компания проектирует ЦОД, потребляющие более 1 ГВт. По данным Datacenter Dynamics и других источников, возможным источником энергии для ЦОД, по мнению, Пичаи могут стать малые модульные реакторы (SMR).

Впрочем, сам бизнесмен, выступая в питтсбургском кампусе Университета Карнеги-Меллона не сообщал, планирует ли компания применять какие-либо SMR. При этом он упомянул, что Google была одной из первых компаний, поставивших цель добиться круглосуточного обеспечения ЦОД «зелёной» энергией к 2030 году. По его словам, это было до бума ИИ и теперь IT-гигант работает над гораздо более крупными дата-центрами.

По его словам, ещё два года назад нельзя было даже представить, что такие проекты вообще будут рассматриваться. В краткосрочной перспективе это может вызвать целый ряд трудностей. При этом Пичаи так и не сказал, означают ли грядущие изменения, что компания не сможет достигнуть своей цели к 2030 году. Ранее уже сообщалось, что многим гиперскейлерам вряд ли удастся добиться обещанных результатов.

Источник изображения: American Public Power Association/unsplash.com

В марте сообщалось, что Google формирует команду для разработки новой «безуглеродной» стратегии в свете стремительного роста спроса на электричество. Теперь Пичаи подчеркнул, что в средне- и долгосрочной перспективе это не будет проблемой, поскольку планируются крупные капиталовложения в новые «зелёные» источники. Также он сослался на проект Google в Неваде, где компания получает энергию из геотермальных источников.

По его словам, большие средства направляются в разработку и строительство малых модульных реакторов. Как заявил Пичаи, глядя на поток капиталов и инноваций, используемых для создания новой энергетики, он сохраняет оптимистичный настрой в отношении перспектив энергоснабжения.

Комментарии Пичаи сделаны на фоне крупных «атомных» анонсов. Основатель Oracle Ларри Эллисон (Larry Ellison) заявил, что компания намерена построить кампус ЦОД на 1 ГВт с тремя SMR. Microsoft «оживит» АЭС Three Mile Island, она будет использоваться исключительно для питания дата-центров компании. Наконец, на прошлой неделе появилась информация о том, что AWS нанимает главного инженера для команды, которая займётся SMR и другими проектами в области атомной энергетики.

В Сети появилась дополнительная информация о планах Google на ввод в эксплуатацию подводного кабеля Proa. Datacenter Dynamics напоминает, что впервые данные о нём обнародовали в апреле 2024 года — цифровая магистраль должна связать Гуам и Содружество Северных Марианских островов (CNMI) с Японией.

Отраслевой обозреватель Филипп Дево (Philippe Devaux) сообщил в LinkedIn, что Google, в данном случае действующая под «аватаром» Starfish Infrastructure, начнёт строительство кабельной системы Proa в июле 2025 года, а в эксплуатацию она должна быть введена уже в I квартале 2026 года.

Согласно поданной в текущем месяце заявке, каждый сегмент кабеля получит по 16 оптоволоконных пар с минимальной проектной пропускной способностью 25 Тбит/с. Кабель будет состоять из трёх сегментов: первый будет связывать город Сима в Японии с разветвителем в Филиппинском море, второй и третий свяжут разветвитель с посадочными станциями на Гуаме и островом Тиниан на Марианских островах.

Источник изображения: Google

По данным Submarine Cable Networks, на Гуаме расположены посадочные станции ещё 11 кабелей, включая Atisa, AAG, AJC, JGA-N и Tata TGN-Pacific, а также, например, Mariana-Guam. Туда же придут кабели Google Bulikula и Halaihai, которые, дотянувшись до Фиджи, будут связаны с кабелями Google Honomoana и Tabua. Таким образом, Google сформирует в Тихом Океане кольцо кабелей, охватывающих практически весь регион.

Чтобы повысить надёжность сети, ещё один кабель сегодня прокладывается в интересах Google компанией NEC по маршруту Тайвань — Филиппины — США (TPU). Он также получит ответвление до Северных Марианских Островов и в итоге свяжет Тайвань, Филиппины, Гуам и США. Эту кабельную систему должны ввести в эксплуатацию в 2025 году.

Компания Google выделит $10 млн стартапу Holocene на захват CO₂ из атмосферы по технологии Direct Air Capture (DAC) с последующей утилизацией. Сделка является рекордно выгодной в индустрии. За захват каждой тонны углекислого газа Google заплатит всего $100. Министерство энергетики США считает, что именно такой уровень цен позволит стать технологии массовой. Правда, как уточняет Datacenter Dynamics, непосредственная реализация проекта должна стартовать в начале 2030-х годов.

Впрочем, столь низкая цена в любом случае была бы невозможной без вмешательства американских властей. Они предоставляют налоговую льготу 45Q, благодаря которой компании, утилизирующие углекислый газ, могут рассчитывать ещё на $180/т.

Источник изображения: Marcin Jozwiak/unsplash.com

Google оплатит авансом, хотя в этом есть некоторый риск. Отсутствует гарантия, что Holocene вообще добьётся своих целей. Так, Running Tide, которой Microsoft заплатила за удаление из атмосферы 12 тыс. тонн CO₂ в 2023 году, в 2024-м прекратила своё существование. В Google заявляют, что немедленная уплата средств позволит добиться амбициозных масштабных целей уже в среднесрочной перспективе.

Источник изображения: Holocene

Holocene пропускает воздух сквозь специальный «водопад» с добавлением аминокислоты, которая связывает CO₂. Полученный состав смешивается с гуанидином для формирования твёрдой кристаллической массы. Потом аминокислота высвобождается и отправляется в начало цикла, а твёрдое вещество слегка нагревается, высвобождая чистый углекислый газ, который можно хранить или использовать по своему усмотрению. Гуанидин также отправляется в начало цикла. В начале 2030-х годов Holocene рассчитывает захватить и хранить 100 тыс. тонн CO₂.

Ранее в этом году Google обещала потратить $35 млн на проекты по захвату углекислоты. Кроме того, компания участвует в инициативе Frontier Climate, предусматривающей покупки «кредитов» на захват CO₂. Стартап 280earth, выросший из проекта Google X, намерен разрабатывать собственные мощности по захвату углекислого газа в Орегоне, вероятно, с использованием тепла дата-центров самой Google.

В Google объявили, что после специального планирования и анализа, наконец, сделан очередной шаг на пути строительства второго дата-центра в Латинской Америке. По данным Datacenter Dynamics, речь идёт об объекте в уругвайском Канелонесе (Canelones). Объявлено, что в проект инвестируют $850 млн, но спецификации площадки пока неизвестны.

IT-гигант приобрёл 30 га в уругвайской зоне свободной торговли Parque de las Ciencias в мае 2021 года, а впервые планы создания кампуса были анонсированы ещё в 2020 году. Изначально в поданных местным властям документах сообщалось о намерении построить ЦОД при посредничестве дочернего подразделения Eleanor, план получил название Project Teros. В ноябре прошлого года Google скорректировала планы строительства.

Сомнения в целесообразности возникли у многих в связи с вероятным использованием компанией больших объёмов чистой воды на фоне сильных засух в стране. Например, по этой причине пришлось пересмотреть проект в Чили. Изначально в рамках проекта планировалось использовать до 7,6 млн литров питьевой воды ежедневно, пересмотренный проект не такой масштабный и в основном предусматривает использование систем воздушного охлаждения.

Источник изображения: Pedro Slinger/unsplash.com

В Google сообщают, что сегодня управляют 28 кампусами ЦОД в 11 странах. Свой первый дата-центр в Латинской Америке IT-гигант запустил в Чили в 2015 году. Кроме того, компания управляет облачным регионом в Сан-Паулу (Бразилия). Компания также работает над прокладкой подводного кабеля Firmina, который соединит побережье Южной Каролины в США, курортный Лас-Тонинас в Аргентине (Las Toninas), Прайя-Гранде в Бразилии (Praia Grande) и Пунта-дель-Эсте в Уругвае. Google уже является оператором кабеля Tannat совместно с Antel Uruguay — он связывает те же локации.

Примечательно, что пока никто из крупных облачных провайдеров не объявлял о планах запуска объектов в Уругвае. По данным DataCenterMap, в стране всего семь колокейшн-объектов. При этом все управляются местными бизнесами, а шесть расположены в столице — Монтевидео, лишь один за её пределами — в Мальдонадо (Maldonado).

Планы Google по расширению сети дата-центров в районе Дублина так и не будут реализованы. По данным The Register, власти Ирландии посчитали, что проект нового ЦОД недостаточно экологичен. Неизвестно, будет ли компания обжаловать отказ. Недавно Google признала, что вместо снижения выбросов парниковых газов только наращивает их — с 2019 года выбросы выросли на 48 %. В компании объясняют это ростом сети ЦОД из-за большого спроса на ИИ-решения, но просят не переживать.

Решение было принято на прошлой неделе, но информация о нем появилась только сейчас. Тем временем совет муниципального округа Южный Дублин аннулировал разрешение сроком на 10 лет на строительство дата-центра Google площадью 72 400 м² с сопутствующей инфраструктурой на территории Grange Castle Business Park недалеко от ирландской столицы. В окрестностях Дублина фактически действует мораторий на новые ЦОД, за исключением тех, которые получили разрешение ранее.

Источник изображения: Gregory DALLEAU/unsplash.com

Основной причиной отказа стало негативное воздействие проекта на окружающую среду. Власти констатировали, что предложение Google неприемлемо из-за недостаточной емкости национальной электросети и нехватки источников возобновляемой энергии непосредственно площадки. Ирония в том, что местные регуляторы считают последний показатель недостаточным, если он ниже 100 %. При этом Microsoft разрешили построить новый ЦОД Grange Castle Business Park, разместив по соседству 170-МВт газовую электростанцию, которую, судя по всему, посчитали достаточно экологичной.

Совет также выразил недовольство недостаточной прозрачностью текущих PPA-соглашений, связанных с бизнесом в Ирландии, а также отсутствием подключения к ближайшей сети центрального отопления. Кроме того, Google предоставила слишком мало деталей о том, как проект повлияет на энергоснабжение после ввода в эксплуатацию в 2027 году. Также было заявлено, что предложение Google не соответствует местным правилам, связанным с сохранением и защитой «зеленой» инфраструктуры и экологическим требованиям совета. Иными словами, компания была признана недостаточно «зеленой» для строительства очередного крупного ЦОД вблизи ирландской столицы.

НКО National Trust For Ireland поддержала решение властей в своем письме, отметив, что новый объект стал бы источником эквивалента дополнительных 224 250 тонн CO₂ ежегодно, что составляет 0,44 % от всех выбросов CO₂ в стране. Такой рост загрязнений не соответствует принятым в Ирландии экологическим обязательствам, а правила строительства ЦОД в стране следовало бы уже пересмотреть. Отмечается, что строительство дата-центров ранее почти не контролировалось, и сейчас ЦОД фактически потребляют 21 % всей электроэнергии в стране, тогда как в 2015 году этот показатель составлял лишь 5 %.

В огромной лаборатории в штаб-квартире Google в Маунтин-Вью (Калифорния, США) установлены сотни серверных стоек с ИИ-ускорителями TPU (Tensor Processing Unit) собственной разработки, с помощью которых производится обучение больших языковых моделей, пишет ресурс CNBC, корреспонденту которого компания устроила небольшую экскурсию.

Первое поколение Google TPU, созданное ещё в 2015 году, и представляет собой ASIC для обработки ИИ-нагрузок. Сейчас компания использует такие, хотя и более современные ускорители для обучения и работы собственного чат-бота Gemini. С 2018 года TPU Google доступны облачным клиентам компании. В июле этого года Apple объявила, что использует их для обучения моделей ИИ, лежащих в основе платформы Apple Intelligence.

TPU v1 (Источник изображений здесь и далее: Google)

«В мире есть фундаментальное убеждение, что весь ИИ, большие языковые модели, обучаются на (чипах) NVIDIA, и, конечно, на решения NVIDIA приходится львиная доля объёма обучения. Но Google пошла по собственному пути», — отметил гендиректор Futurum Group Дэниел Ньюман (Daniel Newman). Благодаря расширению использованию ИИ подразделение Google Cloud увеличило доход, и в последнем квартальном отчёте холдинг Alphabet сообщил, что выручка от облачных вычислений выросла на 29 %, впервые превысив $10 млрд за квартал.

Google была первым провайдером облачных вычислений, создавшим кастомные ИИ-чипы. Лишь спустя три года Amazon Web Services анонсировала свой первый ИИ-ускоритель Inferentia, Microsoft представила ИИ-ускоритель Azure Maia 100 в ноябре 2023 года, а в мае того же года Meta✴ рассказала об семействе MTIA. Однако лидирует на рынке генеративного ИИ компания OpenAI, обученная на ускорителях NVIDIA, тогда как нейросеть Gemini была представлена Google спустя год после презентации ChatGPT.

В Google рассказали, что впервые задумались о создании собственного чипа в 2014 году, когда в руководстве решили обсудить, насколько большими вычислительными возможностями нужно обладать, чтобы дать возможность всем пользователям поговорить с поиском Google в течение хотя бы 30 с каждый день. По оценкам, для этого потребовалось бы удвоить количество серверов в дата-центрах. «Мы поняли, что можем создать специальное аппаратное обеспечение, <…> в данном случае тензорные процессоры, для обслуживания [этой задачи] гораздо, гораздо более эффективно. Фактически в 100 раз эффективнее, чем было бы в противном случае», — отметил представитель Google.

С выходом второго поколения TPU в 2018 году Google расширила круг выполняемых чипом задач, добавив к инференсу обучение ИИ-моделей. Процесс создания ИИ-ускорителя не только отличается высокой сложностью, но и требует больших затрат. Так что реализация таких проектов в одиночку не по силам даже крупным гиперскейлерам. Поэтому с момента создания первого TPU Google сотрудничает с разработчиком чипов Broadcom, который также помогает её конкуренту Meta✴ в создании собственных ASIC. Broadcom утверждает, что потратила более $3 млрд в рамках реализации совместных проектов.

В рамках сотрудничества Google отвечает за собственно вычислительные блоки, а Broadcom занимается разработкой I/O-блоков, SerDes и иных вспомогательных компонентов, а также упаковкой. Самы чипы выпускаются на TSMC. С 2018 года в Google трудятся ещё одни кастомные чипы — Video Coding Unit (VCU) Argos, предназначенной для обработки видео.

Что касается TPU, то в этом году клиентам Google будет доступно шестое поколение TPU Trillium. Более того, им станут доступны и первые Arm-процессоры Axion собственной разработки. Google выходит на этот рынок с большим отставанием от конкурентов. Amazon выпустила первый собственный процессор Graviton в 2018 году, Alibaba Yitian 710 появились в 2021 году, а Microsoft анонсировала Azure Cobalt 100 в ноябре. Все эти чипы основаны на архитектуре Arm — более гибкой и энергоэффективной альтернативе x86.

Энергоэффективность имеет решающее значение. Согласно последнему экологический отчёту Google, с 2019 по 2023 год выбросы компании выросли почти на 50 %, отчасти из-за увеличения количества ЦОД для ИИ-нагрузок. Для охлаждения ИИ-серверов требуется огромное количество воды. Именно поэтому начиная с третьего поколения TPU компания использует прямое жидкостное охлаждение, которое только теперь становится практически обязательным для современных ИИ-ускорителей вроде NVIDIA Blackwell.

Google намерена построить за FJ$200 млн ($89,4 млн) собственный дата-центр на Фиджи. По данным Datacenter Dynamics, в недавнем видео представитель местного правительства объявил, что телеком-услуги компании обеспечат «серьёзные возможности» для превращения страны в региональный IT-хаб в Тихом океане. Точное местоположение и характеристики будущего ЦОД не раскрываются, но говорится, что объектов такого класса на островах нет.

Также было объявлено, что Google протянет к архипелагу четыре подводных интернет-кабеля. Остров будет подключен к Сети с помощью линии Bulikula, связывающей Фиджи и Гуам, кабельной системе South Pacific Connect Interlink (от Фиджи до Французской Полинезии), а также кабеля Tabua, связывающего Австралию, Фиджи и США. Все три кабеля будут готовы к работе к 2026 году, а о четвёртом кабеле пока ничего не известно. Ранее также сообщалось о планах дотянуть до Фиджи SMART-кабель TAM TAM после 2026 года.

Источник изображения: Louise Smith/unsplash.com

До инвестиций Google Фиджи имела подключение лишь к одной кабельной системе — Southern Cross Next. Впрочем, остров уже довольно служил подобием регионального хаба — после подводной катастрофы в 2022 году и повреждения связывавшего Фиджи и Королевство Тонга кабеля последнее надолго осталось без стабильной интернет-связи.

Компания Google объявила о выпуске собственного процессора для своих ЦОД. В основу новинки, получившей имя Axion, легла архитектура Arm, что ставит её в один ряд с Amazon Graviton, Alibaba Yitian и Microsoft Cobalt.

Это не первый процессор, разработанный Google: c 2015 года компания успела создать пять поколений ИИ-ускорителей Tensor Processing Units (TPU), а в 2018 она представила процессор Video Coding Unit (VCU) Argos для транскодирования видео. Но Axion стал первым чипом Google, который подпадает под определение «процессор общего назначения». При его создании компания сделала упор не только на энергоэффективность, но и на высокий уровень производительности, достаточный для использования в современных серверах.

Источник изображений: Google

В основу Axion легли Armv9-ядра Neoverse V2 (Demeter). Этот же дизайн используется в AWS Graviton4 и NVIDIA Grace. К сожалению, архитектурных подробностей Google пока не раскрывает, известно лишь, что ядра Neoverse V2 работают совместно с фирменными контроллерами Titanium. Последние отвечают за работу с сетью, защиту и разгрузку IO-операций при работе с блочным хранилищем Hyperdisk, то есть чем-то напоминают AWS Nitro. При этом Google вложилась в SystemReady Virtual Environment (VE), чтобы упростить перенос нагрузок на новые чипы как для себя, так и для пользователей облака.

Если верить разработчикам, на момент анонса Google инстансы на базе Axion минимум на 30 % производительнее инстансов на базе самых быстрых Arm-процессоров других вендоров, а по сравнению с сопоставимыми по классу x86-процессорами преимущество может достигать и 50 % при 60 % выигрыше в энергоэффективности. Судя по всему, Axion ранее был известен под кодовым именем Cypress. А ещё один Arm-процессор Google Maple, который, по слухам, являлся наследником почивших Marvell ThunderX, в серию, видимо, не пошёл.

Сама компания уже начала переводить на Axion сервисы BigTable, Spanner, BigQuery, Blobstore, Pub/Sub, Google Earth Engine и YouTube Ads. Ряд клиентов и партнёров Google уже оценили Axion по достоинству. Виртуальные машины с новыми процессорами будут доступны в ближайшие месяцы. Они же будут доступны и в Kubernetes Engine, Dataproc, Dataflow, Cloud Batch и т.д.

Чилийский суд пересмотрел уже полученное Google разрешение на строительство в стране ЦОД за $200 млн. По данным Datacenter Dynamics, дата-центр планируется построить в столице Чили — Сантьяго. Суд предписал гиперскейлеру пересмотреть положения заявки, приняв во внимание масштабные климатические изменения и истощение водных ресурсов чилийской столицы.

В постановлении предписывается оценить потенциал Центрального водоносного горизонта Сантьяго и принять во внимание возможную доработку систем охлаждения серверов. В Чили и, в частности, в Сантьяго в течение 15 лет продолжается беспрецедентная засуха, из-за чего серьёзно пострадало водоснабжение столицы — в 2022 году было введено нормирование воды, а ранее в этом месяце в результате «рекордного» пожара погибли минимум 112 человек, а тысячи лишились мест проживания.

Google заявила, что уже внесла изменения в заявку на строительство, предусматривающие использование воздушного охлаждения. В декабре 2023 года AWS тоже получила разрешение властей на строительство кампуса ЦОД в Сантьяго, но в этом случае, видимо, никаких проблем не было.

Источник изображения: Jesus Fernandez/unsplash.com

Схожая ситуация наблюдается и в соседнем Уругвае, который тоже страдает от засухи. Местная оппозиция буквально восстала против плана Google построить ЦОД на юге страны, поскольку в результате судебного разбирательства выяснилось, что охлаждающим установкам ЦОД понадобится 7,6 млн литров питьевой воды ежедневно. В Google заявляют, что уругвайский проект находится лишь на стадии подготовки и техническая команда IT-гиганта активно работает над ним при поддержке властей.

Холдинг Alphabet сообщил результаты работы в IV квартале и 2023 году, завершившемся 31 декабря. Выручка облачного подразделения Google Cloud составила около $9,2 млрд, увеличившись год к году на 25,66 %. Что примечательно, подразделение сработало с операционной прибылью в размере $864 млн, в то время годом ранее у него были убытки в $186 млн.

Выручка всего Alphabet в IV квартале составила $86,31 млрд по сравнению с $76,048 млрд годом ранее. Выручка за весь 2023 год — $307,394 млрд, что значительно превышает результат 2022 года, равный $282,836 млрд. Чистая прибыль холдинга выросла в 2023 году до $73,795 млрд с $59,972 млрд годом ранее, отчасти благодаря решению компании продлить срок службы серверов и сетевого оборудования.

Alphabet впервые продлил срок службы своего оборудования в 2021 году, увеличив продолжительность работы серверов с трёх до четырёх лет, а сетевого оборудования — с четырёх до пяти. В 2023 году Alphabet вновь продлил срок эксплуатации оборудования, на этот раз — до шести лет. Благодаря этому только в IV квартале 2023 года расходы компании на амортизацию оборудования упали на $983 млн, а чистая прибыль увеличилась на $765 млн. За весь год амортизация оборудования Alphabet снизилась на $3,9 млрд, а чистая прибыль увеличилась на $3 млрд.

Изображение: Google

При этом компания вложила значительные средства в новую инфраструктуру. В IV квартале общие капитальные затраты составили $11 млрд, что, по словам президента и главного инвестиционного директора Alphabet и Google Рут Порат (Ruth Porat), было обусловлено «инвестициями в техническую инфраструктуру, причём самый крупный компонент — серверы, за которыми следуют ЦОД». В предыдущем квартале капзатраты составили $7,6 млрд. Резкое увеличение капзатрат обусловлено «перспективами создания уникальных приложений ИИ для пользователей, рекламодателей, разработчиков, облачных корпоративных клиентов и правительств во всем мире, а также возможностями долгосрочного роста, которые они предлагают».

Порат добавила, что компания будет придерживаться этой политики и в 2024 году. «Мы ожидаем, что капитальные затраты в 2024 году будут значительно больше, чем в 2023 году», — отметила она. Порат также подчеркнула, что фактором роста Google Cloud Platform (GCP) является ИИ. Гендиректор Сундар Пичаи (Sundar Pichai) заявил, что компания продолжит инвестировать в инфраструктуру, как в ЦОД, так и в вычислительную технику, чтобы поддержать рост возможностей ИИ-технологий.

Изображение: Google

Подразделение Google Cloud снова стало самым быстрорастущим сегментом. После значительного замедления роста с +28 % год к году во II квартале до +22 % в III квартале рост облака вновь ускорился до +26 %. Более того, в этот раз ускорение темпов роста было сильнее, чем у AWS и Azure. Рост доходов от облачных технологий вновь ускорился на 4 п. п. Также резко выросла операционная маржа Google Cloud — последовательно на 6 п.п. до 9 %. Компания объяснила замедление темпов роста в III квартале проведением оптимизации рабочей нагрузки. В ходе нынешнего отчёта Сундар Пичаи сообщил, что этот вопрос «в основном был проработан».

Темпы роста Google Cloud по-прежнему опережают рынок: по оценкам Synergy Research Group, общемировой прирост рынка облаков составил +20 % в годовом исчислении до $74 млрд в IV квартале, ускорившись с 18 % в годовом исчислении в III квартале. Доминирует Amazon (31 % рынка), за ним следуют Microsoft (24 %) и Google (11 %). Большая тройка занимает 67 % рынка. Причём Microsoft и Google нарастили свои доли, а AWS — снизила.