Amazon Web Services (AWS) нашла выход, как использовать собственные Nitro DPU K2v5/6 (EFA) в новейших стоечных системах NVIDIA GB300 NVL72, которые, как считает гиперскейлер, превосходит адаптеры NVIDIA ConnectX-7/8 по производительности. В связи с тем, что в стойках NVIDIA Oberon используются укороченные лотки высотой 1U, AWS размещает NIC в отдельной стойке JBOK, предназначенной только для сетевых карт, пишет SemiAnalysis.

Причина кроется в невозможности установить в 1U сразу девять фирменных адаптеров (8 × EFA + 1 × ENA/EBS). Для серверных систем GB200 NVL предыдущего поколения AWS выбрала вариант NVL36×2, поскольку только в этом случае использовались 2U-узлы, где достаточно места для всех NIC. Однако сдвоенная конфигурация менее эффективна, чем нативная конструкция NVL72. NVIDIA сама была не очень довольна вариантами NVL36. Meta✴, например, и вовсе «растянула» NVL36×2 на шесть стоек, чтобы обойтись воздушным охлаждением.

Источник изображения: SemiAnalysis

AWS в случае Blackwell Ultra предпочла остановиться на NVL72-варианте, а DPU вынести в отдельную стойку — всего 18 узлов высотой 2U, по 9 NIC в каждом. С узлами NVIDIA они соединены активными электрическими кабелями (AEC) и портами OSFP-XD для передачи сигналов PCIe 6.0. По словам AWS, её адаптеры лучше справляются с нагрузками, чем ConnectX-8 (RoCEv2), что отчасти спорно. В любом случае таким образом компания снижается зависимость от NVIDIA.

Источник изображения: SemiAnalysis

С точки зрения SemiAnalysis, доработка GB300 в AWS помогает устранить единую точку отказа в референсной архитектуре NVIDIA, где каждый ускоритель взаимодействует только с одним сетевым адаптером ConnectX-8, тогда как в конфигурации AWS каждый ускоритель общается с двумя NIC.

У AWS накоплен богатый опыт разработки собственного оборудования для ЦОД. Ранее компания в партнёрстве с Broadcom разрабатывала специализированные сетевые коммутаторы. Также недавно представленные ею EC2-инстансы P6-B200 и P6e-GB200 оснащены собственным сетевым стеком Elastic Fabric Adapter (EFAv4) на базе собственных контроллеров Nitro, который оптимизирует обработку сетевых пакетов и снижает задержки для высокопроизводительных приложений.

Сервис оценки и подбора подрядчиков «Рейтинг Рунета» прогнозирует, что по итогам 2025 года в сегменте коммерческих и государственных тендеров на digital и маркетинговые услуги, включая разработку и интеграцию цифровых сервисов, рекламу в цифровой среде, цифровые коммуникации, контент, брендинг и дизайн, количество проектов снизится на 3–7 %. Несмотря на это, ожидается рост общих бюджетов проектов на 5–7 %, передаёт «Коммерсантъ».

Общая сумма стартовых цен проектов указанных категорий выросла с 33,01 млрд руб. в 2023 году до 33,56 млрд руб. в 2024 году. Количество тендеров за этот же период увеличилось с 11,5 тыс. до 12 тыс. Ранее «Коммерсантъ» сообщал, что по итогам нынешнего года темпы роста рынка digital-услуг в России могут замедлиться вдвое до 10–15 %, тогда как годом ранее этот показатель составлял 29 %. Такая тенденция обусловлена в том числе сокращением затрат бизнеса на digital-решения на 5–10 % в I полугодии.

Источник изображения: Tim van der Kuip / unsplash.com

Аналитики считают, что текущее сокращение количества проектов связано с макроэкономическим давлением, в том числе с высокой ключевой ставкой ЦБ РФ, что заставляет бизнес консолидировать бюджеты. Кроме того, растёт спрос на комплексные услуги, которые оказывает один исполнитель, а не несколько. А часть заказчиков переходит к заключению прямых договоров с поставщиками, данные которых не публикуются. Ещё один фактор — внедрение ИИ, который позволяет компаниям решать часть задач самостоятельно.

Только в III квартале 2025 года гиперскейлерами арендовано больше мощностей дата-центров в США, чем за весь 2024 год. В отчёте TD Cowen указывается, что рекордный объём аренды ЦОД достиг 7,4 ГВт, а портфель будущих сделок составляет порядка 10,2 ГВт, сообщает Datacenter Dynamics. Это самый большой рост спроса за всю историю отрасли.

Совокупный объём аренды гиперскейлерами за текущий год составит приблизительно 11,3 ГВт, тогда как за весь 2024 год он составил 7 ГВт. При поквартальном учёте рост ещё заметнее — во II квартале 2025 года было арендовано всего 2 ГВт. Огромную долю рынка заняла Oracle. В III квартале она арендовала порядка 5,4 ГВт на нескольких площадках, мощности предназначены в основном для OpenAI. В TD Cowen отмечают, что Oracle и OpenAI являются основными драйверами спроса, но значительно активнее, чем раньше, ведут себя и Google, Meta✴, Microsoft, AWS, а также Anthropic.

Источник изображения: Point3D Commercial Imaging Ltd./unsplash.com

Google ведёт переговоры об аренде гигаваттных масштабов, Meta✴ ведёт переговоры об аренде гигаваттных мощностей помимо площадки в Луизиане, Anthropic активно работает над гигаваттными проектами отдельно от Amazon (AWS) и Google. Microsoft наращиваетнедостающие мощности за счёт внешних арендаторов и масштабирования облачного бизнеса. Наконец, Amazon (AWS) активно масштабирует Project Rainier.

Второе место в рейтинге TD Cowen заняла Google, которая арендовала 600 МВт только в III квартале, на третьем — Anthropic с показателем 528 МВт за квартал. В начале июня TD Cowen сообщала, что аренда ЦОД возвращается к значительным масштабам после замедления в начале 2025 года. Amazon и Microsoft отложили или отменили проекты ЦОД, но утверждали, что это не является признаком общей системной проблемы. Тем временем Oracle активно анонсирует новые запланированные мощности, в том числе — очередную облачную сделку с OpenAI на сумму $300 млрд.

Масштабный сбой в работе облака AWS в понедельник коснулся множества сервисов по всему миру во многих секторах экономики и общественной деятельности. Инцидент вызвал разговоры о зависимости пользователей от крупных облачных провайдеров из США, необходимости повышения цифрового суверенитета и диверсификации рисков, сообщает Datacenter Knowledge. В компании объявили, что причина — в «эксплуатационном инциденте» в регионе us-east-1, именно там расположен крупнейший кластер ЦОД провайдера.

Облачный регион находится в т.н. «Аллее ЦОД» в Северной Вирджинии и состоит из 158 объектов общей мощностью 2,544 ГВт. По оценкам Amazon, более 90 % компаний из рейтинга Fortune 100 используют именно облачные сервисы AWS. Сбой стал крупнейшим инцидентом в работе интернета с тех пор, как в 2024 году из-за ошибки обновления Crowdstrike из строя по всему миру вышли миллионы систем Microsoft.

По словам IDC, последний инцидент демонстрирует, как масштабные вычисления могут привести к масштабным проблемам. Хотя предприятия в целом приняли идею отказа от собственной инфраструктуры ЦОД, происшествие привлекает внимание к необходимости диверсификации рисков. Это может привести к созданию распределённых архитектур, охватывающих несколько облачных регионов в рамках пакетного предложения одного провайдера, и более широкому использованию нескольких облаков разных провайдеров одновременно.

Оригинал: xkcd.com/2347

Эксперты обеспокоены зависимостью предприятий всего мира от американских гиперскейлеров — последствия инцидента носят трансграничный характер и касаются не только клиентов одного поставщика облачных сервисов. Многие уже задаются вопросом — стоит ли сохранять зависимость государственных учреждений, от налоговых служб государство до крупных банков службам, расположенным на другом побережье Атлантического океана. Европа так и не смогла избавиться от бремени американских гиперскейлеров, которые открыто признают, что даже не могут гарантировать суверенитет данных.

Как заявляют в британской Asanti Data Centres, многие организации активно приняли концепцию публичных облаков, но сбой показал, что может случиться, когда всё построено на одном фундаменте. Проблема затронула не только структуры, напрямую использующие сервисы AWS, но и всех остальных в цепочке поставок услуг. Большинство организаций ведут дела с клиентами AWS, в результате чего речь идёт о каскадном, общесистемном ущербе.

Источник изображения: Oğuzhan Akdoğan/unspalsh.com

В IDC подчёркивают, что роль в купировании негативных эффектов от будущих инцидентов может сыграть ИИ. Хотя у AWS в целом довольно хорошая репутация среди пользователей, на устранение последствий инцидента потребовалось слишком много времени, поэтому возникают сомнения, сможет ли AWS поддерживать репутацию по мере роста бизнеса и усложнения технологий. ИИ может помочь, создавая агентов, способных заранее выявлять и устранять проблемы до того, как они негативно скажутся на клиентах.

Стоит отметить, что концентрация облачных ресурсов в одном месте может действительно крайне негативно сказаться на деятельности целых государств. Недавний пожар в южнокорейском ЦОД показывает, к каким катастрофическим последствиям для государственных услуг может привести консолидация облачных мощностей в одном месте. Более того, даже концентрация крупных ЦОД разных операторов в одном месте грозит тем, что сбой одного из них приведёт к проблемам у соседних. Особенно в случае ИИ ЦОД.

Хотя основная нагрузка при строительстве ЦОД гиперскейлеров пока ложится на США, с негативными эффектами от появления новой инфраструктуры всё чаще сталкиваются в других странах, где контроль не такой жёсткий, сообщает The New York Times. По данным Synergy Research Group, на конец июня около 60 % из 1244 крупнейших ЦОД мира находились за пределами США, не менее 575 объектов гиперскейл-класса ждут своей очереди. По мере того, как число ЦОД растёт, всё чаще случаются и перебои с водой и электричеством в Мексике и более дюжины других стран.

В Ирландии на долю ЦОД приходится более 20 % энергопотребления страны, в Чили истощаются драгоценные водоносные горизонты, в Южной Африке, где отключения света и без того были обычным делом, ситуация с электропитанием только ухудшается. Проблемы есть в Бразилии, Великобритании, Индии, Малайзии, Нидерландах, Сингапуре и Испании. При этом Google, Amazon, Microsoft и другие крупные IT-игроки не спешат раскрывать истинный уровень потребления ресурсов, работая от лица дочерних структур с ничего не значащими именами и маскируя своё участие. В то же время власти охотно предоставляют для ИИ-проектов дешёвую землю, налоговые льготы, доступ к ресурсам и закрывают глаза на «близорукость» регуляторов. Сами техногиганты говорят о создании рабочих мест, постройке собственных генерирующих мощностей и переработке сточных вод.

Источник изображения: Vitor Monthay/unsplash.com

Так, в Microsoft утверждают, что информации о вреде кампуса ЦОД в центральной Мексике неверная — воды используется очень мало, а электричества всего 12,6 МВт (≈50 тыс. местных домохозяйств). Тем временем в регионе наблюдаются «блэкауты», не хватает электричества и питьевой воды, что, например, привело к вспышке гепатита близ объекта Microsoft — перебои с водоснабжением не позволяют обеспечить минимальный уровень гигиены, в чём активисты винят власти, не готовые отказываться от многомиллионных инвестиций, из которых на поддержку населения не выделяется ничего.

В мексиканском штате Керетаро (Querétaro), где находятся ЦОД Microsoft, AWS и Google, уже наблюдаются длительные перебои с водой и электричеством, эти ресурсы всё менее доступны населению. Отключения, в числе прочего, нарушают работу медицинского оборудования, ведут к порче продуктов и лекарств, вынуждают покупать пресную воду. По мнению жителей, проблемы усугубились с запуском ЦОД Microsoft. Компании и власти заявляют об использовании новейших технологий вроде систем охлаждения с рециркуляцией воды, но жители относятся к ним скептически, полагая, что лучшие ресурсы всё равно достанутся бизнесу.

В Мексике Microsoft действует при посредничестве местного оператора Ascenty, а общую мощность ЦОД в ближайшие годы планируется увеличить вчетверо — до 1,5 ГВт. При этом власти подписывают с бизнесом соглашения о неразглашении деталей контрактов. Впрочем, строительство ЦОД и не думает останавливаться, а власти большинства стран в основном пытаются ускорить реализацию проектов в сельских районах. Чиновники Мексики, Бразилии, Малайзии, ОАЭ и Саудовской Аравии считают проблемы с ресурсами «платой за развитие», которая нужна для привлечения IT-гигантов и их ЦОД.

Источник изображения: Brandon Lane/unsplash.com

В этом отношении показателен пример Ирландии, ставшей за короткое время одним из ключевых рынков ЦОД, что привело к противоречию — стремительный рост энергоёмких объектов плохо вяжется с «зелёной» повесткой. Ожидается, что в ближайшие годы на дата-центры будет приходиться уже треть энергопотребления страны. Движение против ЦОД начало набирать силу с 2021 года, когда местные активисты, включая публичных персон и экологические группы, с переменным успехом начали оспаривать проекты ЦОД в судах. Фактически в Дублине и окрестностях с 2022 года действует мораторий на возведение новых кампусов. В качестве компромисса власти готовы разрешить операторам ЦОД строить собственные электростанции на ископаемом топливе и частные ЛЭП.

При этом группы экоактивистов из разных стран (Испании, Франции и др.) координируют деятельность, делятся данными о выигрышной тактике и даже ресурсами. Масштабы проблемы действительно велики. По имеющимся прогнозам, к 2035 году дата-центры будут потреблять столько же энергии, сколько Индия целиком, а даже единственный крупный ЦОД способен «выпивать» тысячи кубометров воды ежедневно.

Компания Nebius объявила о доступности платформы Nebius AI Cloud в своем новом ЦОД в Израиле, запущенном на площадке в Модиине (Modiin). Сообщается, что это один из крупнейших в стране ИИ-кластеров и первый на архитектуре NVIDIA Blackwell. Кластер включает 4 тыс. ускорителей в составе HGX B200, объединённых интерконнектом NVIDIA Quantum InfiniBand, и предоставляет доступ к стеку NVIDIA AI Enterprise, в том числе к микросервисам NVIDIA NIM и инструментам управления ИИ-агентами NeMo.

Запуск в Израиле последовал за аналогичными развёртываниями Nebius в Европе и США. Новая площадка объединяет передовую аппаратную и программную инфраструктуру, включая усовершенствованные системы охлаждения, системы управления энергопотреблением и механизмы управления данными, разработанные для интенсивных рабочих ИИ-нагрузок.

Nebius — партнёр NVIDIA по облачным технологиям (NCP). «Запуск Nebius крупнейшего в Израиле облака ИИ на базе Blackwell знаменует собой начало развития инфраструктуры ИИ в стране», — сообщил директор представительства NVIDIA в Израиле, отметив, что благодаря суверенному доступу к передовым вычислительным, сетевым технологиям и ПО, израильские компании и разработчики смогут внедрять инновации, развёртывать и масштабировать следующее поколение агентного и физического ИИ.

Источник изображения: Nebius

Nebius входит в число первых партнёров NCP, получивших сертификат Exemplar Cloud для учебных рабочих нагрузок на базе NVIDIA H100, продемонстрировав производительность в пределах 95 % от референсной архитектуры NVIDIA. Платформа Nebius AI Cloud получила сертификацию SOC2 Type II, включая HIPAA, и обеспечивает сквозное шифрование, а также полное соответствие стандартам защиты данных GDPR и CCPA.

Unitirreno Submarine Network совместно с Alcatel Submarine Networks (ASN) и Elettra Tlc («материнской» компанией Unitirreno) начали коммерческую эксплуатацию подводной кабельной системы Unitirreno Open Cable System, связывающей Сицилию (Мадзаара-дель-Ваалло), Сардинию (Ольбия), Рим и Геную. Кабель использует технологию XBU 24FP компании ASN — это первый в мире действующий вариант на 24 оптоволоконных пары с ретрансляторами, обеспечивающий проектную пропускную способность 624 Тбит/с, сообщает Converge Digest.

Подобные характеристики обеспечиваются при связи от Сицилии до Северной Европы через Геную и Милан. Система укрепит позиции Италии как ключевого цифрового хаба, связывающего Европу, Африку и Ближний Восток. Разработанная ASN и проложенная кораблём Teliri компании Elettra сеть включает четыре основных маршрута: Мадзаара–Генуя, Мадзаара–Рим, Генуя–Рим и Рим–Ольбия. Каждая из 24 оптоволоконных пар в основной магистрали Мадзаара-Генуя может обеспечивать более 26 Тбит/с. Общая длина системы составляет 1156 км.

Источник изображения: Unitirreno

По словам создателей, кабельная система позволит удовлетворить растущие потребностей облачных вычислений, ИИ и приложений, активно использующих данные, пустив трафик в обход перегруженных традиционных маршрутов. По данным Unitirreno, система создаёт основу для инноваций, сотрудничества и роста в регионе. В ASN добавляют, что новый проект позволяет пересмотреть стандарты подключений и отвечает растущему спросу на фоне стремительного развития ИИ.

Как заявляет Converge, активация Unitirreno знаменует важные изменения пропускной способности кабельной инфраструктуры в Средиземноморье, обеспечивая и дополнительную надёжность. Система стала конкурентом стратегического марсельского хаба в передаче межконтинентального трафика. 24-волоконная технология ASN с ретрансляторами задаёт новую планку для региональных систем с высокой пропускной способностью, дополняя другие крупные проекты вроде 2Africa и Medusa.

Теперь Италия предлагает альтернативные цифровые маршруты с низкой задержкой между Европой, Африкой и Ближним Востоком, а Unitirreno укрепляет региональное телекоммуникационное разнообразие в регионе и позиционирует «Тирренский коридор» как критическую инфраструктуру для ИИ и облачных проектов.

Дата-центры намерены стандартизировать использование более крупных 21″ стоек вместо обычных 19″ к 2030 году. По данным Omdia, гиперскейлеры и производители серверов полностью поддерживают такой переход, а корпоративные ЦОД всё ещё будут придерживаться старого типоразмера, сообщает The Register.

По некоторым данным, 19″ стойки (EIA-310) ведут свою «родословную» от релейных шкафов на железных дорогах — там подобный стандарт появился ещё до того, как его приняли телефонные компании, а позже и IT-индустрия. Meta✴ (Facebook✴) ещё в 2012 году столкнулась с ограничениями старого формата и основала OCP для того, чтобы организовать разработку и принятие более эффективных индустриальных стандартов.

По прогнозам аналитиков, на более крупный формат, продвигаемый OCP, к концу десятилетия придётся более 70 % поставок, поскольку он активно внедряется крупными вендорами вроде Dell и HPE — одними из лидеров в гонке по выпуску ИИ-оборудования. По данным Omdia, на сегодня все крупнейшие сервис-провайдеры, включая Microsoft, Amazon, Meta✴, Google, ByteDance, Huawei и Oracle уже перешли на использование 21″ стоек в своих ЦОД. Так, Huawei ещё в 2019 году объявила, что её дата-центры будут опираться на 21″ стандарт.

Источник изображения: Meta✴

Преимуществами более крупных стоек является лучшая циркуляция воздуха и возможность устанавливать более крупные массивы вентиляторов, что улучшает охлаждение. Кроме того, такие стойки допускают установку более крупных модулей питания и трубок СЖО, что важно для ИИ-серверов. При этом сохраняется совместимость с 19″ решениями. В Omdia ожидают, что полностью укомплектованные стойки вроде NVIDIA DGX GB200 NVL72 станут фактическим стандартом.

Источник изображения: Omdia

Кроме того, Dell и HPE продвигают предложенную OCP модульную серверную архитектуру Data Center Modular Hardware System (DC-MHS), которая позволяет по отдельности обновлять IO-модули и остальное «железо». Omdia прогнозирует, что на долю ИИ-серверов будет приходиться всё большая часть расходов на серверы в целом. Уже в 2024 году речь шла о 66 %, причём ключевые игроки рынка, включая гиперскейлеров и облачных ИИ-провайдеров, поддерживают именно 21″ стандарт, поэтому победа OCP над другими стандартами стала лишь вопросом времени.

Технический центр Интернета (ТЦИ), оператор национальных доменных зон .RU, .РФ и .SU, сообщил о проведении плановой замены ключевых элементов инфраструктуры на оборудование отечественного производства. Инициатива является частью системной работы по повышению технологической независимости и устойчивости российского сегмента интернета.

Отмечается, что приоритетами ТЦИ остаются обеспечение бесперебойной работы доменной системы, её защищённость от внешних факторов и полный контроль над технологической цепочкой. Для достижения этих целей оператор использует серверные решения российского разработчика телекоммуникационного и IT-оборудования «Булат» (входит в группу компаний «Ростелеком»).

Серверы «Булат» включены в единый реестр российской радиоэлектронной продукции, соответствуют требованиям ТЦИ и, по заверениям оператора доменных имён, прошли процедуру детального длительного тестирования перед вводом в эксплуатацию.

«Переход технологической инфраструктуры IT- и телеком-отрасли на отечественное оборудование свидетельствуют о зрелости российского рынка IT-решений. Таким образом формируется замкнутая экосистема для критической инфраструктуры, что знаменует собой новый этап в развитии Рунета», — говорится в заявлении «Ростелекома».

Серверное оборудование «Булат» (источник изображения: opk-bulat.ru)

Телекоммуникационный оператор «Мегафон» сообщил о реализации проекта по импортозамещению комплексов CGNAT (Carrier‑grade NAT), позволяющих справиться с проблемой ограниченного числа IPv4-адресов на фоне роста абонентской базы.

Речь идёт о продуктах российских компаний Research & Development Partners (RDP, ООО «РДП.РУ») и TrafficSoft (ООО «НФВер»), позволяющих нескольким абонентам использовать один публичный IPv4-адрес. Такой подход позволяет операторам справиться с дефицитом IPv4-адресов и осуществить плавную миграцию на IPv6-инфраструктуру.

В отличие от используемого оборудования иностранных производителей, отечественные платформы CGNAT представлены в формате программных решений, которые могут разворачиваться на физических, так и на виртуальных серверах. Это позволяет легче и менее затратно масштабировать сетевую инфраструктуру оператора под рост трафика. Кроме того, переход на российские разработки минимизировал риски отказов в технической поддержке и блокировок со стороны зарубежных компаний, с которыми телеком‑отрасль столкнулась в последние годы.

Источник изображения: trafficsoft.ru/cgnat

«Переход на отечественные платформы CGNAT — это не просто ещё один шаг к импортозамещению, а осознанная инвестиция в устойчивость и развитие сети. Российские программные комплексы позволяют гибко распределять трафик между узлами сети и обеспечивают готовность к росту трафика, абонентской базы и количества предоставляемых услуг. Более того, мы планируем поэтапно заменить весь парк устаревшего зарубежного оборудования, выполняющего функцию трансляции адресов, на отечественные решения, исключив внешние риски и усиливая независимость нашей инфраструктуры», — говорится в заявлении «Мегафона».