Из всех существующих сетевых технологий большая часть полагается на два типа устройств: сетевые адаптеры и коммутаторы, но Rockport Networks идёт дальше и предлагает отказаться от последних. В её технологии используются только пассивные оптоволоконные разветвители, в которых топология сети задается пассивными оптическим модулями.

У такого подхода есть свои достоинства, которые уже оценили некоторые разработчики суперкомпьютеров. К примеру, такая сеть позволяет обойтись существенно меньшим количеством кабелей, а производительность оказывается в ряде случаев даже выше, нежели у InfiniBand класса 200G. Список заинтересованных в технологиях Rockport пополнился Институтом вычислительной космологии (ICC) Даремского университета, который решил протестировать их в одной из итераций своей «космологической машины» (COSMA).

Пассивный разветвитель Rockport Networks. Источник: Rockport

В течение года безкоммутаторная сеть Rockport проходила проверку на тестовом кластере DINE (Durham Intelligent NIC Environment) и были получены обнадёживающие результаты, давшие в итоге этой технологии «зелёный свет» в более масштабный проект.

Источник: Durham University

Вкратце, перевод 16 узлов тестовой системы из 24 на технологии Rockport позволил существенно снизить негативное влияние «сетевых заторов» (network congestion) на время обсчёта задачи; в некоторых сценариях традиционная архитектура IB оказалась хуже почти на 30%. В связи с позитивными результатами ICC получила финансирование сразу от двух научных программ Соединённого Королевства — DiRAC и ExCALIBUR.

Адаптер Rockport NC1225: всё дело в волшебной ПЛИС. Источник: Rockport

Целью является модернизация COSMA7, кластера из 452 двухпроцессорных узлов на базе Intel Xeon Gold 5120. На первой стадии половина узлов будет переведена с использования InfiniBand на сеть Rockport, что позволит провести более масштабное сравнение технологий, причём на реальных научных задачах, а не синтетических тестах. При этом модернизации системного и прикладного ПО не потребуется, поскольку со стороны хост-системы адаптеры Rockport видны как обычные карты Mellanox ConnectX-5, а весь роутинг и обработка пакетов осуществляется уровнем выше, силами набортной ПЛИС.

Похожий эксперимент проходит в Техасском центре продвинутых вычислений (Texas Advanced Computing Center), где 396 из 8008 узлов суперкомпьютера Frontera также были переведены на использование интерконнекта Rockport Networks.

Ayar Labs —  один из пионеров в области разработки и внедрения гибридных электронно-оптических технологий, на её счету создание реального фотонного трансивера TeraPHY. Также компания получила $130 млн инвестиций на развитие коммерческой фотоники.

В список главных инвесторов Ayar входит NVIDIA, и сейчас обе компании заявили о сотрудничестве, целью которого станет разработка систем фотонного интерконнекта. Они должны стать основой для ИИ и HPC-инфраструктуры будущего, как сочетающие в себе высокую пропускную способность, низкую латентность и сверхнизкий уровень энергопотребления. При этом переход подсистем I/O на фотонику позволит использовать более длинные кабели без потери производительности, а значит, упростит и удешевит компоновку ЦОД.

Источник: Ayar Labs

Как отметил ведущий архитектор ЦОД-отдела NVIDIA, Роб Обер (Rob Ober), за прошедшее десятилетие производительность, достигнутая решениями компании в области искусственного интеллекта, возросла в миллион раз, но следующий миллион потребует отказа от медной инфраструктуры, которая уже не сможет справиться с возрастающей сложностью и энергопотреблением таких систем.

Гибридный оптоэлектронный трансивер уже воплощён в кремнии. Источник: Ayar Labs

Предсказывается, что уже к 2023 году сложность моделей машинного обучения достигнет отметки 100 трлн связей, что в 600 раз больше рекордного показателя 2021 года, и эта цифра уже выходит за рамки возможностей современных технологий. Именно для преодоления этого барьера NVIDIA и заключила стратегический альянс с Ayar Labs —  её разработки в области фотоники позволят поднять удельную пропускную способность I/O-подсистем в 1000 раз, но уровень энергопотребления при этом, напротив, сократится в 10 раз.

Конкретные сроки в анонсе, опубликованном Ayar Labs, не оговариваются, но промежуточные плоды нового союза, скорее всего, увидят свет в следующем году. Основания для такого оптимизма есть, так как рабочий прототип оптического трансивера на 1024 Тбит/с уже существует в кремнии, хотя и использует не слишком тонкий 45-нм техпроцесс.

Компания Adata Technology анонсировала твердотельные накопители серий IM2P32A8 и IM2P32A4. Изделия предназначены для применения в оборудовании корпоративного класса, в частности, в серверах.

Решения IM2P32A8 выполнены в форм-факторе M.2 2280 с габаритами 22 × 80 мм, устройства IM2P32A4 — в формате M.2 2242 с размерами 22 × 42 мм. В обоих случаях применены микрочипы флеш-памяти 3D TLC, способные хранить три бита информации в одной ячейке.

Источник изображений: Adata

Задействован интерфейс PCIe 3.0 x4 (спецификация NVMe 1.4). Заявленная скорость чтения информации достигает 3300 Мбайт/с, скорость записи — 2900 Мбайт/с.

Накопители выдерживают до 3 тыс. циклов записи/стирания данных. Вместимость достигает 2 Тбайт.

Среди прочего упомянуты средства исправления ошибок LDPC ECC и технология защиты End-to-End Data Path Protection. Об ориентировочной цене пока ничего не сообщается.

Компания Team Group сообщила о начале выпуска модулей оперативной памяти DDR5 Industrial Server Memory, предназначенных для установки в серверное оборудование. Организовано производство изделий DDR5 ECC DIMM и DDR5 R-DIMM.

Выпущенные модули обеспечивают производительность до 6400 млн пересылок в секунду (MT/s). Ёмкость достигает 128 Гбайт, а напряжение питания составляет 1,1 В.

Источник изображения: Team Group

Решения имеют встроенную интегральную схему управления питанием (PMIC) для точной передачи данных и повышения энергоэффективности. Кроме того, реализована фирменная запатентованная технология TRUST — Temperature, Robust, Unique, S.M.A.R.T., повышающая надёжность работы.

Память может использоваться в жёстких условиях — при высоких температурах, повышенной влажности, вибрациях и пр. Говорится о совместимости с платформами Intel Eagle Stream и AMD Zen4 Genoa. Информации об ориентировочной цене на данный момент нет.

Schwarz Group, материнская компания европейской сети розничных продовольственных магазинов Lidl, официально объявила о доступности сервисов своего облачного подразделения StackIT для сторонних клиентов. О планах Schwarz Group по оказанию облачных услуг сторонним ретейлерам стало известно в 2020 году после приобретения ею компании Camao IDC, специализирующейся на разработке программного обеспечения.

Сообщается, что Schwarz Group начала работу над облачным сервисом в 2018 году и запустила его для собственных нужд примерно в 2019 году. В ноябре 2021 года Schwarz Group приобрела контрольный пакет акций израильской фирмы по кибербезопасности XM Cyber. До нынешнего дня StackIT предоставляла услуги компаниям Schwarz Group, включая сети супермаркетов Lidl и гипермаркетов Kaufland, компанию по производству продуктов питания Schwarz Produktion и компанию по переработке вторичных отходов PreZero.

Источник изображения: Schwartz Group / StackIT

Помимо услуги колокейшна, StackIT предлагает ряд облачных и инфраструктурных сервисов, включая хранение данных, базы данных, вычислительные инстансы и многое другое. Компания предлагает услуги на базе объекта в австрийском Остермитинге, известного как DC10, и ЦОД в Эльхофене (Германия), известного как DC08.

«Благодаря StackIT впервые становится доступным облачное решение, которое на 100 % “Сделано в Германии” и ориентировано на высокие требования и потребности в безопасности предприятий и организаций государственного сектора», — отметил директор по данным Schwarz Digital Рольф Шуман (Rolf Schumann).

Amazon Web Services (AWS) объявила о доступности инстансов следующего поколения Amazon Elastic Compute Cloud (Amazon EC2) C7g, оптимизированных для вычислений с использованием Arm-процессоров Graviton3 собственной разработки компании.

Процессоры AWS Graviton3 обеспечивают до 25% более высокую вычислительную производительность в ресурсоёмких приложениях по сравнению с процессорами AWS Graviton2 в составе инстансов C6g. Благодаря этому клиенты могут более эффективно выполнять широкий спектр ресурсоёмких рабочих нагрузок — от веб-серверов, балансировщиков нагрузки и пакетной обработки до автоматизации проектирования электроники (EDA), высокопроизводительных вычислений (HPC), игр, кодирования видео, научного моделирования, распределённой аналитики, инференса при машинном обучении.

Источник изображения: Noah Berger/hpcwire.com

Новые инстансы C7g на базе процессоров AWS Graviton3 обеспечивают лучшее соотношение цены и производительности для широкого спектра клиентских приложений по сравнению с инстансами C6g. Процессоры AWS Graviton3 обеспечивают по сравнению с AWS Graviton2 вдвое более высокую производительность для криптографических рабочих нагрузок, до 3 раз более высокую производительность для инференса при машинном обучении и почти вдвое более высокую производительность при вычислениях с плавающей запятой для научных задач, машинного обучения и кодирования мультимедиа. Процессоры AWS Graviton3 также более энергоэффективны: они потребляют на 60 % меньше энергии при той же производительности, что у сопоставимых инстансов EC2.

Инстансы C7g первыми в облаке Amazon получили память DDR5, обеспечивающую пропускную способность на 50% выше, чем память в инстансах на базе AWS Graviton2, что позволяет повысить производительность ресурсоёмких научных приложений, таких как вычислительная гидродинамика, геонаучное моделирование и обработка сейсмических данных. Инстансы C7g также обеспечивают пропускную способность сети на 20% выше, чем инстансы C6g, для ресурсоёмких приложений, таких как балансировка сетевой нагрузки и анализ данных.

Новые инстансы C7g построены на базе AWS Nitro System. Для клиентов, стремящихся повысить производительность приложений, требующих параллельной обработки, таких как высокопроизводительные вычисления и кодирование видео, инстансы C7g в ближайшие недели получат поддержку интерфейса Elastic Fabric Adapter (EFA), который позволяет приложениям взаимодействовать напрямую с сетевыми интерфейсными картами, обеспечивая более низкую и более стабильную задержку.

Источник изображения: AWS

AWS C7g доступны как инстансы по требованию, по модели Savings Plans, а также как зарезервированные или спотовые инстансы. В настоящее время инстансы C7g доступны в облачных регионах us-east (Северная Виргиния) и us-west (Орегон). При использовании инстансов C7g клиенты платят только за объём используемых вычислений. Более подробно о C7g можно узнать по ссылке.

Компания Microsoft подала заявку на строительство специального объекта Circular Center в городке Куинси штата Вашингтон. После ввода в эксплуатацию здесь планируется перерабатывать старые серверы и компьютеры. Городские власти пошли навстречу компании, подтвердив, что проект не должен оказать значительно негативного влияния на окружающую среду.

Проект MWH90 CC предусматривает строительство здания площадью 1905 м² для переработки бывших в эксплуатации компьютеров, серверов и комплектующих. Для этого в Куинси будет расширен и доработан кампус компании, на территории которого уже имеется функционирующий ЦОД.

К 2025 году Microsoft планирует перерабатывать 90 % своего облачного оборудования, а к 2030 году этот показатель должен достигнуть 100 %. При этом в докладе за прошлый год упомянуто, что расширение инфраструктуры ЦОД и продажи Xbox привели к росту выбросов класса Scope 3 на 23 % — такие выбросы не являются прямым результатом деятельности компании, но она своей деятельностью косвенно влияет на их объёмы.

Источник изображения: beear/pixabay.com

Новый Circular Center будет очередным из специальных центров, строительство которых началось в 2020 году. В переработку там идут облачные серверы и прочее оборудование, причём некоторые компоненты могут быть использованы заново, перепроданы или перепрофилированы для использования в иных целях. Например, отдельные части могут использоваться даже в электронных игрушках и игровых системах.

В 2020 году работу начали три Circular Center в Амстердаме, Дублине и американском Бойдтоне. В компании утверждают, что она уже получила возможность заново использовать 83 % критически важных комплектующих, снизив выбросы на 145 тыс. т. В обозримом будущем планируется строительство ещё нескольких центров аналогичного назначения по всему миру — от США до ЕС и Австралии.

Изображение: ITRenew

Прочие облачные компании, включая Google, Oracle и AWS реализуют похожие проекты, причём часть бывших в употреблении комплектующих используется в инфраструктуре самих компаний, а часть продаётся на вторичном рынке. Так, только Google и только в 2020 году продала 8,2 млн уже использовавшихся компонентов. А ITRenew, известный игрок на рынке утилизации оборудования гиперскейлеров, предлагает б/у серверы для микро-ЦОД и даже для отопления. Похожие решения есть и у Qarnot.

Ранее сообщалось, что у Microsoft довольно необычный подход к защите природы. В январе появилась информация, что компания намерена вырубить более 2500 деревьев в Техасе для строительства дата-центра. В качестве компенсации компания обещала высадить более 800 новых и заплатить в фонд защиты деревьев около $1,5 млн.

Специализирующаяся на исследованиях глобального рынка телекоммуникаций исследовательская компания TeleGeography представила прогноз, согласно которому в ближайшие несколько лет в мире появятся десятки новых облачных регионов.

Сейчас лидером по числу действующих облачных зон является Азия, только в ней их насчитывается 230, причём ожидается, что свои лидирующие позиции она сохранит в обозримом будущем. Исследователи заявляют, что с 2013 года в среднем вводится в эксплуатацию по 15 облачных регионов в год, в 2019 году их появилось 28, после чего последовало временное «охлаждение» рынка и в 2021 году число новых зон достигло 18.

Источник изображения: geralt/pixabay.com

Драйверами развития новых облачных регионов предположительно станут сервисы Microsoft Azure, Google, AWS и Oracle, а в ближайшие несколько лет планируется ввести в эксплуатацию ещё порядка 50 регионов. Эксперты отрасли ожидают, что после ослабления санитарных ограничений тенденция роста числа регионов продолжится.

Дополнительно TeleGeography упомянула о трендах в ценообразовании при предоставлении облачных и WAN-сервисов. Хотя роль многопротокольной системы MPLS-коммутации продолжает снижаться, она всё ещё является критически важным компонентом многих сетей, хотя цены на неё продолжают снижаться в большинстве регионов. Так, в 2021 году сервис был доступен в 5244 городах всего мира. Самыми высокими цены были в отдалённых и развивающихся рынках вроде Йоханнесбурга, Мумбай и Сан-Паулу, в которых т. н. «точки присутствия» (PoP) имеют немногие сервис-провайдеры.

Переформатирование сетей под более активное использование облачной инфраструктуры требует увеличения ширины каналов — в городах с большим числом точек присутствия вроде Лондона, Нью-Йорка или Гонконга широкополосная связь стоит относительно недорого. Поэтому провайдеры, намеренные предоставлять международные сервисы, должны принимать во внимание необходимость точек присутствия в контролируемых ими сферах ответственности.

С более подробной информацией об облачных регионах можно ознакомиться на масштабируемой карте Cloud Infrastructure Map, а с подробным отчётом компании об облачной и WAN-инфраструктуре можно ознакомиться здесь (необходима подписка).

Компания Selectel, являющаяся специализированным поставщиком IT-решений на базе собственной сети дата-центров в Москве, Санкт-Петербурге и Ленинградской области, планирует ввести в эксплуатацию ещё один вычислительный комплекс. Новый центр обработки данных под названием «Юрловский» будет развёрнут в Москве и рассчитан на 2 тыс. серверных стоек. Дата-центр проектируется в соответствии с уровнем надёжности Tier IV. Основная ёмкость центра обработки данных будет задействована для предоставления облачных сервисов Infrastructure as a Service (IaaS).

Особенностью ЦОД станет самый большой единый машинный зал в России площадью 4500 м², в котором компания планирует разместить до 80 тыс. серверов. Общая подведённая мощность объекта составит 20 МВт, средняя мощность на стойку — 8 кВт. Selectel уже получила технические условия на подключение к ближайшему питающему центру с верхним уровнем напряжения 500 кВ, который расположен в 700 м от кампуса. Подключение будет выполнено по второй категории надёжности, то есть будет проложено две линии от независимых ячеек на подстанции, а между ними на стороне подстанции будет организован автоматический ввод резерва.

Фото: Selectel

Дата-центр «Юрловский» будет построен с применением технологии охлаждения без использования фреоновых систем, что позволит минимизировать воздействие на окружающую среду. ЦОД будет охлаждаться наружным воздухом (технология фрикулинга), а в качестве доохлаждения будут использоваться адиабатические маты. Предполагается, что эти и другие меры позволят Selectel экономить электроэнергию и занимать меньше полезной площади машинного зала. Среднегодовой коэффициент эффективности использования энергии (Power Usage Effectiveness, PUE) будет в диапазоне от 1,1 до 1,15. Таким образом, «Юрловский» станет самым «зелёным» дата-центром Selectel.

Фото: Selectel

В инфраструктуре дата-центра «Юрловский» будет задействована схема резервирования 6/5N — для каждой части на 1000 стоек будет выделено пять рабочих кластеров и один резервный. Фактически работать будут все шесть, но один можно в любой момент отключить. Кроме того, такой подход позволяет добиться физической изоляции резервируемых кластеров друг от друга. А автоматизации бесперебойной подачи питания и непрерывное охлаждение обеспечат возможность проводить любые профилактические и ремонтные работы без приостановки оказания услуг. Для поддержания связности новый ЦОД будет подключен несколькими независимым ВОЛС к MSK-IX (M9) и ЦОД «Берзарина», который уже имеется независимые подключения к нескольким IX.

Вопрос с закупкой оборудования компания намерена решать в конце текущего года, поскольку в текущей ситуации прогнозировать что-либо затруднительно. На текущем этапе Selectel занимается проектированием и выполняет общестроительные работы. Ввод объекта в коммерческую эксплуатацию запланирован на 2023 год, однако сроки могут быть скорректированы в зависимости от ситуации на рынке. Инвестиции в проект оцениваются в миллиарды рублей.

На весенней конференции GTC 2022 NVIDIA поделилась подробностями о грядущих серверных Arm-процессорах Grace Superchip и гибридах Grace Hopper Superchip, а на Computex 2022 представила первые референсные платформы на базе этих чипов для OEM-производителей и объявила о расширении программы NVIDIA Certified.

Последнее, впрочем, не означает отказ от x86-систем, поскольку программа будет просто расширена. Да и портирование стороннего и собственного ПО займёт некоторое время. Первые несколько десятков моделей серверов от ASUS, Foxconn, GIGABYTE, QCT, Supermicro и Wiwynn появятся в первой половине 2023 года. Представлены они будут в трёх категориях, причём все, за исключением одной, базируются на «сдвоенных» процессорах Grace Superchip, насчитывающих до 144 ядер.

Источник: NVIDIA

Системы серии OVX, представленной ранее, всё так же будут предназначены для цифровых двойников и Omniverse — NVIDIA продолжает наставить на том, что любое современное производство или промышленное предприятие должно быть интеллектуальным. Arm-версия OVA получит неназванные ускорители NVIDIA и DPU Bluefield-3.

Новая платформа NVIDIA CGX очень похожа на OVX — она тоже получит DPU Bluefield-3 и до четырёх ускорителей NVIDIA A16. CGX создана специального для облачных гейминга и работы с графикой.

А вот новое поколение платформы NVIDIA HGX гораздо интереснее. Оно заметно отличается от предыдущих, которые в основном представляли собой различные комбинации базовых плат NVIDIA с четырьмя или восемью ускорителями, вокруг которых OEM-партнёры строили системы в меру своих умений и фантазий. Нынешняя инкарнация NVIDIA HGX всё же несколько более комплексная, поскольку сейчас предлагается два варианта узлов, специально спроектированных для высокоплотных систем и явно ориентированных на высокопроизводительные вычисления (HPC).

Источник: NVIDIA

Первый вариант — это 1U-лезвие (до 84 шт. в стандартной стойке), которое включает один процессор Grace Superchip, до 1 Тбайт LPDDR5x-памяти с пропускной способностью (ПСП) до 1 Тбайт/с и DPU BlueField-3. Иные варианты сетевого подключения оставлены на усмотрение конечного производителя. Заявленный уровень TDP составляет 500 Вт, так что на выбор доступны системы с воздушным и жидкостным охлаждением.

Второй вариант базируется на гибридных чипах Grace Hopper Superchip, объединяющих в себе посредством шины NVLink-C2C процессорную часть с 512 Гбайт LPDDR5x-памяти и ускоритель NVIDIA H100 c 80 Гбайт HBM3-памяти (ПСП до 3,5 Тбайт/с). Помимо DPU BlueField-3 опционально доступен и интерконнект NVLink 4.0, но и здесь вендору оставлена свобода выбора. Уровень TDP для данной платформы составляет 1 кВт, но вот обойтись одним только воздушным охлаждением (а такой вариант есть) при полном заполнении стойки всеми 42-мя 2U-лезвиями будет трудно.