Компания Aligned представила новую систему жидкостного охлаждения DeltaFlow~, которая позволяет увеличить плотность размщения вычислительных мощностей 300 кВт на стойку, сообщил ресур Datacenter Dynamics.

DeltaFlow^~ — это готовое решение, поддерживающее текущие и будущие технологии жидкостного охлаждения, включая прямое охлаждение direct-to-chip с CDU, охлаждение с использованием теплообменника на задней дверце (Rear-door Heat Exchanger, RDHx) и иммерсионное охлаждение. Решение опирается на систему с замкнутым контуром без использования наружного воздуха или воды. По словам Alidned, новая СЖО позволяет клиентам по-максимуму использовать современные чипы и ускорителя, сокращая время выхода на рынок, затраты и риски.

Фото: Aligned

DeltaFlow^~ также интегрируется с технологией воздушного охлаждения Delta³ (Delta Cube) без изменений в подаче электроэнергии или существующей температуры в машинных залах. Delta³ вместо традиционного холодного коридора использует вентиляторы и теплообменники, расположенные непосредственно за стойками и подключённые к водяному контуру, уходящему к чиллерам. Delta³ позволяет добиться плотности до 50 кВт на стойку.

Aligned стала одной из последних компаний, анонсировавшей платформу для оборудования высокой плотности, основанное на жидкостном охлаждении. Ранее в этом месяце Stack представила решение с использованием погружного охлаждения, которое позволяет поддерживать мощность 300 кВт или выше на стойку. Летом прошлого года CyrusOne анонсировала новую архитектуру ЦОД для ИИ-нагрузок, где тоже используется погружное охлаждение и тоже можно получить 300 кВт на стойку.

Тогда же Digital Realty запустила услугу колокации с поддержкой размещений до 70 кВт на стойку, а в декабре Equinix объявила о планах по расширению поддержки передовых технологий СЖО в значительной части своих ЦОД, хотя и не указала предельную плотность. DataBank также переработала конструкцию машинных залов для поддержки размещений высокой плотностью с использованием жидкостного охлаждения.

Компания Güralp Systems Ltd, по сообщению ресурса Datacenter Dynamics, проложила в Ионическом море в 30 км от побережья Катании на Сицилии (Италия) инновационный подводный кабель SMART протяжённостью 21 км. Решение предназначено для мониторинга сейсмической активности.

Кабели SMART (Science Monitoring and Reliable Telecommunications — научный мониторинг и надежные телекоммуникации) предусматривают установку датчиков в подводные оптоволоконные повторители для сбора данных об окружающей среде на дне океана.

Система разработана компанией Güralp в партнёрстве с Национальным институтом геофизики и вулканологии (INGV) для итальянского проекта InSEA SMART Cable: Wet Demonstrator Project. Задача заключается в измерении сейсмического риска у побережья Сицилии. Инициатива InSEA финансируется Министерством исследований Италии и управляется INGV.

Источник изображений: Güralp

Цель проекта — изучение возможности размещения сейсмометров и датчиков мониторинга окружающей среды внутри и вокруг корпусов ретрансляторов традиционных подводных оптоволоконных интернет-кабелей. При этом одним из главных условий является сохранение научной ценности данных, собираемых такими приборами.

Кабельная система SMART содержит три измерительных ретранслятора, расположенных на расстоянии 6 км друг от друга. Каждый из них оснащён сейсмометром Certimus, акселерометром Fortimus, а также наружным блоком приборов, который содержит манометр абсолютного давления и датчик температуры.

Кабель SMART спроектирован таким образом, чтобы для его укладки могло использоваться стандартное оборудование. Он был проложен в декабре 2023 года на глубине около 2000 м. Компания Güralp уже начала сбор научных данных. Ожидается, что такая информация поможет в прогнозировании высоты цунами в регионе, а также позволит сократить время предупреждения.

Одна из крупнейших в мире инвестиционных компаний BlackRock объявила о заключении соглашения по покупке инфраструктурного инвестиционного фонда Global Infrastructure Partners (GIP). В результате слияния, как отмечается, будет создана «ведущая платформа для инфраструктурных инвестиций».

Сумма сделки составляет $12,5 млрд. Из них $3 млрд придётся на денежные средства, оставшаяся часть — 12 млн акций BlackRock. Ожидается, что слияние будет завершено в III квартале 2024 года при условии получения необходимых разрешений со стороны регулирующих органов.

Источник изображения: CyrusOne

Фонд GIP, основанный в 2006 году, управляет клиентскими активами на сумму более $100 млрд. Особое внимание уделяется энергетике, транспорту, водоснабжению и отходам, а также цифровым направлениям. К последним относятся оператор ЦОД CyrusOne и Vantage Towers — подразделение Vodafone. Кроме того, ранее GIP предоставлял кредиты Vantage Data Centers. Последняя вскоре получит $6,4 млрд от DigitalBridge и Silver Lake.

Среди других инвестиций GIP — аэропорты Гатвик, Эдинбург и Сидней, Suez (водоснабжение и отходы), Pacific National и Italo (ж/д транспорт), порт Мельбурна, а также несколько крупных платформ возобновляемых источников энергии, включая Clearway, Vena, Atlas и Eolian.

После закрытия сделки объединённая компания будет владеть инфраструктурными активами на сумму около $150 млрд — от рынка экспорта сжиженного природного газа в США до услуг по очистке сточных вод во Франции. Объединённую инфраструктурную платформу возглавит команда менеджеров GIP во главе с Байо Огунлеси (Bayo Ogunlesi) и четырьмя партнёрами-учредителями.

Публичные облака очень популярны, но не всегда в должной мере отвечают поставленным целям и задачам компании. В то же время, классическая серверная инфраструктура дорога в содержании, хлопотна в настройке и не всегда безопасна — не в последнюю очередь из-за фрагментированности программных и аппаратных архитектур, уходящей корнями в далёкое прошлое.

Компания Oxide Computer заявила, что разработанная ею интегрированная платформа должна вернуть компьютерным системам нового поколения холизм, присущий самым ранним вычислительным решениям, когда аппаратное и программное обеспечение создавалось совместно и с взаимным учётом особенностей.

Разлад, по мнению Oxide, начался в этой сфере давно — с появлением BIOS, отделившей «железо» от системного ПО. В дальнейшем этот разрыв только нарастал, как и степень закрытости компонентов вкупе со всё большим и большим количеством слоёв абстракций.

Источник изображений здесь и далее: Oxide Computer

Появление UEFI лишь усугубило эту проблему. Причём речь здесь не только о прошивках: можно вспомнить SMM и интеграцию в процессоры «вспомогательных ядер», обслуживающих I/O-подсистемы, но полностью скрытых от системного ПО. По мнению Oxide, такой подход представляет серьёзную угрозу безопасности, поскольку со стороны «железа» операционной системе доступно всё меньше информации об истинных аппаратных возможностях и ресурсах сервера.

Появление BIOS с открытым кодом проблемы не решает — вспомогательные аппаратные компоненты сегодня не просто слишком сложны, но и работают под управлением проприетарных прошивок, а информации в открытом доступе о них крайне мало. Крупные гиперскейлеры борются с этой фрагментацией путём создания собственных, уникальных решений. Oxide Computer же решила распространить этот подход на традиционный корпоративный рынок.

В своих новых системах компания отказалась не только от традиционных прошивок BIOS и UEFI, но и от использования закрытых BMC и сервисных процессоров, равно как и блоков Root-of-Trust (RoT). Вместо них используются чипы STM32H753 и LP55S28, работающие под управлением специально разработанной для этих целей операционной системы Hubris, полностью открытой, написанной на языке Rust.

Полностью избавиться от проприетарности на платформе AMD невозможно, поскольку Platform Security Processor (PSP) отвечает за старт и инициализацию процессора и памяти. Но вот дальнейший процесс загрузки управляется не BIOS/UEFI, а фирменной открытой ОС Helios, часть которой «живёт» в SPI-памяти. Helios является своего рода наследницей illumos, восходящей ещё к OpenSolaris. Стек включает гипервизор bhyve, Propolis для работы с VMM, а также Omicron для управления всей платформой в целом на уровне стойки. Естественно, для подсистемы хранения задействованы ZFS-пулы.

Результатом работ Oxide стала платформа под названием Cloud Computer. Для неё не просто было разработано уникальное программное обеспечение — практически с нуля была создана и вся аппаратная часть, от вычислительных узлов до сетевых коммутаторов и подсистемы питания. Об этом компания рассказывает в своём блоге. При этом практически вся программная часть этого программно-аппаратного комплекса открыта, но вот аппаратную часть кому-то со стороны просто так повторить вряд ли удастся.

Oxide позиционирует Cloud Computer в качестве универсальной платформы для частных облаков, обеспечивающей единство архитектуры и удобства конфигурирования с гибкостью и простотой использования публичных облаков. По словам компании, развёртывание облака на базе Oxide Cloud Computer занимает считаные часы, что является заслугой в том числе и уникальной архитектуры новинки. Фактически для первичного запуска системы достаточно подключить питание и сеть.

Платформа (фактически готовая стойка) может включать в себя 16, 24 или 32 вычислительных узла на базе 64-ядерных процессоров AMD EPYC 7713P (Milan) с 512 или 1 Тбайт RAM, что даёт до 2048 ядер и до 32 Тбайт памяти на стойку. Каждый узел имеет 10 U.2-отсеков и комплектуется NVMe SSD объёмом 3,2 Тбайт, так что суммарный объём хранилища может достигать 931,5 Тбайт. В качестве интерконнекта используется 100GbE, в состав системы входит два программируемых коммутатора на базе Intel Tofino 2 (12,8 Тбит/с). В них также применяется ПО Oxide, написанное на P4.

Подсистема хранения использует OpenZFS для построения распределённого блочного хранилища и реализует проактивную защиту данных, быстрое снятие снимков, их преобразование в дисковые образы и обратно, а также многое другое. Шифрование данных обеспечивается на всех уровнях, а за безопасность и хранение ключей отвечает фирменный RoT-контроллер, упомянутый ранее.

Полка питания содержит 6 БП (5+1), максимальная потребляемая стойкой мощность не превышает 15 кВт. Питание у системы трёхфазное. Высота стойки Oxide составляет 2354 мм, ширина — стандартные 600 мм, глубина — 1060 мм. Платформа может генерировать почти 61500 BTU/час и нуждается в соответствующем воздушном охлаждении. Система работоспособна при температурах окружающей среды в пределах от +2 до +35 °C при относительно влажности не выше 80 %. Масса стойки составляет до 1145 кг.

Президент Республики Казахстан Касым-Жомарт Токаев на заседании Высшего Евразийского экономического совета (ЕАЭС), по сообщению ТАСС, выступил с предложением проложить новую волоконно-оптическую линию связи по маршруту Россия — Казахстан — Иран.

По словам Токаева, Казахстан выступает за всестороннее развитие сотрудничества в сфере IT. Одним из направлений работ может стать строительство интернет-канала для подключения к существующим международным линиям, проходящим вдоль побережья Индийского океана. Например, по соседству пройдёт самый протяжённый в мире подводный интернет-кабель 2Africa.

Рассматриваемый проект, как ожидается, «позволит не только создать альтернативный маршрут транзитного трафика на евразийском пространстве, но и значительно усилить позиции Евразийского экономического союза (ЕАЭС) в логистике данных на глобальном уровне». Предполагается, что новая ВОЛС будет способствовать расширению взаимодействия в сфере цифровых технологий и ИИ. О возможной стоимости проекта и сроках его реализации пока ничего не сообщается.

Источник изображения: pixabay.com

В проект могут быть вовлечены китайские партнёры в рамках инициативы «Цифровой Шёлковый путь» (Digital Silk Way). Последняя предполагает прокладу оптоволоконного интернет-кабеля по дну Каспийского моря между Азербайджаном и Казахстаном. А Евросоюз планирует прокладку кабеля по дну Чёрного моря до Грузии, который может стать частью той же системы.

Между тем «Ростелеком» приступил к созданию третьей очереди «Новой ТрансЕврАзийской волоконно-оптической линии связи» (TEA NEXT), которая протянется между городами Торжок в Тверской области и Кяхта в Республике Бурятия и выйдет на восточную границу России с Монголией. Проект TEA NEXT имеет особое значение для связи Китая с Европой, поскольку предложит полноценную альтернативу морским кабельным системам из Китая через Индийский океан и Египет.

Google предложила операторам в России изменить формат обмена трафиком для сохранения качественного доступа к своим сервисам — вместо серверов Google Global Cache использовать прямое присоединение к своей сети. Как сообщает РБК, российские операторы планируют увеличивать количество прямых стыков с Google, что позволит ускорить процесс загрузки контента, поступающего от американской компании.

Представитель «Ростелекома» пояснил РБК, что после того, как Google перестала поставлять оборудование для модернизации серверов Global Cache и новые серверы, остался лишь один выход — модернизировать стыки в Москве. Такой подход использовался и ранее, а сам «Ростелеком» по мере необходимости расширяет имеющиеся стыки с сетями Google. Гендиректор MSK-IX выразил мнение, что расширение стыков с Google только в Москве не решит проблему с задержкой сигнала при передаче трафика дальше по стране в связи с тем, что Google Global Cache, возможно, будут со временем отключены.

Источник изображения: Google Cloud

Впрочем, несколько участников рынка сообщили, что в письме гиперскейлера система Google Global Cache не упоминалась. В письме Google сообщила, что с января 2024 года перестанет передавать трафик через серверы маршрутизации на точках обмена трафиком (IX): «Мы обнаружили, что сегодня полагаемся на серверы маршрутизации для обмена трафиком с вашей сетью на некоторых точках обмена трафиком. Как только мы прекратим поддержку маршрутного сервера, этот трафик изменится. Чтобы свести к минимуму влияние, мы хотели бы пригласить вас как можно скорее подключиться к Google напрямую».

Глава Piter-IX отметил, что использование серверов маршрутизации имеет свои преимущества — экономится время и память маршрутизатора. «Но так как Google — очень большая компания, она может позволить себе заставить всех остальных следовать ее правилам», — сообщил он, добавив, что благодаря этому Google сможет сэкономить на затратах на оплату трафика на точках обмена, а операторам, пока не имеющим прямого стыка с Google, нужно будет просто поменять конфигурацию роутера.

По словам главы GlobalNet (сеть обмена трафиком DATAIX), подобное предложение было сделано операторам не только в России, поскольку Google «принципиально уходит с серверов маршрутизации на точках обмена трафиком во всем мире». Он отметил существующие опасения участников рынка, что после отказа от работы через роут-серверы Google окажется не готова к таким объёмам новых прямых присоединений.

Китайская компания Montage Technology, по сообщению ресурса Tom's Hardware, анонсировала процессоры Jintide 5-го поколения для местного рынка. По сути, это новейшие серверные чипы Intel Xeon Emerald Rapids с незначительно изменённой маркировкой и модифицированным набором поддерживаемых технологий.

В 2016 году Intel организовала партнёрский проект с китайским университетом Цинхуа и Montage Technology Global Holdings, Ltd. для создания продуктов, ориентированных на рынок серверов и ЦОД в КНР. В рамках сотрудничества поставляются чипы Jintide на базе Xeon разных семейств. В начале 2023 года компании представили серию процессоров Jintide на базе Sapphire Rapids.

В серию Jintide 5-го поколения на момент анонса вошли пять моделей: C8558P, C6548Y+, C5520+, C6542Y и C4514Y. Фактически это китайские варианты процессоров Xeon Platinum 8558P, Xeon Gold 6548Y+, Xeon Gold 5520+, Xeon Gold 6542Y и Xeon Silver 4514Y. Число вычислительных ядер составляет от 16 до 48; во всех случаях поддерживается технология многопоточности. Показатель TDP варьируется от 150 до 350 Вт (см. характеристики ниже).

Источник изображения: Montage Technology

Чипы Jintide получили дополнительные средства мониторинга и аппаратного шифрования: это технологии PrC (Pre-check) и DSC (Dynamic Security Check). От оригинальных Xeon Emerald Rapids унаследованы такие возможности, как поддержка восьми каналов памяти DDR5-5600 суммарным объёмом до 4 Тбайт и 80 линий PCIe 5.0. Изделия Jintide могут применяться в двухпроцессорных серверах.

Источник изображения: Tom's Hardware

На данный момент семейство Jintide 5-го поколения ограничено перечисленными моделями, и не до конца ясно, собирается ли Montage Technology выпускать другие версии. Напомним, в серии Xeon Emerald Rapids доступны процессоры с количеством ядер до 64.

Наряду с анонсом процессоров Xeon Scalable пятого поколения компания Intel обновила и модельные ряды Xeon D и Xeon E. Изменений и нововведений в представленных чипах достаточно много. Так, модельный ряд Xeon D по традиции поделён на две ветви: Xeon D-1800 и Xeon D-2800.

Уже сериии Xeon D-1700 и D-2700 были адаптированы для работы в серверах периферийных вычислений и в составе сетевого оборудования. Напомним ключевые моменты:

• Интегрированный 100GbE-контроллер с RDMA iWARP/RoCE v2;
• Интегрированный коммутатор и обработчик пакетов у Xeon D-2700;
• До 32 линий PCI Express 4.0;
• Наличие Intel QAT, SGX и TME;
• Поддержка AVX-512, в том числе VNNI/DL Boost;
• Поддержка технологий TSN/TCC, критичных для систем реального времени.

Источник: Intel via ServeTheHome

Всё это характерно и для новых Xeon D-1800 и D-2800, ведь в их основе лежит прежняя архитектура Ice Lake-D. Речь всё ещё идёт о сочетании DDR4 и PCI Express 4.0, однако улучшения всё же есть: оптимизация техпроцесса позволила довести максимальное количество ядер до 22 против 20 у предыдущих моделей при неизменном теплопакете. Небольшой прирост производительности тоже есть — примерно 1,12-1,15х у старшей модели Xeon D-2800. Кроме того, процессоры Xeon D-1800, наконец, получили поддержку двух 100GbE-портов.

Источник: Intel

Одновременно с анонсом новых Xeon D состоялся анонс серии Xeon E-2400, которая заменит Xeon E-2300. Изменений здесь существенно больше. Во-первых, платформа перебралась с LGA 1200 на LGA 1700, а на смену ядрам Cypress Cove пришли Raptor Cove. И хотя E-ядер в составе CPU нет, Intel почему-то решила не активировать поддержку AVX-512. Во-вторых, существенный апгрейд претерпела подсистема памяти: вместо двух каналов DDR4-3200 теперь доступна пара каналов DDR5-4800.

Наконец, Xeon E-2400 получили поддержку PCI Express 5.0 — из 20 имеющихся процессорных линий 16 теперь способны работать именно в этом режиме. Подросла версия DMI с 3.0 до 4.0, а PCH новой платформы теперь предоставляет 20 линий PCIe 4.0 и 8 линий PCIe 3.0. Заодно с трёх до пяти выросло количество портов USB 3.2 Gen 2x2 (20 Гбит/с).

Источник: Intel via ServeTheHome

Максимальное число ядер в новой серии Xeon E осталось прежним — их всё ещё восемь, но благодаря существенно более быстрой памяти и использованию техпроцесса Intel 7 Ultra производительность новинок в среднем в 1,3 раза выше, чем у предшественников. Базовая частота подросла до 3,5 ГГц, в турборежим частота доходит до 5,6 ГГц, но при этом теплопакет не выходит за рамки 95 Вт. Нацелены Intel Xeon E-2400 на рынок серверов и облачных систем начального уровня.

После завершения сделки по приобретению VMware компания Broadcom приступила к изменению портфеля её текущих предложений. В частности, была прекращена практика заключения контрактов по бессрочному лицензированию ПО. Также было объявлено о прекращении поддержки и продления подписки (SnS) для бессрочных предложений.

Broadcom заявила, что предоставляет опцию BYOS (Bring Your Own Subscription, «принеси свою собственную подписку»), обеспечивающую переносимость лицензии на проверенные VMware решения на базе VMware Cloud Foundation. «В рамках нашего перехода на подписку и упрощённый портфель, начиная с сегодняшнего дня, мы больше не будем продавать бессрочные лицензии, — говорится в сообщении Broadcom. — В дальнейшем все предложения будут доступны по подписке». О планах перевести все продукты на подписочную модель Broadcom предупреждала задолго до закрытия сделки.

В попытке склонить клиентов к переходу на ежегодную подписку Broadcom снизила стоимость на флагманское корпоративное решение VMware Cloud Foundation, так что формально глава компании сдержал слово. «Чтобы позволить большему количеству клиентов получить выгоду от этого решения, мы снизили прежнюю цену подписки вдвое и добавили более высокие уровни поддержки, включая расширенную поддержку для активации решения и управления жизненным циклом», — сообщила компания.

Источник изображения: Broadcom

Broadcom также представила обновлённую платформу VMware vSphere Foundation, упрощающую обработку рабочих нагрузок среднего и малого бизнеса. VMware vSphere Foundation интегрирует vSphere с «интеллектуальным управлением работой», чтобы клиенты могли добиться максимальной производительности, доступности и эффективности с большей прозрачностью.

VMware Cloud Foundation и VMware vSphere Foundation будут иметь опциональные расширения (add-on), которые охватывают хранилища, защиту от программ-вымогателей, аварийное восстановление, сервисы платформы приложений и т.д. Предложения Application Network и Security доступны в качестве дополнений для VMware Cloud Foundation. Также компания планирует добавить сервисы на основе ИИ. Вместе с тем компания намерена отказаться от решений для конечных пользователей, например, VDI-платформы VMware Horizon.

Брайан Беттс (Bryan Betts), главный аналитик Freeform Dynamics, говоря о стратегии Broadcom, привёл слова гендиректора Nutanix Раджива Рамасвами (Rajiv Ramaswami). «Если вы посмотрите на её историю, вся бизнес-модель Broadcom заключалась в максимизации приобретённых активов за два-три года, — сказал он. — Это означает сокращение расходов и увеличение доходов».

Компания Google анонсировала свой самый высокопроизводительный ускоритель для задач ИИ — Cloud TPU v5p. По сравнению с изделием предыдущего поколения TPU v4 обеспечивается приблизительно 1,7-кратный пророст быстродействия на операциях BF16. Впрочем, для Google важнее то, что она наряду с AWS является одной из немногих, кто при разработке ИИ не зависит от дефицитных ускорителей NVIDIA. К этому же стремится сейчас и Microsoft.

Решение Cloud TPU v5p оснащено 95 Гбайт памяти HBM с пропускной способностью 2765 Гбайт/с. Для сравнения: конфигурация TPU v4 включает 32 Гбайт памяти HBM с пропускной способностью 1228 Гбайт/с.

Источник изображений: Google

Кластер на базе Cloud TPU v5p может содержать до 8960 чипов, объединённых высокоскоростным интерконнектом со скоростью передачи данных до 4800 Гбит/с на чип. В случае TPU v4 эти значения составляют соответственно 4096 чипов и 2400 Гбит/с. Что касается производительности, то у Cloud TPU v5p она достигает 459 Тфлопс (BF16) против 275 Тфлопс у TPU v4. На операциях INT8 новинка демонстрирует результат до 918 TOPS.

В августе нынешнего года Google представила ИИ-ускоритель TPU v5e, созданный для обеспечения наилучшего соотношения стоимости и эффективности. Это изделие с 16 Гбайт памяти HBM (820 Гбит/с) показывает быстродействие 197 Тфлопс и 394 TOPS на операциях BF16 и INT8 соответственно. При этом решение обеспечивает относительную производительность на доллар на уровне $1,2 в пересчёте на чип в час. У TPU v4 значение равно $3,22, а у новейшего Cloud TPU v5p — $4,2 (во всех случаях оценка выполнена на модели GPT-3 со 175 млрд параметров).

По заявлениям Google, чип Cloud TPU v5p может обучать большие языковые модели в 2,8 раза быстрее по сравнению с TPU v4. Более того, благодаря SparseCores второго поколения скорость обучения моделей embedding-dense увеличивается приблизительно в 1,9 раза.

На базе TPU и GPU компания предоставляет готовый программно-аппаратный стек AI Hypercomputer для комплексной работы с ИИ. Система объединяет различные аппаратные ресурсы, включая различные типы хранилищ и оптический интерконнект Jupiter, сервисы GCE и GKE, популярные фреймворки AX, TensorFlow и PyTorch, что позволяет быстро и эффективно заниматься обучением современных моделей, а также организовать инференс.