В Google занялись испытаниями роботов для управления и обслуживания оборудования в своих дата-центрах. Как сообщает Datacenter Dynamics со ссылкой на Рика Миллера (Rich Miller) из Data Center Frontier, соответствующую информацию представитель Google обнародовал в ходе недавнего мероприятия Open Compute Summit — роботы уже действуют на одном из объектов.

В Google заявили, что роботы помогут кардинально пересмотреть подход к масштабированию операций, а их внедрение благотворно скажется на безопасности и надёжности работ. Робототехника может сыграть важную роль в задачах вроде перемещения компонентов и стоек, мониторинга оборудования и даже его обслуживания и ремонта. В прошлом году компания начала эксперименты по использованию роботов для замены вышедших из строя накопителей. А сейчас компания намерена привлечь роботов к обслуживанию стоек с ускорителями, которые значительно тяжелее традиционных стоек.

Источник изображений: Google / OCP

Использование роботов для обеспечения работы ЦОД давно рассматривается гиперскейлерами и колокейшн-провайдерами. Впрочем, в большинстве случаев речь идёт о робособаках вроде моделей, выпускаемых Boston Dynamics, Unitree Go1 и Anybotics. Такие модели обычно выполняют в основном патрульные функции — для охраны и оповещения об инцидентах. Пока что Google использует довольно массивную, автономно передвигающуюся платформу собственной разработки.

В 2023 году Microsoft создала команду, занимающуюся автоматизацией работы ЦОД вообще и роботами в частности. В том же году Digital Edge, Digital Realty, Scala Data Centers, и Oracle протестировали роботов для выполнения самых разных операций в дата-центрах. А вот у японской NTT Data подход иной — компания создала робота Ugo на моторизованной платформе, который получил две роборуки-манипулятора.

«Инфосистемы Джет» и «Аэродиск» сообщили об успешных испытаниях первого отечественного метрокластера на базе СХД с использованием сценариев эмуляции различных отказов и сбоев. В «Инфосистемы Джет» отметили, что протестированный метрокластер является первым отечественным решением такого класса.

Метрокластер представляет собой отказоустойчивую ИТ-инфраструктуру на базе синхронной репликации данных средствами СХД. Метрокластер включает две идентичные СХД, размещённые в разных локациях с зеркалированием данных в синхронном режиме. Выход из строя одной СХД или целой площадки не отражается на сохранности данных, которые остаются доступны на второй СХД, а функционирование прикладных систем продолжается. Работа такого кластера полностью автоматизирована и не требует вмешательства администратора в случае сбоя.

Тестируемая конфигурация была построена на отечественных решениях «Аквариуса»: две СХД «Аэродиск» Engine AQ 440, соединённые между собой оптическими каналами связи через 25GbE-коммутаторы AQ-N5001, и ферма виртуализации на серверах T50 с использованием отечественного ПО. В ходе испытания проводилась эмуляции прикладной тестовой нагрузки на СХД со стороны СУБД PostgreSQL, запущенной в виртуальной машине. Также вносились сетевые задержки для эмуляции протяжённой линии связи межу ЦОД.

Источник изображения: «Инфосистемы Джет»

Как сообщается, сначала работу кластера проверили при смоделированном отказе СХД на одной площадке из-за аварийного отключения электропитания. Для миграции виртуального интерфейса (VIP) метрокластера на другую СХД потребовалось 30 секунд, что не отразилось на стабильности работы виртуальной машины.

Затем провели эмуляцию отказа всей площадки из-за отключения электропитания оборудования (сервер, коммутатор, СХД). В этом случае помимо переключения VIP СХД метрокластера на другую СХД произошло переключение виртуальной машины из-за отказа хоста виртуализации. После этого тестовая нагрузка была перезапущена на второй площадке. Всего на восстановление нагрузки после крушения системы ушло не более трёх минут.

В третьем тесте проверили работу метрокластера при сбое каналов связи, который приводит к изоляции узлов кластера. В ходе теста эксперты проверили работу механизма арбитража между двумя СХД при участии сервера-арбитра. В этом случае СХД, сохраняющая с ним связь, становится основной и принимает на себя нагрузку, а вторая СХД исключается из кластера.

Вьетнам намерен перевести все сети страны на протокол IPv6, обновить сетевую инфраструктуру и поддержать развитие ЦОД в стране. По данным The Register, новая стратегия правительства отражена в рамках Решения № 1132/QD-TTg, определяющего цели на 2025 и 2030 гг.

Так, в течение года страна намерена подключить два новых подводных интернет-кабеля. Ранее в этом году три из пяти кабелей, обеспечивавших Вьетнаму связь с внешним миром, вышли из строя. Также планируется обеспечить домохозяйства FTTH-подключением, покрыть 5G-связью все крупные города и промышленные зоны, а также начать работы над ИИ ЦОД с PUE не выш 1.4.

Ещё грандиознее планы на 2030 год. Ожидается, что к этому моменту все сети в стране перейдут на IPv6, скорость широкополосного оптического подключения повсеместно достигнет 1 Гбит/сек, а 5G-сети охватят 99 % населения. Также будут подключены ещё шесть подводных кабелей суммарной ёмкостью 350 Тбайт/сек. Один из них будет находиться в государственной собственности.

Население Вьетнама превышает 100 млн человек, при этом количество абонентских договоров составляет 140 на 100 жителей. IPv4-адресов не хватает, поскольку развивающиеся страны и так в своё время получили их не слишком много. Поэтому переход на IPv6 выглядит логичным и своевременным. Например, соседний Китай намерен ускорить внедрение IPv6, причём действует весьма решительно. Ещё с прошлого года поддержка IPv6 стала обязательной для всего нового Wi-Fi оборудования в стране.

Источник изображения: Peter Hammer/unsplash.com

Планом предусмотрено строительство ряда ЦОД гиперскейл-уровня, ИИ ЦОД, а также периферийных и региональных дата-центров. Вьетнам также утвердил решение об обеспечении кибербезопасности, в рамках которого организации и частные лица призывают пользоваться услугам местных ЦОД. Предусматривается и поощрение переноса IT-нагрузок бизнеса и властей в облака. Для строительства дата-центров правительство намерено привлечь как местные, так и иностранные инвестиции.

Ещё одной целью на 2030 год стало обеспечение каждого жителя Вьетнама четырьмя IoT-подключениями. А 70 % населения к этому времени должны перейти на использование персональных цифровых подписей. Кроме того, правительство решило, что ежегодный оборот полупроводниковой индустрии должен достичь $100 млрд к 2050 году.

Глава одной из IT-компаний из Мэриленда, по данным Минюста США (DoJ), подделал документы о получении сертификата надёжности ЦОД уровня Tier IV в Белтсвилле (Мэриленд). The Register сообщает, что это было сделано ради контракта на размещение оборудования Комиссии по ценным бумагам и биржам США (SEC).

Хотя такие сертификаты Uptime Institute выдаёт только после проверки, обвиняемый Дипак Джайн (Deepak Jain) выбрал другой путь. Его компания, по мнению властей, предоставила SEC поддельные документы о сертификации. Причём обвиняемый не просто скорректировал документы Uptime Institute, а «изобрёл» некую организацию Uptime Council, которая, похоже, вообще не существует.

В Министерстве юстиции США заявили, что не потерпят схем, ставящих под угрозу безопасность данных правительства. Как власти выяснили, что Джайн сертификацию буквально выдумал, не говорится, но сообщается, что SEC столкнулась с проблемами с безопасностью, охлаждением и энергоснабжением в ЦОД. В своё время сотрудник компании помешал осмотру Beltsville Data Center до заключения контракта в 2012 году. После того, как срок сделки истёк в 2018 году, SEC отказалась продлевать договор. Всего Комиссия потратила на услуги данного ЦОД $10,7 млн.

Источник изображения: Bermix Studio/unsplash.com

За подобную «изобретательность» Джайну грозит по 10 лет тюрьмы за каждое из шести обвинений в крупном мошенничестве, а также до пяти лет в связи с обвинением в ложных заявлениях. Хотя сама компания в судебных документах не называется, в Сети есть информация, что Дипак Джайн является основателем и генеральным директором белтсвилльской AiNET (именно она управляет ЦОД). Впрочем, доказательств того, что вся компания в целом замешана в махинациях, пока нет. При этом на сайте AiNET неоднократно упоминается, что её ЦОД имеет сертификацию Tier IV.

Представляющие интересы Джайна юристы сообщили журналистам, что клиент отрицает вину, и говорят, что его компания выполнила все условия контракта с SEC, а доказательства утери данных или их компрометации по вине владельца ЦОД отсутствуют. Случай примечателен тем, что финансовые махинации, в том числе связанные с ЦОД, происходят довольно часто, но о столь наглых попытках подделать Tier-сертификаты известно немного.

Компания Xsight Labs анонсировала, как утверждается, самую производительную на рынке программно-определяемую «систему на чипе» (SoC), предназначенную для создания DPU с поддержкой RoCEv2 и UET (Ultra Ethernet Transport). Изделие под названием E1 станет доступно заказчикам для тестирования во II квартале 2025 года.

Чип будет предлагаться в модификациях E1-32 и E1-64. Первая содержит 32 ядра Arm Neoverse N2 v9.0-A, имеет 16 Мбайт кеша и использует конфигурацию памяти 2 × DDR5-5200. Показатель TDP равен 65 Вт. У второго варианта количество ядер составляет 64, размер конфигурируемого кеша/буфера — 32 Мбайт. Конфигурация памяти — 4 × DDR5-5200, величина TDP — 90 Вт. В обоих случаях используется полное шифрование памяти на лету (AES-XTS).

Новинка использует до восьми блоков SerDes, обеспечивая сетевую пропускную способность до 800 Гбит/с. Возможны следующие конфигурации портов: 2 × 400GbE, 4 × 200GbE и 8 × 100/50/25/10GbE. Заявлена производительность на уровне 200 Mpps и 20 млн подключений в секунду. Также есть пара 1GbE-портов для внешнего управления. Доступны программируемые DMA-движки (до 3 Тбит/с) и разгрузка типовых операций, включая шифрование AES-GCM (для IPSec) и AES-XTS (для СХД) на лету.

Источник изображения: Xsight Labs

Есть восемь двухрежимных контроллеров и 40 (32+8) линий PCIe 5.0, а также поддержка P2P-коммутации PCIe. Упомянуты поддержка до четырёх хостов/устройств, SR-IOV (64K PF/VF), а также программная эмуляция и пространства MMIO. Реализована поддержка интерфейсов I2C/I3C/SMBus, SPI/QSPI, SMI, UART, GPIO, 1588 RTC, JTAG.

Говорится о высоком уровне обеспечения безопасности: возможно создание изолированных и защищённых сред, которые аутентифицируют каждого клиента. Поддерживается функция безопасной загрузки UEFI Secure Boot with Arm Trusted Firmware (TF-A). Заявлена возможность работы «из коробки» в Debian, Ubuntu, SONiC и Lightbits Labs LightOS, а также совместимость с Netdev, VirtIO, XNA/XDP и DPDK/SPDK. В частности, возможна эмуляция NVMe-, RDMA- и сетевых устройств.

Изделие E1 производится по 5-нм технологии TSMC. Оно, как утверждает Xsight Labs, обеспечивает беспрецедентную энергоэффективность и вычислительные возможности, устанавливая новый стандарт производительности для DPU SoC. Новинка ориентирована на облачные платформы и периферийные дата-центры, поддерживающие интенсивные ИИ-нагрузки. DPU позволяет создавать SDN/SDS-решения, брандмауэры, NVMe-oF СХД, вычислительные хранилища, CDN-платформы, балансировщики и т.п.

Министерство торговли США и Infinera подписали предварительный меморандум об условиях (PMT), предусматривающий выделение средств на строительство компанией новой производственной площадки, а также испытательного центра.

Infinera специализируется на создании фотонных интегральных схем на основе фосфида индия (InP PIC), которые используют свет для эффективной высокоскоростной передачи информации. Такие решения применяются для связи ИИ-кластеров в дата-центрах и для соединения самих ЦОД. В июне 2024 года Nokia объявила о покупке Infinera за $2,3 млрд.

В рамках подписанного меморандума Infinera получит $93 млн в соответствии с действующим в США законом CHIPS and Science Act. Он предусматривает выделение средств на поддержание исследовательских работ и стимулирование производства полупроводниковой продукции на территории страны.

Источник изображения: Infinera

Финансируемый американскими властями проект предполагает строительство нового завода Infinera в Сан-Хосе (Калифорния), а также создание передового предприятия по тестированию и упаковке в Бетлехеме (Пенсильвания). Ожидается, что на этапе строительных работ будут созданы до 1200 рабочих мест. После ввода предприятий в эксплуатацию существующие производственные мощности Infinera в США вырастут примерно в 10 раз. На новых объектах планируется сформировать до 500 рабочих мест.

Отмечается, что на заводе в Сан-Хосе будут созданы около 3700 м² чистых комнат. Здесь будут изготавливаться изделия InP PIC для удовлетворения существующих и будущих потребностей заказчиков. Центр в Бетлехеме, в свою очередь, займётся научно-исследовательскими и опытно-конструкторскими работами, связанными с новыми технологиями упаковки оптических чипов, такими как 2.5D- и 3D-упаковка.

Тайваньский поставщик серверного оборудования для гиперскейлеров Wiwynn (подразделение Wistron), по сообщению The Register, добавил ещё два пункта в список обвинений в отношении компании X (бывшая Twitter). Социальной сети Илона Маска (Elon Musk) вменяется преднамеренное искажение фактов (Intentional Misrepresentation) и небрежное искажение фактов (Negligent Misrepresentation).

Напомним, Wiwynn подала в суд на Х в августе 2024 года. Утверждается, что в 2014-м Wiwynn заключила контракт с тогдашней Twitter на поставку «уникальных, специально разработанных продуктов для IT-инфраструктуры, включая стоечные решения». В рамках договора были закуплены комплектующие для серверов на сумму $120 млн.

Источник изображения: pixabay.com

В жалобе говорится, что «компоненты, используемые при создании заказанных систем, в значительной степени уникальны», а поэтому их поставка занимает много времени. Wiwynn взяла на себя расходы на приобретение необходимых комплектующих. Но после того как Маск стал владельцем Twitter, соцсеть, согласно заявлениям Wiwynn, прекратила оплачивать счета в рамках поставки серверов и не отвечала на запросы о просроченных платежах. Более того, утверждалось, что Маск полтора года не платит даже за поставленные серверы.

Wiwynn заявила, что отгрузила готовую продукцию на сумму более $32 млн, а также закупила и оплатила компоненты, за которые X (Twitter) обязалась взять на себя ответственность. Чтобы минимизировать убытки Wiwynn отменила часть заказов и вернула комплектующие на сумму приблизительно $59 млн. Ещё $61 млн Wiwynn хочет взыскать с Х через суд.

В новых обвинениях Wiwynn утверждает, что «X отказалась и проигнорировала неоднократные просьбы о компенсации расходов». Сама соцсеть обвинения в свой адрес отрицает. Дело рассматривается в Окружном суде США по Северному округу Калифорнии.

Компания iKS-Consulting опубликовала отчёт «Российский рынок коммерческих дата-центров 2024», посвящённый основным трендам рынка услуг, предоставляемых коммерческими дата-центрами, включая услуги колокации и облачные услуги. Исследование было проведено в июле-сентябре 2024 года.

В исследовании отмечено, что уже второй год рынок коммерческих ЦОД демонстрирует высокие темпы ввода новых мощностей. В 2023 году прирост введённых стойко-мест составил год к году 20,7 %, что оказалось в два с лишним раза выше, чем годом ранее: 12 тыс. новых стойко-мест против 5,7 тыс. соответственно. По оценкам iKS-Consulting, общее количество стойко-мест на конец 2023 года в России составило 70,4 тыс.

Проблемы с получением оборудования в целом были решены — начаты поставки от новых вендоров, осуществляется переход на российских поставщиков, налажены поставки альтернативными маршрутами. Новые проекты ЦОД в России учитывают ситуацию, в них закладываются универсальные решения без привязки к определённым вендорам. Вместе с тем усилились проблемы с оплатой зарубежного оборудования, что может привести к очередному увеличению стоимости контрактов и сроков их исполнения.

Динамика роста количества стойко-мест в РФ, тыс. ед. (Источник здесь и далее: iKS-Consulting)

Также существует проблема с финансированием строительства ЦОД, обострившаяся с оттоком в 2022 году иностранных инвестиций, поскольку теперь приходится опираться только на ресурсы внутри страны. Негативно сказывается на кредитовании строительства ЦОД рост ключевой ставки Центробанка РФ. Тем не менее, строительство продолжается и ожидается, что до конца 2024 года в России будет введено около 12 тыс. новых стойко-мест, как и в прошлом году.

Абсолютный прирост количества стойко-мест в ЦОД РФ (тыс. шт.)

Несмотря на то, что в 2023–2024 гг. был отмечен вывод на рынок колокации большого количества новых стойко-мест, спрос по-прежнему опережает предложение. Многие крупные компании заказывают стойко-места уже на стадии строительства и бронируют часть стойко-мест на один-два года вперед с планами расширения. Вместе с тем возведение новых ЦОД привело к дефициту опытных строителей и организаций, специализирующихся на их проектировании, строительстве и оснащении.

Среди основных трендов развития рынка ЦОД в iKS-Consulting назвали следующие:

• Рост объёмов данных, цифровизация бизнеса и повседневной жизни. Рост рынка в деньгах на 25%.
• Сохранение высокого спроса на крупные партии стойко-мест в коммерческих ЦОД в Московском регионе.
• Вступление рынка коммерческих ЦОД в стадию зрелости. Выход на рынок профессиональных девелоперов (PNK, «Монарх»).
• Рост концентрации рынка. Выделилась группа лидеров.
• Нехватка высококвалифицированного персонала и команд по строительству и управлению ЦОД.

В 2025 году на смену национальному проекту «Цифровая экономика» придёт реализация национального проекта «Экономика данных и цифровая трансформация государства». Ожидается, что это приведёт к росту инвестиций в сектор ЦОД и стимулированию роста внутреннего спроса на инфраструктуру хранения и обработки данных. Также в некоторой степени стимулом для развития рынка коммерческих ЦОД могут стать требования закона о КИИ.

ТОП поставщиков услуг ЦОД в РФ по количеству стойко-мест (итог 2023 года и прогноз на 2024 год)

В исследовании также указано, что последние пять лет растёт концентрация рынка, которой также способствует более динамичный рост крупных ЦОД относительно общего рынка. Доля лидеров рынка резко увеличилась в 2020 году после слияния операторов коммерческих дата-центров «РТК-ЦОД» и DataLine. За последние три года определились три лидера: «РТК-ЦОД», «Росатом» и IXcellerate.

Доли ТОП поставщиков по количеству введённых стойко-мест на конец 2024 года (оценка)

По количеству введённых в эксплуатацию стойко-мест в 2023 году по-прежнему лидировала группа компаний «Ростелеком/РТК-ЦОД», в числе ключевых объектов которой комплекс ЦОД NORD, Москва I–V, столичный узел обмена трафиком ММТС-9, а также новый крупный кластер ЦОД «Медведково», купленный за 26,28 млрд, в результате чего в рейтинге по количеству стойко-мест снизила свою позицию 3data.

К концу года у «Ростелеком/РТК-ЦОД» было 20 957 стойко-мест, включая 19 962 стойко-места «РТК-ЦОД». При выполнении планов на конец 2024 года группа компаний суммарно будет иметь 27 033 стойко-места, включая 26 020 у «РТК-ЦОД». На втором месте в 2023 году была компания DataPro c долей 9,3 % (6553 стойко-места). На третьем — IXcellerate с долей 8,9 % (6279 стойко-мест).

Динамика максимальной разрешённой электрической мощности коммерческих ЦОД в РФ

Исходя из объявленных планов, в ближайшие два-три года подведённая мощность будет увеличиваться на 110–130 МВт ежегодно. Лидерами по подведённой мощности являются ЦОД «РТК-ЦОД» и IXcellerate с суммарной долей рынка по этому показателю около 43 %. На пятёрку лидеров, в которую также входят «Росатом», ГК Key Point и DataPro, приходится 62 % рынка.

Intel намерена продать по крайней мере миноритарную долю в своем подразделении Altera (ранее PSG), специализирующемся на разработке ПЛИС, чтобы получить несколько миллиардов долларов для укрепления пошатнувшегося финансового положения, сообщил CNBC со ссылкой на информированные источники. Крупнейшим конкурентом Altera, как и крупнейшим производителем FPGA является AMD, которая вышла на этот рынок в 2022 году благодаря приобретению Xilinx за $49 млрд.

По словам источников ресурса, на минувшей неделе компания обратилась к ряду частных и стратегических инвесторов с предложением о продаже доли в Altera. Некоторым из них она сообщила о готовности продать контрольный пакет акций. В предлагаемой сделке Intel исходит из рыночной стоимости Altera в $17 млрд, что ненамного больше $16,7 млрд, уплаченных за неё в 2015 году.

Источник изображения: Intel

Сообщение CNBC подтверждает сделанное ранее заявление гендиректора Altera Сандры Ривера (Sandra Rivera) о том, что компания продолжает следовать плану, объявленному более года назад. План предусматривает продажу доли в компании и проведение IPO в 2026 году. Ривера заявила об этом после появления сообщений о том, что Intel может продать Altera полностью, возможность чего она исключает.

Компания AMD анонсировала изделие Alveo UL3422: это, как утверждается, самый быстрый в мире однослотовый ускоритель половинной длины (FHHL) для брокерских и биржевых приложений. Новинка уже поставляется заказчикам из финансового сектора по всему миру.

В устройстве применена FPGA Virtex UltraScale+ VU2P. Конфигурация включает 32 трансивера с ультранизкой задержкой, 787 тыс. LUT и 1680 DSP. В состав FPGA входят 256 Мбайт встроенной памяти — 76 Мбайт блочной RAM и 180 Мбайт UltraRAM. Заявленная задержка на уровне трансиверов составляет менее 3 нс.

Карта использует интерфейс PCIe 4.0 x8 (коннектор x16). Заявленный показатель TDP равен 120 Вт; используется пассивное охлаждение. В оснащение входят 16 Гбайт памяти DDR4-2400. Предусмотрены два разъёма QSFP-DD (16​×​10/25G) и два коннектора ARF6.

Источник изображения: AMD

Ускоритель Alveo UL3422 может использоваться в комплексе с платформой разработки Vivado Design Suite. AMD также предоставляет клиентам среду разработки FINN с открытым исходным кодом и поддержкой сообщества, что позволяет интегрировать модели ИИ с низкими задержками в высокопроизводительные торговые системы. FINN использует PyTorch и методы квантования нейронных сетей.

Ускоритель поставляется с набором референсных проектов и тестов производительности. Среди ключевых сфер применения новинки названы торговые операции со сверхнизкими задержками и анализ рисков.