Европейская организация по ядерным исследованиям (CERN) сообщила о том, что суммарная вместимость накопителей в её дата-центрах превысила знаковую отметку в 1 Эбайт. Ёмкость хранилища стабильно наращивалась с 2010 года.

В нынешнем виде система хранения CERN объединяет около 110 тыс. стандартных накопителей. В основном это HDD, но количество SSD неуклонно растёт. Хранилище использует различные методы резервирования и восстановления информации, что гарантирует сохранность ценных данных.

Источник изображения: CERN

Для управления применяется ПО CERN с открытым исходным кодом EOS. Система хранит прежде всего физические данные Большого адронного коллайдера (БАК). Она также используется для записи результатов экспериментов, моделирования и пр.

Источник изображения: CERN

«Это не просто праздник ёмкости — это также очередное достижение в области производительности. Скорость чтения объединённого хранилища данных впервые превысила порог в 1 Тбайт/с», — отметил Андреас Петерс (Andreas Peters), руководитель проекта EOS.

Компания Seagate анонсировала систему Exos Corvault 5U84 в форм-факторе 5U, рассчитанную на создание хранилищ данных большой вместимости. Ёмкость может достигать 1,5 Пбайт, но возможность расширения не предусмотрена.

Задействованы фирменные контроллеры VelosCT, функционирующие в режиме активный — активный. Допускается установка дисков Exos SAS HDD с автоматическим шифрованием данных.

Источник изображения: Seagate

Для каждого контроллера предусмотрено использование четырёх портов mini-SAS-3 HD. Заявленная пропускная способность системы достигает 12 Гбайт/с при последовательном чтении и 10 Гбайт/с при последовательной записи. За повышение надёжности отвечает функция Autonomous Drive Regeneration (ADR). Эта технология минимизирует время простоя, вмешательство со стороны человека и количество компьютерных отходов за счёт восстановления сбойных накопителей.

«Обеспечивается доступность на уровне 99,999 % и стабильно высокая производительность благодаря быстрому чтению и записи, мощным сдвоенным контроллерам и оптимальной конструкции», — отмечает Seagate.

СХД имеет габариты 222,3 × 444,5 × 981 мм и весит 135 кг. Доступен интерфейс 1GbE. Диапазон рабочих температур простирается от +5 до +35 °C. Максимальное заявленное энергопотребление равно 2000 Вт.

Аналитическая компания Context, по сообщению ресурса Blocks & Files, пересмотрела в сторону уменьшения прогноз по европейскому рынку серверов и СХД на 2023 год. Негативное влияние на отрасль оказывают макроэкономический факторы, сложившаяся геополитическая обстановка, высокий уровень инфляции и сокращение инвестиций в сферу IT со стороны бизнеса.

Другими факторами, потенциально влияющими на продажи, являются цены и доступность устройств, особенно изделий, предназначенных для работы с ИИ. Эксперты полагают, что по итогам текущего года продажи серверов и СХД в Европе в денежном выражении сократятся на 3,3 % по сравнению с 2022-м. Ранее говорилось о росте приблизительно на 1,6 %.

В сегменте серверов корпоративного класса в I квартале 2023-го зафиксировано падение выручки на 3,8 % по сравнению с аналогичным периодом прошлого года, во II квартале — на 11,7 %. Худшие показатели зафиксированы в Великобритании (минус 38 %) и Италии (минус 29 %). В штучном исчислении продажи во II четверти 2023-го сократились за год на 21 %; при этом в сегменте двухпроцессорных систем отмечен спад на 26 %.

Фото: Kvistholt Photography / Unsplash

Поставки СХД по итогам II квартала текущего года на европейском рынке снизились на 9,5 % в денежном выражении. Причём выручка по направлению массивов хранения упала на 13 %. В сегменте гиперконвергентной инфраструктуры (HCI) зафиксирован небольшой рост выручки во II квартале — на 2,9 %, что объясняется хорошими показателями в Великобритании (плюс 15 %) и Италии (плюс 53 %).

Компания DataDirect Networks (DDN), специализирующаяся на платформах хранения данных для НРС-систем, сообщила о том, что её массив AI400X2 NVMe показал высокие результаты в ИИ-бенчмарке MLPerf Storage v0.5 при выполнении задач сегментации изображений и обработки естественного языка.

Платформа AI400X2 совмещает параллельную файловую систему с новым алгоритмом сжатием данных на стороне клиента. Утверждается, что по сравнению с альтернативными решениями достигается увеличение производительности до 10 раз.

В частности, в тесте MLPerf Storage v0.5 при использовании одного узла AI400X2 продемонстрирована пропускная способность на уровне 16,2 Гбайт/с. Утверждается, что этого достаточно для обслуживания 40 высокопроизводительных ИИ-ускорителей. В многоузловой конфигурации скорость передачи данных достигает 61,6 Гбайт/с, что позволяет поддерживать работу до 160 ускорителей ИИ.

Источник изображения: DDN

DDN заявляет, что продемонстрированные в бенмарке MLPerf Storage v0.5 показатели говорят о повышении эффективности СХД приблизительно на 700 % в расчёте на каждый узел по сравнению с конкурирующими локальными решениями.

Отмечается, что возможность поддерживать ИИ-нагрузки и большие языковые модели с высоким уровнем эффективности и масштабируемости, одновременно минимизируя энергопотребление и занимаемую площадь ЦОД, имеет решающее значение при внедрении передовых приложений и сервисов.

Аргоннская национальная лаборатория Министерства энергетики США сообщила о том, что вычислительный комплекс Polaris, предназначенный для решения ИИ-задач, устанавливает высокие стандарты производительности СХД в бенчмарке MLPerf Storage AI.

Суперкомпьютер Polaris, разработанный в сотрудничестве с Hewlett Packard Enterprise (HPE), объединяет 560 узлов, соединенных между собой посредством интерконнекта HPE Slingshot. Каждый узел содержит четыре ускорителя NVIDIA A100 и два накопителя NVMe вместимостью 1,6 Тбайт каждый.

Задействована платформа хранения HPE ClusterStor E1000, которая предоставляет 100 Пбайт полезной ёмкости на 8480 накопителях. Заявленная скорость передачи данных достигает 659 Гбайт/с. Вычислительный комплекс смонтирован на площадке Argonne Leadership Computing Facility (ALCF). Пиковая производительность составляет около 44 Пфлопс.

Источник изображения: ALCF

Быстродействие Lustre-хранилища оценивалась с использованием двух рабочих нагрузок MLPerf Storage AI — UNet3D и Bert. Данные размещались как в основном хранилище, так и на NVMe-накопителях в составе узлов суперкомпьютера, что позволило эмулировать различные рабочие нагрузки ИИ.

В тесте UNet3D с интенсивным вводом-выводом суперкомпьютер достиг пиковой пропускной способности в 200 Гбайт/с для основного хранилища HPE ClusterStor E1000. В случае NVMe-накопителей продемонстрирован результат на уровне 800 Гбайт/с. Менее интенсивная рабочая нагрузка Bert также показала высокие результаты, что говорит о возможности эффективного выполнения современных ИИ-задач.

Министерство внутренних дел (МВД) России организовало закупку в формате электронного аукциона систем хранения данных (СХД). Как сообщают «Ведомости», речь идёт о крупнейшей за последние два года закупке систем такого типа — на сумму 1,6 млрд руб. Оборудование будет использоваться для оснащения Федерального центра обработки данных (ФЦОД).

По информации издания, на строительство ФЦОД в 2021–2024 гг. суммарно должно быть выделено 7 млрд руб. Всего же В ближайшие годы МВД получит на информатизацию и развитие сопутствующей инфраструктуры 36,54 млрд руб. По мнению экспертов, серверная инфраструктура у заказчиков уровня МВД растёт каждый год на 15–20 %, поэтому закупки СХД необходимы.

Источник изображения: Huawei

По расчётам «Ведомостей», с начала 2022 года уже проведено шесть закупок СХД для ФЦОД на общую сумму около 3,5 млрд руб. В пяти случаях было куплено китайское оборудование, т.е. серверы и хранилища Huawei, а в одном — отечественное, на сумму 320 млн руб. В нынешней закупке также нет запрета на иностранное оборудование, поэтому опрошенные изданием эксперты не исключают возможность покупки как отечественных СХД, например, от «Аэродиска» и YADRO, так и решений Huawei и Lenovo.

На восстановление докризисных показателей российского серверного рынка понадобится минимум девять лет, прогнозируют аналитики российского производителя серверного оборудования GAGAR>N («Гагар.ИН»). Летом 2022 года рынок сократился не меньше чем на 50 % в денежном и в штучном выражении. К концу года он начал восстанавливаться, сократив падение до -18 %, но возвращение к докризисным показателям идет медленно.

Сейчас процесс тормозит отсутствие локализованных компонентов, недостаточное количество производственных линий и специалистов. Кроме того только за I полугодие 2022 года отечественные серверы и СХД подорожали в 1,5 раза, но пока вендоры существенно снижать цены не намерены. В среднем стоимость российских серверов на 25–40 % выше зарубежных аналогов.

Изображение: Gerd Altmann / Pixabay

Как отмечают аналитики GAGAR>N, иностранные вендоры получают скидки от поставщиков компонентов, что позволяет им в условиях параллельного импорта конкурировать с российскими решениями. Свободную после ухода западных брендов нишу активно занимают производители китайского оборудования, на долю которых приходится не менее 72 % импорта.

Китайская корпорация Huawei анонсировала распределённую All-Flash СХД OceanStor Pacific 9920. Решение подходит для использования в различных приложениях обработки и хранения структурированных и неструктурированных данных. Узел выполнен в формате 2U. В зависимости от модификации применяются два процессора Huawei Kunpeng 920 или Intel Xeon Scalable. Максимальный объём оперативной памяти на узел составляет 512 Гбайт, 768 Гбайт или 1 Тбайт.

Говорится, что система OceanStor Pacific 9920 обеспечивает эффективный доступ к информации в таких сценариях, как пулы виртуальных и облачных ресурсов, базы данных, высокопроизводительные вычисления, ИИ-приложения и аналитика больших данных. Возможна установка до 12 накопителей LFF с интерфейсом SAS или до 25 решений SFF NVMe. «Сырая» ёмкость варьируется от 38,4 до 92,16 Тбайт.

Источник изображения: Huawei

СХД может оснащаться портами 10GbE, 25/100GbE (RoCE) или 100 Гбит/с InfiniBand. СХД предоставляет различные интерфейсы доступа: NFS, SMB, POSIX, MPI-IO, HDFS, S3, iSCSI и OpenStack Cinder. Реализовано автоматическое параллельное восстановление данных со скоростью 2–4 Тбайт/час. Диапазон рабочих температур — от +5 до +35 °C.

Среди поддерживаемых функций можно выделить SmartThin (интеллектуальное динамическое выделение емкости), SmartDedupe & SmartCompression (интеллектуальные дедупликация и сжатие), SmartQoS (интеллектуальный контроль уровня обслуживания), SmartAuditlog (интеллектуальный журнал аудита), HyperSnap (мгновенные снимки), HyperClone (функция клонирования), HyperMetro (разнесённые массивы в режиме Active–Active), HyperReplication (удаленная репликация) и DIF (защита целостности данных).

Компания Kioxia, по сообщению ресурса Blocks & Files, свернула проект KumoScale по разработке специализированного ПО для хранилищ данных. Выпуск новых версий не планируется, а новые лицензии на данный продукт предоставляться не будут. Поддержка текущих заказчиков сохранится.

KumoScale — это программный комплекс, нацеленный на максимизацию использования обычных NVMe-накопителей в дата-центрах. Платформа использует NVMe-oF (RDMA или NVMe/TCP) для формирования быстрых масштабируемых блочных хранилищ с низкой задержкой и позволяет управлять сотнями узлов хранения. Платформа обзавелась поддержкой Kubernetes, OpenStack, NVIDIA Magnum IO GPUDirect Storage (GDS) и т.д.

Одна из первых презентаций KumoScale (Изображение: Kioxia/Toshiba)

В уведомлении на сайте Kioxia говорится, что развивать платформу KumoScale после версии 3.22 не планируется. Для продукта теперь осуществляется только техническое обслуживание — компания намерена поддерживать существующих клиентов. Какие-либо комментарии по поводу своего решения Kioxia не даёт.

Платформа KumoScale начала создаваться в североамериканском подразделении Kioxia (тогда ещё Toshiba) в 2016 году. Со временем она обросла функциональностью, но, как отмечает Blocks & Files, дальнейшее развитие фактически сделало бы её прямым конкурентом продуктов, которые создают заказчики Kioxia.

Корпорация IBM, по сообщению ресурса Blocks & Files, разработала сервер и специализированное ПО, которые позволяют сформировать объектное хранилище S3 на основе ленточной библиотеки DiamondBack (TS6000).

IBM Diamondback обеспечивает высокую плотность хранения данных — до 27 Пбайт в расчёте на одну OCP-стойку. Применяются ленточные картриджи LTO-9, количество которых достигает 1548. При уровне сжатия 2,5:1 система способна вместить приблизительно 70 Пбайт информации. Максимальная пропускная способность составляет 17,2 Тбайт/час.

Источник изображения: IBM

Платформа DiamondBack S3 в дополнение к ленточной библиотеке включает x86-сервер, который отвечает за работу интерфейса S3 и взаимодействие с картриджами. Клиенты отправляют запросы Get/Put, а система считывает или записывает объекты с/на ленточный накопитель, установленный в одном из приводов.

Предлагаемое решение рассматривается в качестве локальной платформы для архивирования больших массивов данных. Перенести информацию на DiamondBack S3 сможет любой IT-специалист, знакомый с архитектурой S3. При этом заказчики получат в своё распоряжение относительно недорогую СХД большой ёмкости. Доступ к серверу осуществляется посредством Ethernet: это два порта 100GbE для S3-обращений и порт 1GbE для администратора.

Представленная концепция не нова. К примеру, компания XenData ранее анонсировала систему CX-10 Plus, которая предназначена для передачи архивных данных в облачные сервисы хранения и их зеркалирования на ленточных накопителях. Фирма Quantum добавила уровень объектного хранилища в свою систему хранения ActiveScale. Система BlackPearl компании SpectraLogic также может предоставлять интерфейс S3 для ленточной библиотеки.