Компании MaxLinear и Dell Technologies объявили о заключении соглашения о сотрудничестве, которое направлено на повышение производительности и эффективности систем хранения Dell PowerMax на основе накопителей NVMe SSD и процессоров Intel Xeon.

В рамках партнёрства платформы PowerMax 2500 и 8500 будут оснащены ускорителем MaxLinear Panther III. Это решение было представлено в августе 2022 года. Изделие содержит 16 аппаратных движков для хеширования, шифрования/дешифрования, компрессии/декомпрессии и сквозной защиты данных (RTV). Утверждается, что пропускная способность превышает 200 Гбит/c. Кроме того, обеспечивается дедупликация данных вплоть до 12:1.

В случае СХД семейства PowerMax применение MaxLinear Panther III позволит оптимизировать ресурсы хранения и снизить общую стоимость владения. Заявленный коэффициент сокращения объёмов данных достигает 5:1, тогда как эффективная вместимость массивов может достигать 18 Пбайт. При этом время отклика составляет менее 18 мкс. Обеспечивается высокий уровень безопасности, что важно при работе с критической информацией.

Источник изображения: Dell

Отмечается, что сотрудничество между MaxLinear и Dell знаменует собой важную веху в развитии решений хранения данных для бизнеса на основе ИИ. Утверждается, что массивы PowerMax 2500 и 8500 устанавливают новый стандарт для корпоративных СХД, позволяя организациям раскрыть весь потенциал своей инфраструктуры и стимулировать бизнес-инновации. Причём развёртываться СХД могут как в локальных ЦОД, так и в гибридных облачных средах.

Облачная платформа Amazon Web Services (AWS), по сообщению ресурса Datacenter Dynamics, закрыла сервис Snowmobile, в рамках которого предлагались услуги по физической транспортировке огромных массивов данных на грузовиках. Теперь в семействе AWS Snow доступны только предложения Snowball и Snowcone.

Служба Snowmobile была запущена в 2016 году. Идея заключалась в том, что клиенты могли перемещать свои данные в облако AWS на фурах, вместо использования традиционных сетевых каналов. В случае массивов, исчисляющихся петабайтами, это обеспечивало значительный выигрыш во времени.

Для Snowmobile использовались грузовики со 45-футовыми контейнерами с системами хранения общей вместимостью 100 Пбайт. Для загрузки данных из ЦОД клиента применялись линии с общей пропускной способностью на уровне 1 Тбит/с. При такой скорости заполнить весь доступный объём накопителей Snowmobile можно было примерно за 10 дней. После этого информация транспортировалась в ближайший регион AWS, где выгружалась на серверы облачного провайдера.

Изображение: AWS

Перемещение каждой фуры отслеживалось посредством GPS с возможностью передачи телеметрии через сотовые и спутниковые каналы. Стоимость услуг оценивалась в $0,005 за 1 Гбайт в месяц. Таким образом, для заказчиков, которым нужно было переместить в облако 100 Пбайт информации, услуга обходилась в $500 тыс.

Как сообщили в AWS, решение о закрытии Snowmobile связано с тем, что с момента её запуска появились другие сервисы и функции, которые сделали перемещение данных в облако удобнее, быстрее и дешевле для клиентов. Это, в частности, устройство Snowball Edge размером с чемодан, которое может быть оснащено быстрыми SSD-накопителями, а также более компактное решение Snowcone.

Российская компания Gagar>n, занимающаяся производством оборудования корпоративного класса и ПО, анонсировала OCP-серверы «Оракул Gen 3» и «Простор Gen 1», которые, как утверждается, подходят для решения широкого спектра задач. В основу новинок, разработанных в России, положена аппаратная платформа Intel.

Модель «Оракул Gen 3» может применяться для построения горизонтально-масштабируемых систем хранения и обработки данных. Сервер выполнен в формате 2OU и может размещаться в шкафу стандарта OCP Rack v2. Устройство способно нести на борту два процессора Intel Xeon поколения Ice Lake-SP (до 40 ядер; TDP до 270 Вт) и 32 модуля оперативной памяти DDR4-3200 суммарным объёмом до 8 Тбайт.

Доступны три слота PCIe 4.0 x16, а также по одному разъёму PCIe 4.0 x8 и OCP 3.0 x16. Основная подсистема хранения данных включает до восьми SFF-накопителей U.2 NVMe/SATA на передней панели с поддержкой горячей замены. Кроме того, в зависимости от модификации допускается дополнительная установка 24 изделий формата SFF с интерфейсом SAS/SATA или 16 накопителей SFF U.2/NVMe или же 12 накопителей LFF с интерфейсом SAS/SATA. Есть и два коннектора M.2 PCIe.

Источник изображений: Gagar>n

В свою очередь, сервер «Простор Gen 1» стандарта 2OU комплектуется двумя процессорами Intel Xeon Cascade Lake-SP (до 28 ядер; TDP до 205 Вт). Предусмотрены 12 слотов для модулей DDR4-2933 суммарным объёмом до 1,5 Тбайт. Есть по одному разъёму PCIe 3.0 x16 и OCP 2.0 x16.

Возможна установка до четырёх накопителей SFF NVMe SSD с поддержкой горячей замены, а также до 16 изделий SFF NVMe SSD или LFF SAS/SATA HDD. Плюс к этому доступен один коннектор М.2. Система подходит для организации файлового, блочного и объектного хранения.

Серверы оснащены сетевым портом 1GbE RJ-45 и портами USB 3.0 Type-A. Применяются вентиляторы охлаждения диаметром 80 мм. Заявлена совместимость с платформами РОСА, Red OS, Astra Linux, ALT Linux, Red Hat, VMware и др.

Компания Spectra Logic анонсировала ленточную библиотеку Spectra Cube для облачных платформ. По заявлениям разработчика, новинка обеспечивает простоту развёртывания, обслуживания и масштабирования. При этом по сравнению с другими решениями затраты на «холодное» хранение информации могут быть снижены в два раза и более.

Новинка выполнена в формате 42U. Габариты системы составляют 201,7 × 115,3 × 91,2 см, масса — 466,3 кг. Во фронтальной части расположен цветной сенсорный дисплей для мониторинга и управления.

Spectra Cube поддерживает работу с картриджами LTO-9, LTO-8, LTO-7 и LTO-6, максимальное количество которых составляет 1670 штук. При использовании изделий LTO-9 «сырая» суммарная вместимость достигает 30 Пбайт, ёмкость со сжатием — 75 Пбайт. Одновременно могут использоваться до 16 ленточных приводов полной высоты или до 30 приводов половинной высоты. Заявленная пропускная способность — до 32 Тбайт/ч. Возможно применение магазинов TeraPack на десять LTO-картриджей.

Источник изображения: Spectra Logic

Диапазон рабочих температур — от +16 до +32 °C. Энергопотребление в максимальной конфигурации составляет 1186 Вт. Применены источники питания стандарта 85 PLUS Gold с резервированием по схеме N+1. Значение MTBF (средняя наработка на отказ) — 250 тыс. часов при включенном питании.

В качестве программной платформы используется LumOS, которая обеспечивает безопасное локальное и удалённое управление, а также мониторинг. Говорится о совместимости с облачными хранилищами Amazon S3 и Amazon S3 Glacier. Для общих или многопользовательских сред возможна организация до 16 логических разделов. В дополнительном отсеке в верхней части ленточной библиотеки можно размещать стоечные устройства, включая серверы и хранилище Spectra Logic BlackPearl.

Компания Infortrend анонсировала высокопроизводительную СХД EonStor GS 5024UE в форм-факторе 2U на аппаратной платформе Intel. Новинка предназначена для работы с ресурсоёмкими приложениями, включая задачи НРС и ИИ.

Устройство заключено в корпус с габаритами 449 × 88 × 830 мм. Задействован неназванный процессор Xeon с 12 вычислительными ядрами. Объём оперативной памяти DDR5 в базовой конфигурации составляет 128 Гбайт, в максимальной — 1 Тбайт. В конструкцию входят два контроллера с функцией аварийного переключения.

Источник изображения: Infortrend

Во фронтальной части СХД расположены отсеки для 24 SFF-накопителей U.2 NVMe SSD. Суммарная внутренняя вместимость может превышать 700 Тбайт. Пропускная способность достигает 50 Гбайт/с, показатель IOPS (операций ввода/вывода в секунду) — до 1,3 млн. Задержка заявлена на отметке 0,3 мс. Возможна организация массивов RAID 0, 1, 3, 5/5F, 6/6F, 10, 30, 50, 60.

Поддерживаются протоколы CIFS/SMB 2.0/3.0, NFS v2/3/4, AFP 3.1.12, FTP/FXP (vsftp 2.3.4), WebDAV (httpd 2.4.6), FC, SAS, iSCSI, RESTful API. Гарантирована совместимость с Windows Server, Red Hat Enterprise Linux, SUSE Linux Enterprise, Sun Solaris, macOS X, VMware, а также с облачными платформами Amazon S3, Microsoft Azure, Alibaba Cloud, Google Cloud, Baidu Cloud, Tencent Cloud, OpenStack, Wasabi, Backblaze Cloud, hiCloud и Yandex Cloud.

Доступны варианты EonStor GS 5024UE с портами FC32 (×4), 25GbE SFP28 (×2 или ×4), 100GbE QSFP28 (×1 или ×2), SAS-3 (×2). Установлены два блока питания мощностью 1600 Вт с сертификатом 80 PLUS Titanium. Диапазон рабочих температур — от 0 до +40 °C.

Компания Fujifilm анонсировала ленточное хранилище Kangaroo для крупных корпоративных пользователей, которым необходимо архивировать большие объёмы информации. К выпуску также готовится модификация Kangaroo Lite, ориентированная на предприятия малого и среднего бизнеса.

Kangaroo — это полностью самостоятельное решение класса «всё в одном», у которого все компоненты заключены в корпус на колёсиках для удобства перемещения. Габариты составляют 113 × 60,4 × 104 см.

Источник изображения: Fujifilm

Доступны три модификации системы — Kangaroo S, Kangaroo M и Kangaroo L. Их серверная часть базируется на неназванном процессоре с 16 ядрами, который работает в связке с 128 Гбайт DDR5. В оснащение входят консоль KVM с монитором и клавиатурой, а также ИБП (3 кВА). Версии Kangaroo M и Kangaroo L оснащены внутренним хранилищем вместимостью 38,4 Тбайт; поддерживаются массивы RAID 1/6.

Источник изображения: Fujifilm

Все модификации рассчитаны на 120 ленточных картриджей (+ два чистящих картриджа). Варианты Kangaroo S и Kangaroo M оборудованы двумя приводами LTO-9, модель Kangaroo L — четырьмя. Применяется фирменное ПО Fujifilm Object Archive. Заявленный срок хранения информации достигает 30 лет.

Стандартная версия Kangaroo вместимостью 1 Пбайт обойдётся в €350 тыс. Модификацию Kangaroo Lite, способную хранить около 100 Тбайт данных, планируется продавать по цене €100 тыс. Сборка систем осуществляется в Германии.

Компания VAST Data адаптировала своё ПО Data Platform для облачной платформы Google, что позволит пользователям развёртывать на ней кластеры хранения VAST, пишет ресурс Blocks & Files. VAST предлагает платформу управления данными. В 2023 году она адаптировала софт для облачной платформы AWS. Вероятно, не за горами и появление решений VAST в Microsoft Azure.

В настоящее время VAST сосредоточилась на технологиях ИИ, заключая сделки с поставщиками кластеров ускорителей, такими как CoreWeave, и занимается разработкой систем класса Thinking Machines. VAST заявила, что её ПО на платформе Google Cloud открывает путь к бесшовному гибридному и облачному решению, которое предлагает централизованное управления данными посредством глобального пространства имён для файлов, объектов и структурированных данных.

Источник изображения: VAST Data

VAST сообщила, что её платформа будет способствовать в Google Cloud упрощению и ускорению работы, и обеспечению безопасности конвейеров ИИ в гибридном облаке. Также сообщается, что ПО VAST в Google Cloud снижает расходы на облако за счёт глобального сокращения данных, минимизируя количество копий данных. VAST утверждает, что разработка ИИ-проектов и обработка рабочих нагрузок станут эффективнее с помощью базы данных VAST и Apache Spark.

В описании решения VAST говорится, что присутствие в Google Cloud означает, что «использование локальных данных в GCP никогда не было проще благодаря глобальному пространству имён, что расширяет возможности сотрудничества и инноваций». «Это меняет правила игры в области эффективного управления и использования данных в гибридных средах, значительно повышая производительность и экономическую эффективность в облачных проектах искусственного интеллекта и аналитики», — утверждает компания.

Компания Western Digital анонсировала устройство Ultrastar Transporter — это переносная система хранения данных на основе SSD, позволяющая физически перемещать большие объёмы информации между ЦОД или другими площадками, не используя сетевые каналы.

Ultrastar Transporter представляет собой полноценный сервер хранения, а не просто внешний накопитель. Устройство выполнено в форм-факторе 2U с габаритами 86,6 × 482,6 × 400 мм, а масса составляет 14,96 кг. При транспортировке сервер помещается в специальный чемодан на колёсиках, что обеспечивает не только удобство, но и дополнительную защиту.

Источник изображений: Western Digital

СХД оснащена материнской платой ASRock Rack с процессором Intel Xeon 4310 поколения Ice Lake-SP (12С/24T; 2,1–3,3 ГГц). Чип работает в тандеме со 128 Гбайт оперативной памяти DDR4. Установлены два накопителя NVMe SSD SN740 NVMe на 2 Тбайт каждый (RAID 1). Имеются четыре слота PCIe 4.0 х16 и три слота PCIe 4.0 х8. Для хранения данных задействованы NVMe SSD SN650 суммарной вместимостью 368 Тбайт (24 × 15,36 Тбайт), объединённых парой адаптеров ATTO ExpressNVM S4FF.

Среди доступных интерфейсов — два сетевых порта 200GbE QSFP112 (NVIDIA ConnectX-7), два порта USB 3.0, последовательный консольный порт DB9 и разъём D-Sub. Установлена также дополнительная сетевая карта с двумя портами 10GbE RJ-45. Диапазон рабочих температур — от 0 до +43 °C. Питание обеспечивает блок мощностью 1300 Вт с сертификатом Titanium. СХД поддерживает установку Ubuntu Server 22.04.

В качестве сфер применения Ultrastar Transporter названы геофизическая и сейсмическая разведка, дистанционные исследования, государственные и военные проекты, отрасль безопасности и пр. Говорится о соответствии стандарту FIPS 140-2. Гарантия составляет три года. Похожие компактные решения предлагают гиперскейлеры: AWS Snowball (до 210 Тбайт), Azure Data Box (до 100 Тбайт), Google Transfer Appliance (до 300 Тбайт).

Суд присяжных в США, по сообщению Datacenter Dynamics, признал облачную платформу Amazon Web Services (AWS) виновной в нарушении патентов чикагской компании Kove. За незаконное использование чужих технологий на AWS наложен штраф в размере $525 млн.

Претензии Kove связаны с тем, что ответчик нарушил права на разработки, связанные с системами и методами управления хранилищем данных, а также с поиском и извлечением информации. По заявлениям Kove, AWS без разрешения применяет соответствующие технологии в сервисах S3 и DynamoDB. В 2023 году Kove направила аналогичный иск против Google — это дело в настоящее время находится на стадии рассмотрения.

Источник изображения: pixabay.com

Kove подала иск против AWS в декабре 2018 года. В материалах дела упомянуты три американских патента Kove — №7,814,170, №7,103,640 и №7,233,978. Изобретателями значатся доктор Джон Овертон (John Overton) и доктор Стивен Бейли (Stephen Bailey), причём Овертон является генеральным директором Kove. В своей жалобе истцы заявляют, что технологии Kove имеют большое значение для AWS, поскольку объём данных, хранящихся в облаке Amazon, растёт в геометрической прогрессии, а её облачные сервисы столкнулись с ограничениями в плане обработки и извлечения огромных массивов информации.

В 2020 году AWS выступила с опровержениями, отрицая нарушение рассматриваемых патентов и утверждая, что они якобы недействительны и, следовательно, не имеют исковой силы. Однако аргументы AWS не были учтены в суде, а на саму облачную платформу наложен штраф. Вместе с тем присяжные отклонили обвинения в том, что AWS нарушила патенты умышленно. Облачная платформа заявила, что не согласна с вердиктом, и сообщила о намерении подать апелляцию.

Необходимость надёжной системы резервного копирования для любого бизнеса неоспорима. Хотя бы потому, что порой только наличие сделанных вовремя копий может спасти предприятие от срыва налаженных процессов и серьёзных материальных убытков. В России это направление активно развивается и всё больше компаний предлагают свои решения для резервного копирования, в том числе и аппаратные. К последним относится и новинка YADRO — TATLIN.BACKUP.

YADRO давно и успешно занимается созданием различными СХД, но TATLIN.BACKUP.M — первая модель в новом для компании сегменте. Основная идея семейства TATLIN.BACKUP — непрерывность всех процессов: резервного копирования, восстановления, защиты от кибервымогателей, бесшовного расширения хранилища, сквозные (E2E) интеграция и верификация и многое другое. Новая платформа спроектирована с учётом возможной поддержки любых программных систем резервного копирования и может быть основой для создания референс-дизайнов программно-аппаратных комплексов защиты данных.

Источник изображений: YADRO

Главной особенностью TATLIN.BACKUP.M является крайне эффективное сжатие информации. Во-первых, используется глобальная многопоточная дедупликация, причём обработка данных происходит блоками переменной длины (content defined chunking), что повышает эффективность использования дисковых ресурсов. Во-вторых, всё осуществляется «на лету», а это даёт возможность идентификации уже имеющихся в хранилище данных за счёт поиска по метаданным в оперативной памяти и SSD-кеше. Это и ускоряет поиск, и снижает нагрузку на основные накопители.

Для компрессии используется современный алгоритм ZSTD, не сильно нагружающий хост-процессоры (не более 1 %, по словам создателей системы). При этом итоговый коэффициент сжатия при активных дедупликации и компрессии достигает значений 6:1 и выше при производительности до 15 Тбайт/час. Сохранность данных обеспечивается использованием RAID6-массивов как для основных дисков NL-SAS, так и для кеширующих SSD, что позволяет избежать потери информации даже при выпадении двух накопителей из массива. При этом сами накопители можно заменить «на горячую». Кроме того, задействована фирменная технология T-RAID со схемой защиты 10+2.

Хранилище устойчиво к потере питания в любой момент времени, оно также нечувствительно к различным программным сбоям, ошибкам DRAM или самих накопителей. Корректность сохраняемых данных гарантируется применением сквозной верификации записи, реализованной аппаратно вплоть до накопителя. Кроме того, используется механизм CoW, который позволяет откатиться к заведомо консистентному состоянию данных в случае сбоя. Другим элементом защиты является упреждающая журнализация, при которой информация о производимых с ФС изменениях вносятся в журнал предзаписи (write-ahead log).

Периодически система осуществляет тестовое считывание (RAID Scrubbing) данных для сверки контрольных сумм, при их несовпадении происходит автоматическое восстановление. Также в фоновом режиме постоянно работает сборщик мусора, освобождающий хранилище от неиспользованных блоков и проверяющий блоки данных на консистентность. Что касается восстановления данных, то система гарантирует соблюдение RTO (Recovery Time Objectives) и RPO (Recovery Point Objectives).

Ещё одно важное преимущество TATLIN.BACKUP — механизм передачи уникальных данных из источника T-Boost, оригинальная разработка инженеров YADRO. Это решение расширяет возможности систем TATLIN.BACKUP и кратно повышает скорость передачи данных, снижая нагрузку на сеть, что крайне важно для корпоративных заказчиков.

В состав TATLIN.BACKUP.M входит один двухпроцессорный контроллер высотой 2U, содержащий шесть 3,84-Тбайт NVMe SSD (3+2 в массиве, 1 hot spare) для метаданных и кеша и четырнадцать (10+2 в массиве, 2 hot spare) жёстких дисков LFF ёмкостью 8 или 16 Тбайт каждый. К контроллеру можно подключить до четырёх дисковых полок (2U, 12 × LFF SAS HDD 8/16 Тбайт). В максимальной конфигурации «сырая» ёмкость достигает 690 Тбайт, а эффективная — более 4 Пбайт при сжатии 6:1. Объём RAM контроллера — 2 Тбайт.

Сетевая часть на данный момент представлена четырьмя портами класса 10/25GbE (полки подключаются по другому интерфейсу). Система поддерживает файловый доступ NFSv3 и SMBv2/v3. Для уведомлений и мониторинга используется SNMP v3. Управляться контроллер может с помощью web-интерфейса или из командной строки. Также есть интеграция с LDAP/AD. Стоимость лицензирования TATLIN.BACKUP.M определяется исключительно эффективной ёмкостью системы с точностью до Тбайт и не предполагает какого-либо ограничения функциональных возможностей.

Этим кратким обзором возможности TATLIN.BACKUP.M не ограничиваются: запланировано дальнейшее развитие системы, наделение её новыми возможностями, включая дедупликацию на источнике, поддержку VLAN и интеграцию с российским ПО. В дальнейшем должна появиться поддержка Fibre Channel, асинхронная репликация и ряд других возможностей. А вслед за TATLIN.BACKUP.M в следующем году должны появиться двухконтроллерная СХД петабайтного класса TATLIN.BACKUP.L и TATLIN.BACKUP.VE для развёртывания в виртуальных средах.