Материалы по тегу: sds

15.03.2022 [19:09], Алексей Степин

Популярность флеш-массивов и программно определяемых СХД быстро растёт

Несмотря на активное продвижение облачных концепций, классические on-premise ЦОД всё ещё остаются важнейшей частью ИТ-инфраструктуры. Согласно отчёту Spiceworks Ziff Davis о тенденциях в мире аппаратного обеспечения, который приводит издание Blocks & Files, доля таких ЦОД сократилась с 33 % в 2020 году до 30 % сегодня. Ожидается, что к 2023 году на публичные облака придётся уже 50 % нагрузок вместо нынешних 40 %.

Однако можно также предположить, что текущие мировые события негативно отразятся на доверии к облачным системам. Более того, аппаратные компоненты до сих пор составляют большую часть затрат, отводимых компаниями на ИТ-инфраструктуру. Классические серверы никуда не исчезнут, разве что повысится степень интеграции с облачными решениями.

Что касается хранения данных, то доля SATA SSD в корпоративных серверах, согласно отчёту, составила 55 %, в течение двух лет ожидается прирост ещё на 14 %. 40 % используют более специализированные накопители SAS. На долю NVMe пока приходится лишь 37 %, но темп роста впечатляющий — в 2019 году лишь 19 % бизнес-пользователей применяли такие накопители, а в течение двух лет эта цифра вырастет до 54 %, считает SWZD. Особенно быстро растёт популярность NVMe в компаниях с числом сотрудников более 500.

Флеш-массивы также активно завоёвывают жизненное пространство: с 2019 года их доля возросла с 14 % до 24 %, а прогнозы обещают долю в 44 % в течение тех же двух лет. Как и с NVMe, наиболее активно осваивают All-Flash СХД достаточно крупные компании, поскольку такие решения, с одной строны, достаточно недешёвы, а с другой — у малого бизнеса редко встречаются нагрузки, требующие такой производительности.

Существенно возросла и доля программно определяемых СХД (39 %), средств автоматизации развёртывания и управления серверами (37 %), программно определяемых сетей (36 %) и интеграций с публичными облаками (36 %). А 34 % опрошенных SWZD компаний даже перенесли основные рабочие нагрузки в облако. Популярность такой интеграции будет лишь расти, и к концу 2023 года большинство компаний будут использовать гибридные платформы.

Как и в случае аппаратной части, зависимость от размера бизнеса тут аналогична — более крупные компании активнее внедряют новые технологии. Это также относится к подписочной модели использования в сервисах Dell APEX, HPE GreenLake, Lenovo TruScale и др.. Полностью с отчётом SWZD за 2022 год можно ознакомиться здесь.

Постоянный URL: http://servernews.ru/1062025
08.03.2022 [00:28], Владимир Мироненко

NVIDIA приобрела разработчика блочных SDS Excelero

NVIDIA сообщила о приобретении израильской компании Excelero, разработчика высокопроизводительных блочных систем хранения данных (СХД). Условия сделки не разглашаются. Excelero продолжит интегрировать свои технологии в стек корпоративного ПО NVIDIA, а её команда присоединится к израильскому подразделению «зелёных», где работет около 2800 сотрудников.

NVMesh от Excelero предлагает программно определяемое блочное хранилище с использованием подключенных по сети NVMe SSD, которое функционирует локально и/или облаке. За прошедшие годы Excelero получила на развитие $35 млн, включая инвестиции от Western Digital и Mellanox (ныне NVIDIA Networking). Продукты Excelero будут использоваться, в том числе, для HPC-решений NVIDIA с поддержкой DPU BlueField и RDMA.

 Источник: NVIDIA

Источник: NVIDIA

Нынешние продукты компании будут поддерживаться до завершения контрактов с заказчиками, но впоследствии бренд Excelero исчезнет. «NVIDIA явно создает набор основных компетенций на системном уровне благодаря своим приобретениям и новым продуктам, — прокомментировал приобретение NVIDIA Эрл Джозеф (Earl Joseph), генеральный директор Hyperion Research. Всего пару месяцев назад NVIDIA приобрела компанию по управлению кластерами высокопроизводительных вычислений Bright Computing.

Постоянный URL: http://servernews.ru/1061509
27.01.2022 [22:59], Алексей Степин

Kalista Phalanx ускорит дисковые массивы на базе SMR-накопителей

Технология SMR или «черепичной записи», при которой запись на пластинах жёсткого диска идёт с перехлёстом, позволяет добиться большей плотности размещения данных и увеличения итоговой ёмкости накопителя. Однако даже при небольшом изменении информации вся зона перехлёста должна быть считана и заново перезаписана, что делает SMR-накопители весьма неторопливыми на операциях записи и, что особенно неприятно, непредсказуемыми в плане латентности.

Компания Kalista.IO давно исследует возможность исправить этот недостаток — плодом её сотрудничества с Western Digital стало создание комплекса ПО Olympus. Двумя его основными компонентами стали модули Phalanx и Abacus. Как показали проведённые тесты, показатели IOPS выросли почти на 60% при на порядок более высокой стабильности отклика. А теперь Phalanx стал доступен в виде отдельного ПО для массивов типа JBOD, передаёт Blocks & Files.

В таком варианте реализация идей Kalista предельно проста: чтение происходит со всех дисков массива, но запись осуществляется только порциями на следующий диск в группе, так что первому диску не приходится постоянно выполнять перезапись SMR-блоков. При запросе на удаление данные только помечаются как удалённые. И по мере того, как фрагментация нарастает, ПО само переносит блоки данных на доступное пространство, после чего фрагментированный HDD помечается как пустой и вновь вносится в пул доступных для записи накопителей. Затем цикл с последовательным заполнением HDD повторяется.

Такой подход позволяет массиву на базе SMR-дисков выступать не хуже собрата, состоящего из CMR-накопителей, а в некоторых случаях система под управлением Phalanx работает даже несколько быстрее. Кроме того, исчезает т.н. «хвост латентности», свойственный обычным SMR-массивам, в которых часть дисков постоянно занята перезаписью больших блоков данных. Phalanx работает на стороне хост-системы, причём абсолютно прозрачно для ОС, приложений и всех вариантов хранилищ: файловых, блочных и объектных. Разные типы представления данных могут сосущестовать в составе одного массива Phalanx.

Постоянный URL: http://servernews.ru/1058906
06.01.2022 [13:07], Владимир Мироненко

WekaIO привлекла $73 млн от Hitachi Ventures и других крупных игроков

WekaIO, Inc., разработчик платформы управления и хранения данных для рабочих нагрузок ИИ и HPC, сообщил об успешном завершении раунда финансирования в размере $73 млн, который возглавила Hitachi Ventures. В результате общая сумма привлеченных WekaIO средств составила $140 млн. В раунде также участвовали HPE, NVIDIA, Micron, Cisco, MoreTech Ventures, Ibex Investors и Key 1 Capital. WekaIO сообщила, что направит привлечённые средства на ускорение выхода на рынок, а также на разработки и исследования.

WekaIO отметила, что в 2021 финансовом году, завершившемся в ноябре, ежегодный регулярный доход (ARR) вырос более чем в 2 раза, а число новых клиентов в 18 новых регионах увеличилось на 125 %. Более того, уже в первом квартале 2022 финансового года компания достигла целевого показателя по выручке за первые 14 дней. «Последний раунд [финансирования] позволит WekaIO более качественно и оперативно предоставлять услуги большему количеству клиентов и улучшить интеграцию с нашей экосистемой», — сообщил соучредитель и гендиректор компании Лиран Звидел (Liran Zvibel).

Джун Абэ (Jun Abe), председатель правления Hitachi Vantara LLC, отметил, что решение WekaIO является лидирующим на рынке и компания рада инвестировать в это перспективное с её точки зрения направление. Вторит ему Рик Шротри (Rick Shrotri), управляющий партнёр Digital Alpha. В том же ключе высказались и представители Hewlett Packard Pathfinder, Key 1 Capital, Ibex Investors, а также MoreTech Ventures.

Постоянный URL: http://servernews.ru/1057400
05.10.2021 [17:11], Алексей Степин

Kioxia представила технологию универсальных, программно определяемых SSD

В классических твердотельных накопителях обслуживанием NAND-ячеек занимается собственный контроллер, часто многоядерный и с солидными вычислительными возможностями. Это не самая оптимальная архитектура для гиперскейлеров, поэтому своё видение предлагает Kioxia. Её технология программно определяемых NAND-массивов должна сделать флеш-хранилища более универсальными, гибкими и лишёнными узких мест, накладываемых традиционной архитектурой SSD.

Несмотря на то, что собственный контроллер у SSD чаще всего работает прозрачно для ОС, гипервизоров и ПО, недостатков у такой архитектуры хватает: во-первых, характер работы с флеш-массивом ограничен прошивкой производителя и не всегда оптимален для разного рода нагрузок, во-вторых, современные процессоры и DPU на несколько порядков мощнее, а контроллер SSD может стать узким местом.

На корпоративном рынке встречаются специализированные накопители, отличающиеся от классических блочных устройств (например, SSD, хранящие данные в формате key:value), но все они также не отличаются гибкостью и взаимной совместимостью. Kioxia не без оснований считает, что только переход на полностью программно-определяемые массивы энергонезависимой памяти с унифицированной архитектурой ПО может стать действительно универсальным решением.

На конференции SNIA Storage Developer Conference компания представила своё видение программно определяемых универсальных накопителей. В основе технологии Software-Enabled Flash, впервые предложенной Kioxia в прошлом году, лежит унифицированный API-интерфейс, позволяющий гибко конфигурировать флеш-массив в зависимости от задач. К примеру, когда необходимость в использовании имеющейся ёмкости под базы данных заканчивается, массив можно переконфигурировать и использовать для запуска других приложений.

 Пример смешанной конфигурации SEF

Пример смешанной конфигурации SEF

SEF легко масштабируется от сотен до тысяч накопителей в единой системе. Более того, флеш-массив под управлением Kioxia SEF может функционировать одновременно в нескольких режимах: часть чипов NAND будет работать как обычные блочные устройства, часть в режиме ZNS, а некоторые — вообще в каком-нибудь специфическом, требующем особых условий режиме.

При нехватке дисковых ресурсов можно будет просто добавить унифицированный флеш-модуль, а внедрение новых протоколов требует лишь изменения в ПО, но не модернизации физического оборудования. Это может серьёзно снизить стоимость владения СХД и продлить ей срок активной эксплуатации.

 SEF имеет серьёзный задел на будущее, не требующий, однако, замены оборудования

SEF имеет серьёзный задел на будущее, не требующий, однако, замены оборудования

В отличие от некоторых имеющихся на рынке программно определяемых флеш-хранилищ, решение Kioxia использует ПО с открытым кодом. Доступный и унифицированный API поможет владельцу СХД на базе Kioxia SEF быстро разрабатывать приложения для реализации необходимых ему возможностей и режимов использования флеш-накопителей.

Предложение Kioxia выглядит привлекательно для владельцев крупных ЦОД и облачных систем, но пока неизвестно, поддержат ли инициативу SEF другие производители SSD, такие как Samsung, Micron, SK Hynix и Western Digital; впрочем, последняя компания является партнёром Kioxia и с её стороны выпуск накопителей с поддержкой SEF наиболее вероятен.

Постоянный URL: http://servernews.ru/1050602
02.08.2021 [21:24], Владимир Агапов

Nexustorage выпустила программно определяемую СХД Nexfs с поддержкой iSCSI, NFS, SMB и S3

Стартап из Новой Зеландии Nexustorage, зарегистрированный в начале этого года, довёл свою программно определяемую систему хранения данных (СХД) Nexfs до стадии общедоступного релиза. Основная идея продукта заключается в предоставлении универсального интеллектуального уровня хранения, который охватывает файловое, блочное и объектное хранение.

Будучи развёрнутым на стандартном оборудовании, Nexfs «склеивает» все устройства хранения, независимо от интерфейса, и предоставляет к ним единый уровень доступа посредством iSCSI, NFS, SMB и S3. Разработанное Nexustorage решение опирается на многоуровневый пул хранения, перенос и размещение данных в котором происходят автономно. Для его работы годится не только новое оборудование, но и давно существующее, что позволяет сэкономить, продлив срок эксплуатации существующих серверов и устройств хранения.

Масштабируемая файловая система Nexfs доступна бесплатно в Community-версии и работает в Centos, Ubuntu и Debian, являясь чисто программным решением. Разработчик предоставил к движку Nexfx и исходникам утилиты Nexfscli. Для работы требуется поддержка ФС xfs или ext4 с расширенными атрибутами. Nexfs содержит несколько ключевых технологических элементов, разработанных командой Nexustorage, среди которых SmartProtect, SmartTier и Nexassert.

SmartProtect — это инструмент защиты данных с помощью репликации с первичного хранилища на вторичное, совместимое с S3. Эта функция обеспечивает высокую гранулярность для создания копий файла при каждом изменении фрагмента данных. SmartTier позволяет перемещать фрагменты данных во вторичное хранилище в рамках пула, созданного и контролируемого Nexfs. В текущей версии поддерживается перемещение между 3 уровнями пула: SSD, SATA (HDD) и объектным хранилищем.

Обработка происходит на уровне субфайлов, которые разработчик называет блоками. Этот инструмент маскирует физическое расположение блоков данных и оптимизирует их размещение в зависимости от частоты использования — редко используемые данные переносятся на SATA-накопители, а «холодные» — в объектное или облачное хранилище. Когда инициируется доступ к мигрировавшему файлу, копируется не он целиком, а только необходимый фрагмент. Такой инструмент оказывается полезен как сам по себе, так и для SmartProtect.

Третий элемент, Nexassert — это технология, которая пока что находится на стадии патентования. В обычном режиме работы СХД файлы становятся неоднородными. Фрагменты данных распределяются между SSD, HDD и объектным/облачным хранилищем в зависимости от потребностей доступа и частоты использования. А эта технология позволяет осуществлять доступ к блокам данных там, где они размещены. Таким образом, в системе обеспечивается необходимый уровень QoS без лишних затрат.

Указанные функции сейчас не редкость, но организация блочного доступа с помощью iSCSI в такой архитектуре имеет ряд препятствий. Команда Nexustorage проделала большую работу, чтобы их преодолеть, и теперь их СХД поддерживает данный режим даже при использовании для хранения Amazon S3 и MinIO. Организация файлового доступа Nexfs чем-то напоминает Veritas VxFS с её функцией динамического многоуровневого хранения.

Постоянный URL: http://servernews.ru/1045776
15.05.2021 [02:44], Владимир Агапов

SoftIron представила СХД HyperDrive Performance+: AMD EPYC 3000 и NVMe-SSD в укороченном 1U-шасси

Компания SoftIron объявила о выпуске нового семейства систем хранения данных (СХД) HyperDrive Performance+, оптимизированных для развёртывания Ceph-хранилищ. Performance+ сочетает процессоры AMD EPYC Embedded 3000 и NVMe SSD в компактном 1U-шасси глубиной 638 мм.

Первые устройства нового семейства (модели HD61026 и HD61052) ориентированы на применение в периферийных вычислительных системах, к которым предъявляются требования малых задержек и высокой производительности в условиях ограниченных пространства, питания и охлаждения. Разработчик отдельно подчёркивает, что отсутствие PCIe-коммутатора позволяет снизить задержки.

Наличие двух портов 25GbE и энергопотребление менее 250Вт обеспечивают баланс производительности и мощности для периферийных и удаленных рабочих нагрузок. А благодаря совместимости с другими СХД SoftIron новинки можно использовать для формирования кеширующего слоя хранения для имеющегося хранилища на базе жёстких дисков, обладающего большей ёмкостью, но меньшей производительностью.

Как и все устройства хранения данных компании, эти модели оптимизированы для работы Ceph благодаря устранению узких мест в подсистеме ввода-вывода, подбору аппаратных компонентов и тюнингу ПО. Семейство продуктов HyperDrive Performance+ доступно как для покупки, так и для использования по модели как-услуга (as-a-Service).

Постоянный URL: http://servernews.ru/1039665
30.04.2021 [16:29], Владимир Мироненко

IBM анонсировала Spectrum Fusion, контейнеризированную версию Spectrum Scale для HCI и гибридных облаков

IBM анонсировала контейнеризированную версию масштабируемой параллельной файловой системы Spectrum Scale под названием Spectrum Fusion. Spectrum Fusion сочетает в себе возможности Spectrum Scale с программным обеспечением IBM для защиты данных. Новинка будет предлагаться и в составе решения для гиперконвергентной инфраструктуры (HCI), которое должно появиться во второй половине 2021 года, и как исключительно программное решение SDS, которое должно появиться в 2022 году.

Версия HCI, по словам разработчиков, станет первой в отрасли гиперконвергентной системой, ориентированной на контейнеры. Хотя конкурирующие системы HCI поддерживают контейнеры, большинство из них в большей степени ориентировано на виртуальные машины. Spectrum Fusion будет поддерживать многоуровневое хранение и получит интеграцию с Red Hat OpenShift для единой поддержки и оркестрации нагрузок в облаках, ЦОД и на периферии, а также с Red Hat Advanced Cluster Manager (ACM) для управления несколькими кластерами OpenShift.

Также Spectrum Fusion будет интегрирована с IBM Cloud Satellite, что позволит развёртывать и запускать приложения в локальных, периферийных и облачных средах, обеспечивая безопасный и унифицированный слой с набором облачных услуг для клиентов. Это позволит предприятиям полностью управлять всеми сервисами с помощью единой панели управления в незавимисости от того, где они развёрнуты физически.

Как утверждает IBM, Spectrum Fusion предоставляет клиентам упрощённый способ поиска данных в масштабах всего предприятия. Также IBM заявила, что организации будут управлять только одной копией данных, т. е. нет необходимости создавать дубликаты при перемещении рабочих нагрузок приложений в рамках компании, что упрощает функции управления и оптимизирует аналитику и ИИ.

Постоянный URL: http://servernews.ru/1038589
04.03.2021 [14:13], Сергей Карасёв

СХД IBM Elastic Storage System 5000 обеспечивает ёмкость до 13,5 Пбайт

Компания IBM в текущем месяце начнёт поставки системы хранения данных Elastic Storage System 5000 (ESS 5000), обеспечивающей высокую производительность и гибкие возможности масштабирования. Новинка ориентирована на крупные дата-центры, системы, связанные с высокопроизводительными вычислениями, искусственным интеллектом (ИИ) и пр.

Платформа ESS 5000 совмещает программно-определяемую СХД IBM Spectrum Scale и серверы на основе процессора IBM POWER9. Заказчикам будут доступны различные конфигурации — от одного блока с суммарной вместимостью 500 Тбайт до восьми систем общей ёмкостью 13,5 Пбайт.

Заявленная пропускная способность достигает 55 Гбайт/с, что позволяет справляться с очень высокими нагрузками. При этом специализированные средства управления помогают контролировать растущий объём данных и обеспечивают их оптимальное распределение по уровням хранения.

Кроме того, говорится о высокой надёжности. В частности, алгоритм избыточного кодирования обеспечивает восстановление информации и при этом требует меньше места по сравнению с репликацией данных. Во многих случаях восстановление может выполняться в фоновом режиме, не нарушая работу служб.

«Решение оптимизировано для современных задач ИИ и обеспечивает высокую производительность при работе с файлами небольшого размера и чрезвычайно быстрое выполнение операций с метаданными», — заявляет IBM.

Постоянный URL: http://servernews.ru/1034104
20.10.2020 [19:04], Юрий Поздеев

NetApp представила ONTAP 9.8 и программно определяемую СХД SolidFire

NetApp представила ONTAP 9.8, новую версию своей операционной системы для массивов хранения данных. Система представляет собой дальнейшее развитие ОС для управления данными, в том числе и в гибридном облаке. Основные особенности, на которые NetApp обращает внимание, это простота использования и удобство для администраторов системы.

ONTAP может применяться как в массивах компании, так и конвергентной инфраструктуре (например, FlexPod от Cisco) и для построения программно-определяемого хранилища на стандартных серверах или в облаке, с использованием расширения Cloud Volumes.

Кроме упрощения рутинных операций, новая система позволяет получить детальную аналитику по файловой системе, вплоть до каталогов и отдельных файлов. Но красивая визуализация разнообразных отчетов не единственное нововведение в ONTAP. Была улучшена эффективность хранения данных — NetApp гарантирует эффективность сжатия для всех рабочих нагрузок до 3:1, для VVOL 4:1 и 8:1 для VDI, а для моментальных снимков степень сжатия может достигать 10:1. Причем все операции компрессии и дедупликации работают на лету.

Еще одним нововведением в ONTAP 9.8 стала политика многоуровневого хранения для FabricPool, позволяющая размещать все данные в настроенном для этого облачном ресурсе. Это не единственное обновления для FabricPool, NetApp выделила следующие преимущества новой версии ONTAP:

  • Поддержка протокола S3;
  • Поддержка уровней тиринга от жестких дисков до конечных точек S3;
  • Увеличение периода тиринга для редко используемых данных с 63 до 183 дней;
  • Внедрение тегов для объектов, хранящихся в FabricPool;
  • Возможность динамического перемещения данных с облачных ресурсов обратно в массив;
  • Поддержка технологи SnapLock SLE со StorageGrid.

На этом нововведения не заканчиваются. Изменения затронули также механизм FlexGroup (единое пространство имен для файлов NFS/SMB для всего кластера из систем хранения) и FlexCache (система кеширования блоков, считываемых из файловых ресурсов NFS). Теперь кеширование распространяется и на файловое хранилище SMB.

В ONTAP 9.8 был добавлен механизм «Persistent Ports» или «постоянные порты» для сети хранения данных. Работает он следующим образом: при отказе контроллера FC LIF сохраняется при переходе на другой контроллер, при этом хост будет работать без каких-либо изменений в настройках. Это позволило устранить разрывы соединения для рабочих нагрузок и значительно снизить время восстановления операций ввода-вывода при отказе контроллера.

Появилась также и аппаратная поддержка SAN Gen 7. В новой системе максимальный объем LUN был увеличен с 16 до 128 Тбайт, а максимальный размер тома с 100 до 300 Тбайт.

Как мы видим, список изменений впечатляющий, многие из них касаются удобства использования массивов NetApp, другие же направлены на повышение эффективности хранения данных и повышение производительности. Обновление 9.8 будет доступно в ближайшее время.

Еще одна новинка от NetApp — обновленная программно-определяемая система хранения данных SolidFire. NetApp использует SolidFire как основу для своей облачной инфраструктуры, поэтому неудивительно, что после обновления OC ONTAP, компания взялась и за обновление программно-определяемой системы хранения данных, построенной на основе NetApp Element. Теперь NetApp предлагает использовать SolidFire SDS как основу для частного облака.

Раньше SolidFire была доступна к развертыванию только на предварительно интегрированном оборудовании NetApp, однако сейчас NetApp сделала возможным установку любое оборудование заказчика.

SolidFire позволяет создавать кластер из разных узлов: с высокой производительностью или высокой емкостью. NetApp предлагает SolidFire по подписке Keystone Flex с моделью оплаты «Pay-as-you-grow» (с оплатой по мере использования). Это может быть выгодным для компаний, которые не хотят делать большие вложения в инфраструктуру. Подобная модель будет востребована для рабочих нагрузок, которым свойственна явно выраженная сезонность.

Постоянный URL: http://servernews.ru/1023400
Система Orphus