Подразделение NetApp под названием Cloud Data Services (CDS) с каждым годом расширяет свою долю в рамках портфеля решений компании. На данный момент NetApp Cloud Volumes — это платформа хранения №1 (NFS, SMB), которая продается Microsoft в качестве основного решения, также это решение присутствует на платформах Google Cloud и AWS.

После приобретения Spot NetApp расширила свой портфель услуг по оптимизации вычислений и хранения в мультиоблачной среде, а с помощью другого своего продукта, CloudJumper, может предоставлять службу виртуальных рабочих столов (VDI) в облаке. Для аналитики в реальном времени у компании есть Cloud Insights. Таким образом, NetApp создала достаточно обширную экосистему для облака и уже давно не является компанией, выпускающей только СХД.

NetApp рассчитывает увеличить выручку за счет увеличения доли all-flash массивов и расширения CDS. На CDS у компании большие планы и к 2025 году планируется выручка более $1 млрд в год (для сравнения: в 1 квартале этого года выручка NetApp составила $178 млн). Это серьезная заявка, показывающая насколько для компании важно облачное подразделение. Причем рост этот должен быть без ущерба для остальных направлений компании.  Дополнительным драйвером роста должны стать объектные  all-flash  хранилища. 

Теперь несколько слов о будущих обновлениях СХД NetApp среднего уровня: по мнению компании практически все высокопроизводительные нагрузки будут переведены на all-flash решения в ближайшем будущем, этому будет способствовать снижение стоимости SSD и внедрение новых технологий, повышающих скорость доступа. По оценкам NetApp, среднегодовой темп роста для all-flash систем составляет 9% процентов, а для объектных хранилищ — 13%. Объектные хранилища применяются в основном в сфере медиа, телевидения, а также в нефтегазовой отрасли. Несмотря на прогнозируемый прирост объектных хранилищ в среднем по рынку в 13%, NetApp ежегодно увеличивает продажи в этом сегменте на 50% последние пять лет, что значительно выше средних показателей. 

Остается надеяться, что NetApp не станет только облачной компанией и будет дальше развивать свои модели СХД.

Компания QNAP подготовила к выпуску стоечное сетевое хранилище данных TS-H2490FU, рассчитанное на использование в корпоративном секторе. Новинка обеспечивает высочайшую производительность благодаря возможности установки твердотельных NVMe-накопителей U.2 PCIe 3.0 x4 и наличию скоростных сетевых портов.

Основа системы — аппаратная платформа AMD. Может быть задействован процессор EPYC 7232P с восемью ядрами (3,1–3,2 ГГц) или EPYC 7302P с шестнадцатью ядрами (3,0–3,3 ГГц). Объём оперативной памяти DDR4 ECC в стандартной конфигурации составляет 64 или 128 Гбайт, в максимальной — 4 Тбайт.

Предусмотрены отсеки для 24 твердотельных SFF-накопителей U.2 (PCIe 3.0 x4 NVMe) в форм-факторе 2,5 дюйма. Есть по два слота расширения PCIe 4.0 x4 и x8, один слот PCIe 4.0 x16 и два разъёма USB 3.1.

За подключение к компьютерной сети отвечают два порта 2.5Gbe. Кроме того, в оснащение изначально входят две карты расширения, каждая из которых предоставляет два порта 25GbE (SFP28 SmartNIC). Таким образом, доступны четыре сетевых порта с пропускной способностью до 25 Гбит/с.

Хранилище имеет габариты 88,3 × 480,97 × 510,23 мм. Устройство наделено двумя блоками питания мощностью 1100 Вт, благодаря чему обеспечивается бесперебойная работа и уменьшается возможное время простоя. 

Рынок внешних систем хранения данных корпоративного класса в регионе EMEA (Европа, включая Россию, Ближний Восток и Африка) в условиях пандемии пошел на спад. Об этом говорят результаты исследования, проведённого аналитической компанией International Data Corporation (IDC).

Во втором квартале текущего года объём указанного рынка в денежном выражении составил приблизительно $1,70 млрд. Это на 8,5 % меньше прошлогоднего результата, когда выручка поставщиков равнялась $1,86 млрд.

Отмечается, что продажи в Западной Европе сократились в годовом исчислении на 12,4 %. В то же время в регионе CEMA (Центральная и Восточная Европа, Ближний Восток, Африка) зафиксирован рост на 2,7 %.

Продолжают завоёвывать популярность хранилища на основе флеш-памяти All Flash Array (AFA): рост в данном сегменте составил 9 %, а доля таких систем достигла 43,6 % в общем объёме рынка.

Спрос на гибридные флеш-массивы (HFA) за год уменьшился более чем на 20 %; доля таких систем составила 37,4 %. Решения на основе жёстких дисков заняли 19 % рынка, а спрос на них уменьшился на 15 %.

В рейтинг ведущих игроков отрасли внешних систем хранения данных корпоративного класса в регионе EMEA входят Dell EMC (29,7 %), Hewlett Packard Enterprise (15,0 %), NetApp (13,2 %), IBM (8,6 %) и Hitachi (5,6 %). 

Исследование, проведённое компанией International Data Corporation (IDC), говорит о том, что мировой рынок внешних OEM-систем хранения данных корпоративного класса во втором квартале текущего года оказался «в минусе». Поставки в денежном выражении уменьшились на 5,0 %, составим немногим менее $6,3 млрд.

Ведущим производителем по итогам прошлого квартала стала компания Dell Technologies с долей в 27,0 % в денежном выражении. На втором месте с большим отставанием находится HPE/New H3C Group — 10,5 %. Замыкает тройку NetApp с результатом в 9,8 %. Далее следуют IBM и Huawei: доли этих компаний составили соответственно 8,1 % и 7,7 %.

Отмечается, что суммарная вместимость хранилищ, реализованных за указанный трёхмесячный период, поднялась на 5,1 % в годовом исчислении, достигнув 17,1 экзабайта.

В сегменте систем на основе флеш-памяти All Flash Array (AFA) отмечен рост на 7,7 % по сравнению со второй четвертью 2019 года: суммарная выручка поставщиков таких решений составила $2,5 млрд. Такой же результат показало направление гибридных флеш-хранилищ Hybrid Flash Array (HFA), но продажи здесь сократились в годовом исчислении на 8,7 %. 

Cohesity объявила о серьезных изменениях программного обеспечения Cohesity DataPlatform, которые направлены на улучшение возможностей управления данными в all-flash решениях от ключевых партнеров по альянсу, в частности Cisco и HPE. Новая технология I/O Boost от Cohesity обеспечивает консолидацию данных, снижает совокупную стоимость владения (TCO) и обеспечивает высокую производительность резервного копирования и анализа данных.

Твердотельные накопители хорошо зарекомендовали себя за последние годы и вытеснили HDD из задач, требующих высокой производительности и низких задержек доступа к данным. Цена на SSD неуклонно снижается, однако остается все еще достаточно высокой, затрудняя распространение all-flash решений. Cohesity модернизирует свое программное обеспечение, внедряя дополнительные функции резервного копирования и управления данными.

Основные преимущества новой версии Cohesity DataPlatform для all-flash:

• Высокая пропускная способность в сочетании с технологиями экономии места позволяют сократить количество лицензированных узлов, что делает решение более экономичным;
• Высокая производительность резервного копирования и восстановления данных, по сравнению с решениями на базе HDD;
• Ускорение рабочих нагрузок за счет применения all-flash решений, особенно заметное для операций с интенсивным использованием метаданных, таких как дедупликация, репликация и резервное копирование;
• Обновление программного обеспечения без прерывания доступа к данным;
• Поддержка протоколов NFS, SMB, S3;
• Большой выбор поддерживаемых платформ: заказчики могут выбирать сертифицированные корпоративные решения, в частности Cisco UCS C220 M5, HPE Proliant DL360 gen10, Dell PowerEdge R640 и многие другие.

Новая версия программного обеспечения Cohesity DataPlatform уже доступна в трех вариантах: Base, Standard и Premium.

Несмотря на рост популярности систем хранения данных, основанных исключительно на применении энергонезависимой флеш-памяти, гибридные решения, сочетающие в себе HDD и NAND, встречаются довольно часто — «механическая» часть достаточно объёмна и при этом весьма дешева. Но компания Pure Storage, крупный производитель и поставщик систем хранения данных, полагает что её второе поколение флеш-массивов FlashArray//C станет убийцей гибридных систем.

Модуль FlashArray//C может нести как QLC, так и TLC NAND

Компания основана ещё в 2009 году и с тех пор выпустила ряд интересных продуктов. Из последних её разработок можно отметить FlashArray//X R3: массив хранения данных, содержащий не только флеш-память, но и кеширующую часть на базе Optane, памяти, отличающейся великолепными показателями на случайных операциях.

В серии FlashArray//C упор делается скорее на объёмы, нежели на рекордную производительность — она предназначена для систем класса Nearline. О разработке массивов на базе QLC NAND было известно ещё в прошлом году, а первое поколение в этой серии использовало сочетание QLC и TLC NAND.

Второе поколение FlashArray//C характеризуется ориентацией на сценарии Tier 2: тестирование и разработку ПО, резервное копирование данных, хранение почты и архивных данных, репозитории и другие задачи того же класса. Pure Storage с гордостью заявляет, что её новое решение стоит дешевле аналогичных гибридных систем, использующих механические HDD. Достигнута удельная стоимость хранения данных менее $0,50 за «чистый» гигабайт.

Такие показатели удалось получить за счёт активного применения QLC NAND, заодно нарастив предельную ёмкость одного модуля с 18,3 до 24,7 Тбайт. Предельная общая ёмкость достигла 1,8 Пбайт в 9 юнитах, а за счёт дедупликации и сжатия финальная цифра может достигать 5,2 Пбайт. И это не предел, позднее в этом году компания планирует представить модули объёмом 49 Тбайт и повысить финальную ёмкость всей системы до 2,6 «чистых» петабайт (10,4 Пбайт после компрессии и дедупликации).

Накопители в FlashArray//C используют NVMe, но представляют собой не типичные SSD, а массивы типа DirectFlash, за работу которых отвечает специальная фирменная операционная система Purity OS. Она следит за надёжностью с точностью до одного кристалла NAND, предоставляет телеметрические данные каждого блока, а также предлагает постоянный предсказуемый уровень производительности.

Программная часть использует предиктивную аналитику: массив постоянно «учится», что позволяет ему предоставлять пользователям информацию о необходимости замены того или иного накопителя ещё до наступления критического сбоя. Поддерживается также упрощённая процедура миграции с массивов серии //X и обратно, а также асинхронная репликация с //X на //C.

Новое поколение Pure Storage FlashArray//C доступно уже сейчас. Конфигурация ёмкостью 1,3 Пбайт обойдётся заказчику в менее чем $650 тыс., версия с 31 накопителем ёмкостью 768 Тбайт будет стоить до $384 тыс. Новинки, по словам компании, существенно дешевле конкурентов: к примеру, при аналогичной ёмкости 768 Тбайт массив StorONE будет стоить почти $595 тыс. Подробности можно узнать на сайте производителя.

Мы уже рассказывали о СХД WD OpenFlex E3000. Эти системы характеризуются уникальным форм-фактором, в рамках которого каждый твердотельный модуль имеет ёмкость до 61,4 Тбайт и поддержку NVMe-over-Fabrics. А сейчас WD представила пополнение семейства — модуль F3200, пришедший на смену серии F3000.

Шасси WD OpenFlex E3000 и модуль F3200 (сверху)

Составные системы хранения данных WD OpenFlex состоят из шасси E3000 и модулей F3x00; наибольший интерес представляют именно модули. Как правило, в современных флеш-СХД массово используются накопители стандартных форм-факторов: SATA/SAS, U.2 или линеечные EDSFF. Все они достаточно компактны. Но в OpenFlex накопителем является более крупный модуль, который, впрочем, также можно отнести к «линеечным».

В отличие от традиционных SSD, такой модуль сразу оснащается парой портов QSFP28 для 50GbE-подключений к сети. Линейная производительность при этом составляет до 12 Гбайт/с, а ёмкость варьируется от 12,8 до 61,4 Тбайт. В шасси таких «дисков» может устанавливаться до десяти.

Немного позднее модель F3000 сменилась более новой F3100, которая смогла похвастаться скоростями случайных операций до 2,1 млн IOPS при задержке, не превышающей 48 мкс. В ней компания перешла на использование 96-слойной памяти 3D TLC NAND. Новейшая модель F3200, представленная сейчас, не изменилась с точки зрения ёмкости, потолок всё так же составляет 61,4 Тбайт. Однако над скоростными показателями WD поработала: производительность на случайных операциях выросла на 48%, на линейных скорость записи увеличилась на 22%.

Доступные варианты накопителей WD OpenFlex 3200

А вот надёжность даже несколько снизилась: если ранее серия делилась на модели с выносливостью 1 DWPD и 3 DWPD, то теперь наиболее ёмкая модель гарантирует всего 0,8 DWPD, хотя есть варианты F3200 и выдерживающие две полные перезаписи в день в течение гарантийного срока.

Интерфейс не изменился, это всё так же пара портов 50GbE с поддержкой NVMe-oF и RoCE (RDMA over Converged Ethernet), но обновилось программное обеспечение: появилась поддержка VLAN tagging, secure erase, расширенного пространства имён NVMe. Поддерживается набор открытых API Open Composable, за счёт чего обеспечивается полноценный мониторинг и удалённое управление системой хранения данных.

Стоимость самого ёмкого модуля F3200 в серии составляет почти $32 тысячи, а младшую, но самую быструю по времени отклика модель объёмом 12,8 Тбайт можно приобрести и за $13,8 тысяч. Подробности можно узнать на сайте Western Digital.

Также напомним, что в рамках обновления ИТ-инфраструктуры платформа WD OpenFlex будет использоваться в Международном центре исследований головного и спинного мозга, который располагается в Париже: объёмы данных в современных нейрофизиологических исследованиях огромны и сочетание скорости и ёмкости WD OpenFlex придётся здесь как нельзя более к месту.

Компания Pure Storage, разработчик СХД, и компания Cohesity, занимающаяся системами управление данными, объявили о стратегическом партнёрстве, благодаря которому было представлено решение Pure FlashRecover на основе платформы Cohesity. Это первое в отрасли совместное all-flash решение по защите информации, обеспечивающее быстрое восстановление данных и их повторное использование.

Pure FlashRecover предоставляет полный перечень возможностей резервного копирования и восстановления, которые требуются компаниям для быстрого восстановления данных в случае аварийной ситуации или атаки вируса-вымогателя. Решение обеспечивает защиту данных по схеме «ФФО» (Flash-to-Flash-to-Cloud, F2F2C), а также быстрое независимое масштабирование обработки, пропускной способности и ёмкости СХД для максимально эффективного использования всех ресурсов.

Также решение позволяет повторно использовать данные резервного копирования для аналитики и DevOps, эффективно применяя СХД на унифицированной быстрой платформе FlashBlade для файлов и объектов. Решение Pure FlashRecover, объединившее ПО Cohesity DataProtect с унифицированной платформой Pure FlashBlade, обеспечивает следующие возможности:

• Производительность: до 3-х раз более быстрое резервное копирование и восстановление пропускной способности по сравнению с решениями на базе HDD;
• Возмжность восстановления тысяч виртуальных машин и до 1 Пбайт данных в день;
• Интеграция: закупка, развертывание и поддержка предоставляются через единую точку входа;
• Масштабируемость: дезагрегированные вычисления и хранение позволяют обеспечить независимое масштабирование для обработки резервных копий/восстановления, пропускной способности и ёмкости хранилища.
• Простоту в управлении.

В настоящее время решение Pure FlashRecover на базе Cohesity тестируется общими клиентами обеих компаний и будет доступно в США в 4-м квартале 2020 года, в других странах — в следующем году.

Стандарту PCI Express 3.0 исполнилось уже 10 лет — его спецификации были впервые утверждены в ноябре 2010 года. С тех пор технологии хранения данных успели существенно продвинуться, набрал популярность протокол NVMe и производительности PCIe 3.0 начинает не хватать. Следующая, вдвое более быстрая версия PCI Express понемногу проникает на рынок. Именно её использует необычная all-flash СХД One Stop Systems StorageBox 2000.

Компания One Stop Systems (OSS) известна на рынке HPC как крупный поставщик различного рода систем расширения, основанных на PCI Express, хотя предлагает она также и решения на базе NVLink, InfiniBand и Ethernet. OSS активно сотрудничает с Intel, Xilinx, NVIDIA и Western Digital HGST, её решения активно используются в медицинской, финансовой, нефтегазовой и оборонной отраслях.

OSS StorageBox 2000

На этот раз речь пойдёт о новой модульной системе хранения данных StorageBox 2000, которая интересна как своими опциями, так и тем, что способна всерьёз реализовать потенциал, заложенный в PCI Express 4.0. Внешне StorageBox 2000 выглядит как ничем не примечательный 2U-корпус 24 дисковыми корзинами «горячей замены». Однако все 24 отсека могут быть заняты накопителями PCIe NVMe с поддержкой PCIe 4.0 в форм-факторах U.2 или U.3.

При использовании SSD объёмом 30 Тбайт общий объём хранимых данных может достигать 720 Тбайт на каждые 2 юнита стойки. Суммарная пропускная способность накопителей может достигать 186 Гбайт/с (7,76 Гбайт/с на каждый порт U.3). Но интересно даже не это, а то, что StorageBox 2000 имеет три разные ипостаси.

Накопители можно заменять на лету блоками по восемь единиц

В самом простом варианте JBOF (just a bunch of flash) с хост-системой SB2000 общается посредством двух интерфейсов PCIe 4.0 x16 с совокупной пропускной способностью более 512 Гбит/с. За коммутацию отвечает пара чипов Broadcom PEX88096, это 96-портовые интеллектуальные коммутаторы с интегрированными процессорными ядрами ARM Cortex-R4, обеспечивающие задержку не более 105 нс. Для подключения используется 8 разъёмов SFF-8644.

Вариант с OSS Ion Accelerator SAN любопытнее: это уже сетевая СХД, поддерживающая NVMe over Fabrics, SRP, iSCSI или даже InfiniBand. Она обслуживается фирменным ПО Ion Accelerator 5.2 и в зависимости от версии может оснащаться десятью портами Fibre Channel со скоростью 32 Гбит/с, четырьмя портами 100GbE или четырьмя портами InfiniBand со скоростью 200 Гбит/с. Работает в комплексе с однопроцессорным сервером OSS EOS-4, который использует AMD EPYC 7002 и, соответственно, поддерживает PCI Express 4.0.

Архитектура SB2000 в базовом варианте довольно проста

Промежуточное положение занимает вариант OSS Zion NAS. Он представляет собой SB2000, оснащённую двумя «умными» сетевыми адаптерами класса SmartNIC с ARM-процессорами на борту. В зависимости от версии, обеспечивает подключение посредством четырех портов 100GbE или двух портов InfiniBand 200 Гбит/с. Поддерживает аппаратное шифрование AES-GCM 126/256 и AES-XTS 256/512, соответствует спецификациям FIPS-140-2 Level 1.

SB2000 может работать с любыми серверами и инициаторами, даже без поддержки PCIe 4.0, с соответствующим снижением производительности. Имеются средства управления и мониторинга IPMI 2.0, доступные через выделенный порт Ethernet. Также интересно то, что диски в системе могут заменяться как по одному, так и сразу блоками по 8 накопителей. Поддержки RAID в аппаратном виде система не предлагает — эта функция целиком возложена на программное обеспечение или серверную часть.

Несмотря на то, что система StorageBox 2000 демонстрировалась на виртуальной конференции ISC 2020, во всемирной сети о ней встречается буквально пара упоминаний. Также известно, что некоторые заказы на неё были сделаны ещё в мае этого года. По всей видимости, выпуск SB2000 развёрнут, и данная модульная система поставляется заказчикам. Она станет хорошим подспорьем для современных систем машинного обучения, требующих больших объёмов данных и быстрого доступа к ним.

Компания Pliops ещё молода: она была основана в 2017 году выходцами из Samsung, M-Systems и XtremIO; все основатели являются специалистами в области СХД и энергонезависимой памяти. В 2019 году Pliops получила существенный объём инвестиций от Mellanox. А в 2020 году компания анонсирует свой новейший продукт — сопроцессор, берущий на себя тяжёлые задачи по работе с флеш-памятью.

Подобные чипы разрабатывают многие, но Pliops обещает, что её решение ускорит работу с такого рода памятью более чем в 10 раз. Впервые технология была продемонстрирована на саммите Flash Memory 2019, и вот, наконец, концепция обратилась в реальный осязаемый продукт, доступный к приобретению.

Решение Pliops достаточно необычное: это не контроллер NAND-массива, а именно сопроцессор-ускоритель, выполненный в виде отдельной платы с разъёмом PCI Express и берущий на себя всю работу по обслуживанию массивов SSD. И делает это новый ускоритель максимально эффективно: серьёзные флеш-СХД могут нагружать хост-процессоры весьма сильно, но решение Pliops позволяет решить эту проблему.

Особенно сильно эффект проявится в системах, используемых для работы с базами данных. Pliops объясняет это тем, что СУБД, будь то реляционные или NoSQL, традиционно разделяют непосредственно данные и ключи или индексы. А отдельная единица хранения данных имеет переменный размер, и эта структура не слишком хорошо сочетатся с традиционными устройствами хранения данных, у которых размер блока фиксирован.

Если в случае с обычными HDD вычислительная нагрузка невелика, поскольку случайных операций такие устройства выдают немного (в районе сотен), то твердотельные накопители, способные выдать 500 тысяч IOPS и более, создают и серьёзную вычислительную нагрузку, «утрамбовывая» вариабельные блоки данных в свой жёсткий формат. К этому добавляет проблем использование сжатия данных, которое тоже создаёт нагрузку.

Сопроцессор, разработанный Pliops и получивший название PSP, как раз и призван взять на себя все обязанности по работе с данными в формате Key:Value (KV), что особенно важно в крупных СХД, работающих с огромными массивами БД. Немаловажно то, что сопроцессор Pliops делает свою работу полностью прозрачно и не требует модификации программного обеспечения пользователя.

Со стороны ПО он выглядит, как обычный блочный SSD, однако за счёт аппаратного акселератора работа с базами данных может ускориться более, чем в 10 раз, а время отклика — параметр также весьма немаловажный, когда речь заходит о БД — снизится еще сильнее, в 100 раз. Новинка уже прошла предварительную проверку более чем у десяти крупных провайдеров облачных и корпоративных услуг по хранению данных и запуску БД.

Сопроцессор PSP позволяет использовать обычные недорогие SSD (даже с QLC-памятью) а это уменьшает стоимость владения на величину до 90%, поскольку крупные специализированные твердотельные СХД всё ещё очень дороги. Pliops PSP ускоряет работу с MySQL, MariaDB, mogoDB, Redis, Oracle, Apache Spark и Cassandra и системы на его основе прекрасно масштабируются.

Разработчики PSP полагают, что данного рода сопроцессоры образуют отдельный популярный класс устройств, подобно тому, как это случилось с графическими процессорами и сейчас происходит с тензорными ускорителями. Что ж, у Pliops есть все шансы стать в сфере работы с All-Flash СХД тем, чем стала NVIDIA в области ускорения машинного интеллекта.

Естественно, это далеко не первый проект по ускорению работы SSD вообще и оптимизации их для СУБД в частности. Например, у Samsung есть экспериментальный продукт KV Stacks — Key:Value SSD, созданный специально для баз данных одноимённого типа. Другие проекты зачастую опираются на FPGA. Та же Samsung совместно с Xilinx представила SmartSSD, обрабатывающий часть данных непосредственно на накопителе. А SmartIOPS уже не первый год поставляет SSD с фирменным контролером на базе ПЛИС.

Вероятно, следующим большим шагом станет массовое внедрение зонирования, которое подходит для HDD с SMR и уже включено в стандарт NVMe, и «вынос» FTL (Flash Translation Layer) за пределы отдельного накопителя с программной или аппаратной эмуляцией FTL на уровней всей СХД сразу.