Сегодня объемы создания и потребления данных продолжают неуклонно расти. Согласно данных International Data Corporation (IDC) за 2020 год, за пять лет — до 2023 года — совокупный темп годового роста (CAGR) получения, копирования и потребления данных составит 26%. Наряду с ростом и усложнением рабочих экосистем, приложений и массивов данных для ИИ/IoT, данный тренд указывает организациям на необходимость обеспечить бóльшую масштабируемость, эффективность, производительность и быстродействие систем хранения данных (СХД) при оптимальной совокупной стоимости владения TCO.

NVMe™ — текущее состояние

В глобализированной цифровой экономике счет идет на микросекунды. Достижение максимальной производительности и доступности критических приложений в сфере гипермасштабируемых облачных вычислений и ЦОД реализуется посредством постоянной работы по устранению узких мест и удовлетворению беспрецедентно растущей потребности в обработке данных. В таких условиях потребители ускоряют внедрение решений NVMe и NVMe over Fabrics (NVMe-oF). Эксперты отраслевой аналитической фирмы IDC предсказывают, что гиперскейлеры, OEM-производители и организации-конечные пользователи продолжат переход со старых интерфейсов SATA и SAS. Ожидается, что в 2020 году на NVMe придется более 55% от поставок SSD-накопителей корпоративного класса, а совокупный годовой рост поставок NVMe с 2018 по 2023 год составит 38%.

Огромное множество ключевых бизнес-функций теперь опираются на высокопроизводительное прикладное ПО, поэтому все больше центров обработки данных по всему миру внедряют NVMe. Компания Western Digital давно занимается инновациями в области флэш-памяти NAND и уже сейчас предлагает комплексную линейку SSD-накопителей и новых решений к построению фабрик данных. Таким образом, Western Digital располагает всем необходимым, чтобы помочь клиентам полностью реализовать потенциал технологии NVMe.

Платформа хранения данных OpenFlex Data24 NVMe-oF

Хотя флэш-накопители с NVMe невероятно повышают производительность систем хранения DAS, SAN и NAS, традиционная архитектура центров обработки данных не позволяет полностью реализовать возможности твердотельных накопителей NVMe. Это приводит к недоиспользованию ценных ресурсов хранения, неэффективной сегментации данных и удорожанию эксплуатации.

OpenFlex Data24, новая JBOF СХД, снимает данные ограничения за счет использования всей пропускной способности SSD-накопителей Ultrastar с поддержкой NVMe сразу несколькими вычислительными узлами, объединёнными в Ethernet-фабрику (NVMe-oF 1.0a) с низкими задержками так, что скорость работы с JBOF сравнима со скоростью работы локального NVMe-накопителя, подключенного к PCIe-шине сервера.

Такой подход обеспечивает максимальное количество операций ввода-вывода в секунду (IOPS). Также повышаются гибкость при необходимости увеличить емкость и эффективность использования дезагрегированного хранилища на флэше, что позволяет достичь большей производительности в условиях самых напряженных рабочих нагрузок. Сбалансированная архитектура СХД предотвращает выделение пространства сверх физической емкости хранилищ (over-subscription) и обеспечивает стабильную производительность NVMe.

В систему OpenFlex Data24 может быть установлено до 24 NVMe SSD-накопителей Ultrastar DC SN840 — в компактном 2U-шасси можно получить до 368 Тбайт ёмкости. Система идеально подходит для увеличения емкости серверных хранилищ или развертывания масштабируемых программно-определямых систем хранения (SDS). В комплексный дизайн системы также входят NVMe-oF-контроллеры RapidFlex с удаленным доступом к памяти (RDMA), которые при крайне низком энергопотреблении обеспечивают отменную производительность сетевых соединений.

По 100-гигабитной сети Ethernet можно подключить до шести вычислительных узлов без использования внешнего коммутатора. Задержка при работе контроллеров RapidFlex составляет менее 500 наносекунд, что обеспечивает расчетную производительность системы на уровне 13 млн IOPS и 70 Гбайт/c при установке в OpenFlex Data24 шести сетевых адаптеров.

Система OpenFlex Data24 спроектирована для обеспечения высокой доступности и уровня надежности промышленного класса. Она может устанавливаться в качестве совместно используемого хранилища в составе высокопроизводительной IT-инфраструктуры или использоваться в качестве дезагрегированного ресурса в виртуализированных системах хранения. Данная система полностью совместима с удостоенной наград F-серией OpenFlex — единственном в мире решении для построения открытых, компонуемых дезагрегированных инфраструктур (CDI).

Подробная информация доступна в блоге Western Digital: Пять причин начать планировать переход на NVMe-oF™ уже сегодня

Компания Western Digital продолжает создавать инновации, открывая новые научные и технологические горизонты, чтобы разрабатывать продукты для повышения эффективности и производительности инфраструктуры обработки данных с лучшей в своем классе TCO. Широкий набор решений Western Digital для обработки данных включает линейку HDD- и SSD-накопителей Ultrastar, HDD- и SSD-накопители WD Gold®, открытую платформу для компонуемых инфраструктур OpenFlex NVMe-oF, системы хранения Ultrastar, контроллеры RapidFlex NVMe-oF, решения Ultrastar для расширения RAM.

Western Digital также принимает активное участие в инициативе Zoned Storage по созданию стандартизированной открытой технологии зонирования накопителей с целью эффективного масштабирования ЦОДов. Новая технология основана на совместном применении HDD с черепичной магнитной записью (SMR) и SSD с поддержкой зонирования (ZNS).

Информация, информация, информация: хранение постоянно увеличивающихся в размерах данных — первоочередная причина появления дисковых полок JBOD. В ближайшей перспективе любому предприятию придётся задумываться о вопросе расширения и тогда, когда важными становятся не вычислительные мощности, а объём доступного пространства, наиболее рентабельным для масштабирования становятся JBOD-массивы.

Компания Western Digital предлагает покупателям несколько моделей JBOD-массивов, выпускаемых под брендом Ultrastar — Data60 и Data102.

• Data60 — вмещает 60 единиц 3.5-дюймовых SAS-накопителей (12 Гбит/с)/ SATA (6 Гбит/с) накопителей. Суммарный объём хранения достигает 840 RAW-данных;
• Data102 — можно использовать с 102 единицами 3,5-дюймовых устройств хранения. Ёмкость Ultrastar Data102 достигает 1,4 ПБайт;

В разработке полок серии Ultrastar Data принимались во внимание распространённые проблемы размещения большого числа накопителей, поэтому инженерами были решены сразу несколько классических проблем полок, а именно:

• Снижение рабочей температуры дисков;
• Снижение влияния вибраций на функционирование системы;

Система охлаждения ArcticFlow

Массивное скопление жёстких дисков в одном месте и маленький воздушный зазор между ними приводит к повышенному нагреву HDD — это аксиома. А ввиду плотности расстановки жёстких дисков особенно тяжело приходится последним рядам в полке.

Чтобы уменьшить термонагрузку в полках внедрена технология ArcticFlow, которая выражена в архитектурном строении шасси. В большинстве подобных решений воздушные массы передвигаются от лицевой стороны к тыльной, где уже на 2–3 ряду воздух сильно нагревается, тем самым эффективность охлаждения задних рядов существенно снижается. В предлагаемых полках Ultrastar Data зоны размещения накопителей разделены на 2 отсека. Воздуховоды первого отсека выбрасывают тёплый воздух минуя устройства второго отсека. Тот в свою очередь получает порции холодных воздушных масс через собственный воздуховод, проходящий по центру полки. И наконец третья зона циркуляции — это блоки питания, которым полагается отдельная система охлаждения со своим воздуховодом.

Внедрение технологии ArcticFlow позволяет сократить разницу температур между HDD до 10 °С. Например, используя HDD HelioSeal 4-поколения, максимальная температура не поднимается выше 49 °С, что явно ниже рассчитанного максимума производителем. К тому же, средний показатель затраченного количества электроэнергии на охлаждение каждого HDD снизился до 1,6 Вт.

Технология подавления вибрации IsoVibe

Технологические решения, реализованные в рамках IsoVibe, направлены на предотвращение распространения вибрации между отсеками дисковой полки. Технически изолировать каждый накопитель невозможно, ввиду ограниченного пространства, поэтому в ходе проектирования Ultrastar Data было решено отказаться от использования винтовых креплений и теперь HDD фиксируются с помощью амортизированных салазок.

Также используются изолированные разъёмы, расположенные на задней панели, которые уменьшают распространение колебаний за счёт прорезей в печатной плате.

В дополнение к вышеперечисленным внедрениям в прошивках дисков Western Digital Ultrastar используется алгоритм, отслеживающий сигналы, поступающие с интегрированных акселерометров и контроллер вносит поправки для компенсации усилий, необходимые для коррекции траектории движения блока магнитных головок. Последнее нововведение позволяет накопителям обеспечивать выигрыш в производительности по сравнению с традиционными HDD до 20 раз.

Первый пример

Компания GreenPower для своей работы использовала сервера на 24/36 отсеков с общим дисковым пространством 108 терабайт. В скором времени данный запас был полностью исчерпан, и специалисты компании заменяли полные HDD пустыми. К сожалению, средств на покупку серверов хранения данных большей ёмкости не нашлось и было принято решение о переходе на платформу хранения данных Ultrastar Data60. Новая система резервного копирования состоит из двух серверов с программным обеспечением Veeam Backup & Replication 9.5 и двух дисковых полок Ultrastar Data60 от Western Digital. В каждое гибридное хранилище были установлены 60 SAS HDD Ultrastar различной ёмкостью (от 6 до 10 терабайт).

Жесткие диски для ЦОД Ultrastar DC HC330 ёмкостью 10 терабайт

Жёсткие диски были сконфигурированы в несколько наборов RAID-массивов, управляемых Windows Storage Spaces. Для дедупликации используется программного обеспечения Microsoft и было создано несколько виртуальных Thin дисков. Доступное дисковое пространство разделено на два логических тома, один из которых использовался для создания полных бэкапов, тогда как второй был предназначен для резервного копирования. После перехода на новую платформу Ultrastar Data60 компания снизила затраты на логистику, а в пересчёте на терабайт информации, приобретение дисковых полок оказалось значительно более выгодным решением по сравнению с закупкой полноценных серверов. А благодаря скорости копирования (более 1 Гбит/с+) исчезли провалы производительности всей системы.

Второй пример

Европейский производитель бытовых товаров с IT инфраструктурой, представленной 8 центрами обработки данных по всему миру, использовал «устаревший» программно-аппаратный комплекс. Он перестал адекватно справляться с возложенной на него задачей в связи с возросшей нагрузкой, так как не обладал достаточной пропускной способностью. Также часто возникали проблемы с резервным копированием. В результате вместо стабильной работы системы происходили сбои, влияющие на работу компании. После ревизии пришли к выводу, что обновление используемой инфраструктуры резервного копирования является нерентабельным и ради улучшения и сокращения временных затрат лучше заменить её.

Серверная платформа HPE Proliant DL360 G9

Для организации системы резервного копирования было выбрано хранилище Ultrastar Data60 от Western Digital, состоящая из сервера HPE Proliant DL360 G9, оснащённого парой контроллеров Broadcom 9480-8i8e MegaRAID. Каждый RAID-контроллер был подключён к портам I/O-модуля с помощью 4-канального HD MiniSAS-кабеля (P/N 1EX0329). Это позволило обеспечить полосу пропускания до 9,6 Гбит/с на контроллер. Хранилище Ultrastar Data60 от Western Digital управляется ПО Veeam Backup & Replication 9.5, Veeam Backup для Microsoft Office 365 и Microsoft Windows Storage Spaces (входит в состав Windows Server 2016).

Дисковое хранилище содержит 60 12-терабайтных SAS HDD Ultrastar. Суммарная ёмкость выросла до 720 Тбайт. Все пространство поделено на две группы по 30 дисков в каждом. А далее в группах были созданы несколько наборов томов с чередованием, которые были сгруппированы в единый общий том с помощью Windows Storage Spaces. Один из томов используется для инкрементного резервного копирования, другой содержит полный снимок резервной копии, который сжимается средствами дедупликации Windows Server.

Стоимость связки сервера с парой контроллеров и полки Ultrastar Data60 ниже по сравнению с выделенным устройством резервного копирования, поддерживающим внутреннюю дедупликацию. Не стоит забывать о появившейся возможности наращивания доступного пространства. Конфигурация поддерживает подключение новых дисковых полок до четырёх штук без необходимости модернизации серверной платформы.

Компания Western Digital отрапортовала о работе во второй четверти текущего финансового года, которая была закрыта 1 января 2021-го. Результаты оказались смешанными: выручка в клиентском сегменте растёт, а в корпоративном секторе, напротив, сокращается.

Суммарный доход за трёхмесячный период составил $3,9 млрд, что на 7 % меньше по сравнению с аналогичным показателем годичной давности. При этом поставщик накопителей показал чистую прибыль в размере $62 млн, тогда как годом ранее были зафиксированы убытки в размере $139 млн.

В подразделении клиентских устройств выручка составила $2,1 млрд, что на 19 % больше по сравнению со вторым кварталом предыдущего финансового года. Ещё около $1,0 млрд принесли потребительские решения, показав прибавку в 6 %.

В то же время отдел Data Center Devices and Solutions, отвечающий за поставку продуктов для центров обработки данных, продемонстрировал отрицательную динамику. Выручка здесь за год сократилась практически вдвое — на 46 %, составив $807 млн.

Называются две основные причины ослабления позиций Western Digital в корпоративном сегменте. Во-первых, компания уступила сектор nearline-устройств конкурирующей Seagate. А, во-вторых, Western Digital пока слабо представлена на рынке твердотельных накопителей корпоративного класса.

Компания Western Digital, один из крупнейших разработчиков и производителей HDD и SSD, делает всё возможное, чтобы накопители нового поколения избавились от «проклятий» унаследованных технологий, став более производительными и удобными как с точки зрения разработчиков ПО и систем хранения данных, так и с точки зрения конечных пользователей.

С технологией накопителей с зонированием данных (Zoned Block Devices, ZBD) Western Digital экспериментирует достаточно давно: ещё в 2019 году мы рассказывали о разработке файловой системы Zonefs, в которой каждая зона на накопителе отображается, как отдельная область. А летом этого года сама концепция зонирования официально стала частью стандарта NVMe.

В обычных SSD данные пишутся без учёта расположения в блоках NAND

Зонирование имеет ряд преимуществ перед классической реализацией накопителей. Во-первых, параметрами записи можно управлять централизовано, на уровне хост-процессора или даже приложения. Во-вторых, зоны могут иметь разные скоростные характеристики. И, наконец, в-третьих, зонирование уменьшает износ NAND-памяти и при правильной реализации гарантирует отсутствие провалов в скорости, что особенно важно для корпоративных систем хранения данных.

Удаление одного файла требует перемещения данных, что тормозит накопитель и служит причиной повышенного износа NAND

Изначально концепция блочного хранения данных была создана для механических жёстких дисков, где её логика отвечала физическим принципам работы накопителя. С появлением твердотельных накопителей технология была адаптирована и для них — так проще всего оказалось сохранить совместимость. Однако флеш-память работает совсем не так, как магнитная запись: помимо операций записи и чтения она требует ещё и операции стирания блока.

В SSD с зонированием запись данных осуществляется упорядоченно. Нет «усиления записи», не требуется сборка мусора

Напоминаем, стирание в памяти NAND не может происходить произвольным образом: зачищается весь блок, а если часть хранимых в нём данных всё ещё нужна, их необходимо перед стиранием перенести в другое место. Процесс расчистки места под стирание блоков NAND называется «сборкой мусора». Этот процесс загружает контроллер SSD и нередко приводит к тому, что постоянство скоростных характеристик не обеспечивается. Кроме того, лишние циклы стирания-перезаписи отнюдь не идут флеш-памяти на пользу, и она быстрее изнашивается.

В итоге классический SSD строится с достаточно серьёзным запасом прочности: часть флеш-памяти в нём не используется напрямую, а применяется в качестве «подменного фонда» для замены выходящих из строя ячеек NAND. Объём этого фонда может достигать 20-30% от общего объёма NAND, что, естественно, не способствует снижению стоимости. Солидную часть стоимости современных SSD также составляет DRAM, которая используется для хранения таблиц трансляции и позволяет накопителю более-менее поддерживать постоянство скоростных характеристик.

Переход к концепции зонирования позволяет решить обе вышеописанных проблемы: данные в таких накопителях записываются упорядоченно (в пределах зоны запись осуществляется только последовательно), порядок записи полностью прозрачен, и им можно управлять даже со стороны приложения, а значит, лишних стираний и перезаписей можно избежать. За счёт этого можно сократить подменный фонд NAND-ячеек, а значит, и снизить удельную стоимость хранения данных. Таблицы трансляции также принимают более компактный вид и DRAM-буфер тоже можно сделать меньше.

Благодаря тому, что зонирование лучше соответствует самой технологии NAND, Western Digital удалось добиться впечатляющих результатов: SSD с поддержкой ZNS может обеспечивать коэффициент «усиления записи» (write amplification) на уровне 1x, поскольку ему не требуются лишние операции стирания и перезаписи блоков NAND. Поэтому гарантируется постоянная скорость записи во всём объёме SSD.

Благодаря зонированию скорость записи на накопитель всегда максимальна

Серьёзно улучшается и ситуация со временем отклика: если у обычных SSD оно сильно зависит от соотношения операций чтения к операциям записи, то у зонированного SSD этот параметр остаётся практически постоянным. А в целом латентность удаётся снизить на 57%. Итогом, венчающим проделанную Western Digital работу по внедрению концепции зонирования, стал новейший твердотельный накопитель Ultrastar DC ZN540.

Зонирование позволяет SSD поддерживать постоянную латентность при разных соотношениях чтение/запись

Это первый в мире корпоративный SSD, в котором полностью реализованы все преимущества технологии зонирования. Он полностью отвечает спецификациям ZNS Command Set 1.0 и NVMe 1.3c. В накопителе применён новый высоконадёжный двухпортовый контроллер с внешним интерфейсом PCI Express 3.1. Основой новинки является 96-слойная память 3D NAND TLC. Накопитель выполнен в форм-факторе U.2 и может иметь объём до 8 Тбайт.

Благодаря зонированию новинка идеально подходит для многопользовательских сценариев и сценариев с большими объёмами потоковых данных. Компания говорит о четырёхкратном превосходстве над традиционными SSD в скорости и о 2,5-кратном — в качестве обслуживания (QoS, постоянство скоростных характеристик и латентности). За счёт более эффективного использования ресурсов NAND и DRAM новинка обеспечивает пониженную стоимость владения СХД и более низкую удельную стоимость хранения информации.

Скорость записи у зонированного SSD остаётся постоянной, а время отклика практически не растёт

Western Digital опубликовала и результаты тестирования нового накопителя, сравнив его с сопоставимым по характеристикам обычным SSD. Как правило, SSD корпоративного типа проектируются с расчётом на постоянство производительности, но несовпадение принципов работы с данными на уровнях файловой системы и NAND приводят к закономерному результату: с номинальной скоростью удалось записать лишь около 1 Тбайт данных, после чего обычный SSD был вынужден заняться сборкой мусора, а скорость записи резко упала. Зонированный DC ZN540 с задачей справился, вообще не потеряв в скорости.

Если при чтении недостатки традиционного SSD можно компенсировать, то при записи зонированным накопителям нет равных

Аналогичным образом новинка проявила свои преимущества и при увеличении доли операций записи в нагрузке. У классического SSD время отклика выросло практически в два раза, в то время как у зонированной модели оно росло куда медленнее. Таким образом, можно с уверенностью говорить о том, что у зонированных SSD ситуация с предсказуемостью поведения обстоит куда лучше, нежели у классических моделей.

Поставки накопителей Western Digital DC ZN540 начались уже сейчас, правда, пока небольшими партиями. Можно с уверенностью сказать, что компания продолжит развивать данное направление. Особенно в свете роста популярности памяти QLC — внедрение зонирования позволит серьёзно поднять надёжность и производительность таких SSD, что сделает их более пригодными для использования в крупных СХД и облачных комплексах.

Но было бы ошибкой сказать, что зонирование актуально только для твердотельных накопителей. Конечно, в силу особенностей, свойственных NAND-памяти, оно лучше всего показывает себя именно в SSD, но польза есть и для традиционных жёстких дисков.

Технология SMR хорошо согласуется с принципами зонирования

Речь идёт о моделях с «черепичной» записью (SMR), где сам принцип пересекающихся дорожек требует последовательной записи, а при стирании удаляется вся зона, а не только одна дорожка. Такие HDD позволяют достичь большой ёмкости при относительно малой цене — модель Ultrastar DC HC650, к примеру, имеет объём 20 Тбайт. Среди первых пользователей таких жёстких дисков можно назвать очень популярное облачное файловое хранилище Dropbox.

Новые накопители WD используют единый программный стек вне зависимости от типа (SSD или HDD/SMR)

Компания продолжает активно участвовать в разработке программного обеспечения, а официальным сайтом проекта по внедрению зонирования по-прежнему остаётся ZonedStorage.io, где можно найти документацию и множество другой информации о зонировании. В частности, доступны сведения о дистрибутивах Linux, уже поддерживающих ZBD.

Если вы хотите получить более подробную информацию о решениях Western Digital, заполните форму выше.

Компания Western Digital расширила модельный ряд решений WD Purple, предназначенных в первую очередь для систем видеонаблюдения. В серию был добавлен жёсткий диск на 18 Тбайт, который позволит записать много часов видеопотока, а также карта памяти microSD на 1 Тбайт для камер наблюдения с функциями ИИ. Таким образом, Western Digital стремится придать дополнительный импульс растущему рынку умных систем безопасности.

Многие компании сейчас ускоренными темпами внедряют элементы ИИ и глубокого обучения в процессы автоматизации и повышения эффективности, что должно обеспечить в будущем создание более безопасной и привлекательной рабочей среды. Именно поэтому в современном мире компаниям важно получать качественные данные, которые позволят оптимизировать собственный бизнес, или же реализовывать полученную информацию.

Но чтобы ИИ-алгоритмы работали, им нужно много данных, которые по сути являются для них топливом. А как известно, чтобы машина работала хорошо, топливо должно быть высокого качества. И в случае с ИИ ситуация аналогична. Именно поэтому от систем видеонаблюдения требуется всё более высокое разрешение, которое обеспечит качественную и чёткую картинку. Но из-за этого растёт и объём видео, даже несмотря на современные алгоритмы сжатия. Это влечёт за собой необходимость хранить много информации непосредственно на камерах и сетевых видеорегистраторах, для чего как раз и предназначены новые ёмкие модели устройств серии WD Purple.

Western Digital предлагает решения для хранения данных в самых различных устройствах, применяемых в системах видеонаблюдения. Новые продукты серии WD Purple обладают большим объёмом, высокой производительностью и надёжностью, без чего не обойтись в умных системах видеонаблюдения. Всё же этим устройствам необходимо круглосуточно справляться с потоковой передачей видео со смарт-камер, записывающих устройств, сетевых видеорегистраторов с элементами глубокого обучения (NVR), а также работать с системами анализа видео.

Western Digital подчёркивает, что в накопителях WD Purple микрокод и средства управления данными оптимизированы с упором на повышение производительности и улучшение управления устройствами именно в системах для видеонаблюдения с функциями ИИ. Кроме того, производитель приложил максимум усилий, чтобы снизить коэффициент потери кадров и пикселизации, повысив при этом производительность воспроизведения видеоинформации и качество стриминга.

В итоге это обеспечивает более высокую производительность, надёжность, долговечность и эффективность работы в целом, а также позволяет снизить общую стоимость владения (TCO). В жёстких дисках WD Purple применена фирменная технология AllFrame, которая помогает предупредить потерю данных и с лёгкостью управлять исходящим потоком данных. Технология Western Digital Device Analytics позволяет не только проводить мониторинг и анализ состояния диска, что помогает выявлять проблемы, но и получить инструкции по заблаговременному устранению потенциальных проблем.

В серии жёстких дисков WD Purple представлены накопители двух семейств: WD Purple with AllFrame 4K и WD Purple with AllFrame AI. В первом представлены жёсткие диски для традиционных систем видеонаблюдения объёмом от 1 до 6 Тбайт, тогда как в другом — накопители для ИИ-систем NVR объёмом от 8 и, теперь, до 18 Тбайт. Кроме того, первые относятся к решениям класса 5400 об/мин, тогда как вторые к более скоростным — здесь шпиндель вращается со скоростью 7200 об/мин.

В отличие от обычных жёстких дисков, накопители WD Purple созданы с прицелом на непрерывную работу в режиме 24/7, что подтверждается трёхлетней гарантией и заявленным сроком наработки на отказ до 1,5 млн часов (MTBF). Заявляется также нагрузка в 360 Тбайт данных в год. Данные накопители в первую очередь ориентированы на использования в составе систем хранения и обработки данных с обычных и сетевых видеорегистраторов (DVR и NVR), а также в системах регистрации с элементами искусственного интеллекта.

Кроме того, Western Digital предлагает более продвинутые жёсткие диски WD Gold и Ultrastar, предназначенные для использования в связанных с видеонаблюдением облачных решениях, ЦОД и системах для анализа данных. Накопители Ultrastar не имеют ограничений по количеству подключённых к одному накопителю камер, а также имеют куда больший ресурс и гарантийный срок.

В свою очередь для использования непосредственно в умных камерах наблюдения, как потребительских, так и промышленных, Western Digital предлагает встраиваемые чипы и карты памяти WD Purple microSD. Зачем нужен накопитель в самой камере? Во-первых, не всегда есть возможность напрямую передавать данные на сервер, во-вторых, не помешает резервная запись на случай потери связи с сервером. Но главное, карта памяти в самой камере обеспечит более высокую скорость передачи данных, что очень важно для умных камер наблюдения с ИИ.

Однако отнюдь не каждая карта памяти подойдёт для использования в камере видеонаблюдения. В первую очередь карты для данных целей должны отличаться высокой надёжностью и большим ресурсом, то есть способностью выдержать множество перезаписей. Кроме того, важно чтобы карта могла работать в суровых условиях, в том числе на улице при очень низких или очень высоких температурах.

Карты microSD WD Purple SC QD101 разработаны специально для камер с элементами ИИ, камер видеонаблюдения и устройств захвата видео, для хранению или резервного копирования данных. В основе лежит 96-слойная флеш-память 3D NAND от Western Digital, которая обладает повышенной долговечностью — до 500 циклов перезаписи. Карточки уже некоторое время доступны в объёмах 32, 64, 128, 256 и 512 Гбайт, а теперь к ним добавилась модель на 1 Тбайт. Если же нужна более высокая надёжность, то WD предлагает карты памяти Purple SC QD312 с ресурсом до 3000 циклов перезаписи и ёмкостью до 256 Гбайт.

Усиленное и долговечное исполнение означает, что карта microSD WD Purple является погодо- и влагоустойчивой и работает в диапазоне температур от -25 до 85 °C. Если камера, в которую вставлена карта, поддерживает реализованную в самой карте функцию индикации состояния, пользователи смогут отслеживать оставшийся ресурс, что поможет избежать неожиданных поломок.

Жёсткие диски WD Purple объёмом 18 Тбайт поступили в продажу в текущем месяце, тогда как новая карта памяти microSD WD Purple SC QD101 на 1 Тбайт должна появиться в продаже в ноябре 2020 года.

Если вы хотите получить более подробную информацию о решениях Western Digital, заполните форму выше.

Компания Western Digital представила твердотельные накопители семейства IX SN530, которые будут доступны в форм-факторах M.2 2280 и M.2 2230 с интерфейсом PCIe 3.0 x4 (NVMe 1.4). Изделия рассчитаны на применение в промышленном и сетевом оборудовании, устройствах Интернета вещей, безвентиляторных компьютерах, робототехнических комплексах и пр.

Новинки могут эксплуатироваться в широком температурном диапазоне — от -40 до +85 градусов Цельсия. Средняя заявленная наработка на отказ (показатель MTTF) достигает 3 млн часов. Показательн UBER — 10^-16.

В семейство вошли семь модификаций: вместимостью 85, 170, 340, 256 и 512 Гбайт, а также 1 и 2 Тбайт. Скорость последовательного чтения у всех версий составляет до 2400 Мбайт/с, а у старшей модели достигает 2500 Мбайт/с. Скорость последовательной записи варьируется от 900 до 1950 Мбайт/с (см. таблицу ниже).

Версии объёмом 85, 170 и 340 Гбайт выполнены по технологии SLC — один бит информации в ячейке. Эти решения отличаются повышенной долговечностью: ресурс записи (величина TBW) варьируется от 6000 до 24 000 Тбайт.

Модели на 256 и 512 Гбайт, а также 1 и 2 Тбайт используют чипы памяти TLC — три бита информации в одной ячейке. Показатель TBW составляет от 650 до 5200 Тбайт. Для всех моделей заявлена сохранность данных в течение года при отсутствии питания и при температуре +55°C.

Western Digital анонсировала свой первый SSD с поддержкой зонирования — двухпортовый Ultrastar DC ZN540 ёмкостью до 8 Тбайт (96-слойная TLC NAND). Накопитель выпускается в форм-факторе 2,5” U.2 (15 мм), имеет интерфейс PCIe 3.1 и соответствует спецификациями NVMe 1.3c.

Однако он поддерживает и первую версию набора команд ZNS из NVMe 1.4a, который был принят летом этого года. Концепция зонирования отлично подходит для SSD и SMR HDD. Она подразумевает разбиение накопителя на независимые блоки (зоны), которые могут иметь разные скоростные характеристики. Данные в зоны (до-)записываются последовательно, но модифицировать или удалять их нельзя — можно очистить только всю зону целиком. В отличие от традиционных SSD, где управление данными на флеш-памяти занимается контроллер, в накопителях с зонированием данными управляет хост и его приложения, которые сами решают куда и когда записывать информацию.

Такой подход несколько усложняет архитектуру подсистемы хранения данных, но позволяет более тонко управлять её производительностью в зависимости от задачи, а также снижает износ памяти, что особенно актуально для набирающих популярность QLC-накопителей, к которым всё чаще обращаются гиперскейлеры и другие крупные игроки. Например, с зонированием не будет непредсказуемых скачков задержки и скорости обмена данными, связанными с фоновым сбором мусора и перемещением информации между ячейками памяти.

Western Digital приводит данные собственных тестов с накопителями нового типа. В частности, скорость удаётся удержать на постоянном уровне вне зависимости от уровня заполнения диска — разница с обычным SSD достигает четырёх раз. А в случае нарастающей интенсивности записи на накопитель удаётся снизить скорость роста задержки доступа. В реальных приложениях задержка при случайном чтении оказывается в 2,5 раза меньше, а случайной записи — аж в 18 раз.

Компания Western Digital сегодня сообщила о том, что облачный сервис Dropbox одним из первых возьмёт на вооружение передовые жёсткие диски Ultrastar DC HC650. Речь идёт о накопителях, вмещающих 20 Тбайт информации.

Названные диски используют технологию «черепичной» магнитной записи (SMR) с частичным перекрытием дорожек. Доступны модификации с интерфейсом SATA 3.0 и SAS: в первом случае пропускная способность может достигать 6 Гбит/с, во втором — 12 Гбит/с. Частота вращения шпинделя составляет 7200 оборотов в минуту. Расчётная нагрузка достигает 550 Тбайт в год, при этом накопители ориентированы на эксплуатацию в круглосуточном режиме.

Dropbox уже довльно давно использует в своей инфраструктуре SMR-накопители, управляемые хостом (host-managed). Это позволяет одновременно получить относительно невысокую стоимость хранения данных и избежать ряда проблем, характерных для drive-managed дисков. Кроме того, характер нагрузки Dropbox отлично подходит для SMR-накопителей — данные пишутся последовательно и крупными блоками, что хорошо сочетается с зонированием SMR. При этом данные редко удаляются.

Применение дисков Ultrastar DC HC650 на 20 Тбайт, как отмечается, позволит Dropbox увеличить плотность хранения данных при минимальной совокупной стоимости владения (ТСО). При этом будут обеспечиваться высокие показатели надёжности хранения и доступности информации для более чем 600 млн пользователей облачного сервиса по всему миру.

NVMe™ — это не только современный протокол, но и фундамент для IT инфраструктуры следующего поколения. Велика вероятность, что в будущем NVMe у вас будет сквозным, однако, в этом контексте возникает несколько вопросов, например, когда это будущее настанет и каким должен быть ваш первый шаг в его направлении?

Судя по новым решениям, выходящим на рынок, время воспользоваться всеми преимуществами NVMe и выжать максимум из NVMe-oF™ уже пришло, и тому есть пять причин.

Надеть на пробежку лыжные ботинки вместо спортивных шиповок — это плохая идея

Протокол NVMe сам по себе — это новая эпоха в производительности. Скорость хранилища на флеше всегда была выше, чем у жестких дисков, но в условиях типового ЦОД интерфейс не позволял пользоваться ею в полном объеме. SAS и SATA были удобными протоколами на начальном этапе, поскольку позволяли использовать SSD в инфраструктуре, созданной для жестких дисов. Но эти разработанные для жестких дисков интерфейсы оказались попросту неспособны справиться с рабочими характеристиками флеш-хранилища. Это все равно что попросить спринтера-олимпийца выйти на стометровку в лыжных ботинках.

Следующим шагом стало внедрение интерфейса NVMe для SSD-накопителей. Разработанный специально для флеша, он привнес в нашу жизнь повышенную пропускную способность, эффективность и поддержку параллельной обработки данных, позволив извлечь максимальную выгоду из присущей NAND малой задержки.

SSD-накопители с поддержкой NVMe постоянно модернизируются, и стандарт регулярно насыщается новыми функциями и спецификациями (например, зональные пространства имен (ZNS)). Наш последний Ultrastar® DC SN840 — это решение третьего поколения с вертикально интегрированным контроллером NVMe собственного производства, собственным микрокодом и 96-слойной флеш-памятью 3D TLC NAND. Это решение направлено в будущее: низкое значение задержки и высокая доступность двух портов позволяет вам использовать его для новых информационно-емких приложений.

NVMe-oF: рабочие характеристики NVMe теперь и за пределами сервера

Хотя в условиях ЦОД NVMe SSD-накопители прекрасно справляются со своей задачей по ускорению рабочих нагрузок сервера, есть одна проблема. Чтобы полностью использовать скорость NVMe, SSD-накопитель должен находиться на шине PCIe, рядом с процессорами. Шину PCIe невозможно расширить за пределы сервера, и даже если каждый сервер в отдельности ускорить можно, в результате это приведет к возникновению мини-«башен» или «силосов» из SSD-накопителей, которые будет нелегко поделить между хостами.

В дело вступает NVMe-over-Fabrics (кратко — NVMe-oF), знаменуя собой следующий шаг в развитии инфраструктуры ЦОД. NVMe-oF позволяет обеспечивать общий доступ к СХД на NVMe для нескольких хостов, и параметры работы при этом будут сравнимы с локально привязанными SSD-накопителями.

Насколько быстро это все работает? Сегодня мы объявили не только о выходе наших новых корпоративных SSD-накопителей Ultrastar® DC SN840 с поддержкой NVMe, но и о запуске платформы хранения OpenFlex™ Data24 с поддержкой NVMe-oF, собранной полностью на дисковых полках JBOF (Just a Bunch of Flash — просто пачка флеш-дисков) с NVMe. Наша платформа хранения Ultrastar 2U24 на флеше с SAS-интерфейсом всегда считалась очень быстрой: 4,7 млн IOPS, полоса пропускания 25 ГБ/с и задержка меньше миллисекунды. И хотя полный цикл испытаний и проверка рабочих характеристик OpenFlex Data24 пока не закончены, первые полученные значения очень впечатляют. Проведенные нами лабораторные тесты свидетельствуют о том, что производительность должна быть около 13,2 млн IOPS, полоса пропускания — 70,7 ГБ/с, а задержка записи — ничтожно малые 42 микросекунды. Именно в этом состоит мощь технологии NVMe при ее использовании в хранилище, к которому можно дать доступ нескольким хостам.

NVMe-oF позволяет обеспечить скорость NVMe-хранилища даже при работе с несколькими хостами

Быстрее или дешевле? Такой вопрос теперь не стоит

Мы привыкли, что за дополнительную производительность нужно платить. Но с помощью OpenFlex Data24 эта парадигма уходит в прошлое. Технология NVMe-oF не просто поддерживает значительно более интенсивные рабочие нагрузки, требующие высокой производительности, она еще и обходится дешевле. По факту мы ожидаем сокращения расходов на 17% по сравнению с дисковыми полками с SAS-интерфейсом. Отправная точка для этого — использованная нами вертикальная интеграция и философия «от чипа до интеграции». Я уже упоминал, что новые SSD-накопители вертикально интегрированы — от сырой флеш-памяти NAND до контроллера и собственного микрокода, а платформа OpenFlex Data24 вообще полностью разработана нашими силами, включая контроллеры RapidFlex™ с поддержкой NVMe-oF и интегральные схемы специального назначения (ASICs).

Простое внедрение благодаря передовым вариантам подключения

Общие хранилища, в которых доступ к ресурсам предоставлен нескольким серверам сразу, достаточно часто построены на дисковых полках JBOF. При таком подходе объем хранилища может выделяться или перераспределяться сообразно потребностям приложений, и сложность организации такого общего использования бывает разной.

OpenFlex Data24 представляет собой дисковую полку в форм-факторе 2U, рассчитанную на размещение до 24 NVMe SSD-накопителей DC SN840 с сырой емкостью до 368 Тбайт. Кроме того, на нее можно установить до шести контроллеров RapidFlex NVMe-oF. Использование таких контроллеров дает целый ряд преимуществ с точки зрения возможностей подключения, в том числе крайне низкое значение задержки, поддержка Ethernet на 100 Гбит (первоклассная скорость, которой вы можете в полной мере воспользоваться уже сейчас) и низкое энергопотребление.

До шести хостов можно подключить напрямую, без коммутатора, но весь спектр возможностей подключения раскрывается при использовании сетевой топологии на основе коммутаторов (так называемой «коммутационной фабрики» или switched fabric), которая позволяет обеспечить более высокую гибкость и максимальное использование.

Ваш первый шаг к построению компонуемости

Вся отрасль стремится к повышению эффективности, и единым вектором развития для достижения этой цели стала компонуемая дезагрегированная инфраструктура. Для нас это часть более широкой философии, описывающей инфраструктуру хранения и обработки данных завтрашнего дня. Она должна быть не просто компонуемой, а интероперабельной. Сама по себе OpenFlex Data24 совместима с Open Composable API и может быть реализована как часть компонуемой дезагрегированной инфраструктуры.

Кроме того, совместно с другими лидерами отрасти мы основали Лабораторию открытой компонуемости и совместимости (Open ComposableCompatibility Lab — OCCL), основной целью которой является расширение использования принципов компонуемости и совместимости и продвижение интероперабельности в рамках всей экосистемы привязанных к фабрике устройств. Вы также можете присоединиться к этой инициативе, вся информация доступна на сайте opencomposable.com. Если вы хотите получить более подробную информацию о решениях Western Digital, заполните форму выше.

От NVMe к NVMe-oF: время пришло

Платформа OpenFlex Data24, ее архитектура NVMe-oF и NVMe SSD-накопители Ultrastar DC SN840 — это прекрасные аргументы в пользу того, что пришло время для следующей модернизации вашего оборудования и оптимизации расходов и эффективности за счет распределения новых SSD-накопителей и, соответственно, инвестиций на их покупку на несколько серверов. Пора скинуть неудобные лыжные ботинки и отправиться на пробежку в новых быстрых кроссовках.

Рассматриваете возможность внедрения технологии NVMe-oF? Обратите внимание на эти полезные ресурсы:

• Вебинар: «Все, что нужно знать о платформе хранения OpenFlex™ Data24 NVMe-oF™»
• Статьи в блоге: Как технология NVMe-oF™ помогает развитию бизнеса
• Исследования показывают, что сквозной NVMe™ — это ваше будущее
• Изучите нашу линейку SSD-накопителей с поддержкой NVMe
• Прочитайте краткое описание OpenFlex
• Ознакомьтесь с преимуществами RapidFlex A1000

Несмотря на победное шествие твердотельных накопителей, механические жёсткие диски всё ещё применяются широко. Для увеличения плотности записи в них нередко применяется технология черепичной или черепичатой (shingled, SMR) записи, при которой дорожки секторов на пластине частично друг друга перекрывают. Если на скорость чтения это влияет слабо, то запись в режиме SMR производится достаточно медленно, поскольку требует перезаписи соседних дорожек, и даже в архивных сценариях такие скорости могут быть неприемлемо низкими. Однако компания Western Digital, похоже, нашла выход из ситуации.

Вкратце напомним: в технологии SMR для чтения и записи используется разная ширина дорожек, причём, в режиме записи, как более сложном, дорожка шире. Как следствие, дорожки «наползают» друг на друга подобно черепицам на крыше дома, отсюда и название технологии. Считать такую структуру нетрудно, однако если на диск поступают новые данные, приходится стирать и перезаписывать соседние дорожки, а это отнюдь не добавляет скорости, зато серьёзно повышает латентность, причём, непредсказуемым образом. Существует даже отдельный термин tail latencies.

Реализация алгоритмов SMR может быть как дисковая (выполняется на уровне контроллера на плате HDD), так и программная — в этом случае за неё отвечает хост-система. Последний подход обычно требует модификации приложений или даже введения отдельной программной прослойки, и это замедляло темпы внедрения SMR. Однако Western Digital полагает, что нашла выход из ситуации.

Компания смогла договориться о партнёрстве с разработчиком ПО Kalista.IO, разработавшей программное обеспечение под названием Olympus, призванное ускорить запись в накопителях с SMR или зонированием. Данная система состоит из двух сервисов: единого блочного, файлового и объектного интерфейса Phalanx и вычислительного Abacus, каждый из них может запускаться и масштабироваться отдельно. Система Olympus доступна в различных вариантах: как аппаратный блок, программное приложение и даже виртуальный образ.

Phalanx способен представить любой накопитель, будь то SSD или HDD, как диск с черепичной записью и не требует никакой рекомпиляции или иного внесения изменений в существующие приложения, не требуется также установка дополнительного модуля ядра в Linux — всё работает в пространстве пользователя. Данные при этом делятся на «строки и столбцы», при записи Phalanx гарантирует отсутствие одномоментной концентрации «горячих записей», что ликвидирует проблему с непредсказуемой латентностью. Масштабируется Phalanx добавлением дисков, для метаданных используется отдельное хранилище.

Как показывают предварительные тесты, использование ПО, разработанного Kalista.IO в накопителе WD Ultrastar HC600 с хост-управлением SMR, позволяет добиться уровня латентности ниже, нежели у Ultrastar HD530, который SMR-записи не использует. Результаты, полученные WD и Kalista.IO в Hadoop и Ceph можно загрузить по ссылке, в целом же, Phalanx продемонстрировала возрастание IOPS на 58%, а стабильность возросла в 10 раз.