Материалы по тегу: хранение данных

05.12.2018 [08:08], Андрей Крупин

«Рэйдикс» запатентовала метод повышения производительности СХД

Российская компания «Рэйдикс», занимающаяся разработкой программного обеспечения RAIDIX для SAN- и NAS-систем хранения данных, объявила о получении патента на алгоритм адаптивного упреждающего чтения, который позволяет ускорить работу файловых хранилищ.

Предложенная исследовательской лабораторией «Рэйдикс» методика позволяет организовать быстрый ввод-вывод данных в операционной системе и автоматически настраивать параметры СХД «на лету» при изменении рабочей нагрузки. По словам разработчиков, механизм упреждающего чтения позволяет предугадать, к каким файлам будет сделан запрос, и перенести их с более медленных носителей (например, с жёстких дисков) на более быстрые (оперативная память, твердотельные накопители), а также максимально эффективно использовать ресурсы кеша СХД, что позволяет сократить время доступа к данным и ускорить общую производительность системы хранения данных. Предложенный алгоритм определяет адресные последовательности в поступающих запросах и присваивает им уникальные значения упреждающего чтения в зависимости от скорости каждого потока.

Сообщается, что в настоящее время адаптивный алгоритм упреждающего чтения используется в программном обеспечении для управления системами хранения данных RAIDIX 4.7. Решение позволяет управлять отдельными RAID-массивами и кластерами хранения, обеспечивает высокую доступность данных при последовательной и случайной нагрузках, поддерживает протоколы SAN (Fibre Channel, InfiniBand, iSCSI, 12G SAS) и NAS (NFS, SMB, AFP, FTP). RAIDIX предоставляет оптимальную скорость расчётов благодаря реализации патентованных уровней RAID 7.3 и RAID N+M. Кроме того, программная технология включает в себя функцию упреждающей реконструкции данных без физического обращения к дискам, механизм поиска и устранения скрытых ошибок, интеллектуальный модуль QoSmic для распознавания и приоритезации приложений и другие возможности.

Дополнительные сведения о системе RAIDIX можно найти на сайте raidix.ru.

Материалы по теме:

Источник:

Постоянный URL: http://servernews.ru/979175
30.11.2018 [13:09], Андрей Крупин

Red Hat приобрела поставщика систем управления данными в гибридном облаке NooBaa

Компания Red Hat объявила о покупке разработчика решений для управления хранилищами данных в гибридных и мультиоблачных средах NooBaa. Сумма сделки не разглашается.

Поглощение NooBaa позволит Red Hat расширить экспертизу в сфере cloud-технологий. Разработки NooBaa дополнят функциональные возможности гибридных облачных решений Red Hat, включая OpenShift Container Platform, OpenShift Container Storage и Ceph Storage, и позволят предложить заказчикам более мощные и интегрированные возможности по управлению приложениями, вычислительными ресурсами, хранилищами и данными в общедоступных и частных инфраструктурах.

«Переносимость данных — это ключевой императив при создании и развёртывании современных приложений в частных и мультиоблачных средах, — говорит Ранга Рангачари (Ranga Rangachari), вице-президент Red Hat и руководитель направления Storage and Hyperconverged Infrastructure. — Технологии NooBaa расширят портфель решений Red Hat и усилят нашу способность удовлетворять потребности разработчиков в сегодняшнем гибридном и мультиоблачном мире. Мы рады, что команда NooBaa вошла в семью Red Hat и мы будем вместе работать на тем, чтобы Red Hat и дальше оставалась технологическим лидером в сфере открытого гибридного облака».

NooBaa была создана в 2013 году для решения задач повышения прозрачности и обеспечения управляемости при работе с неструктурированными данными в распределённых средах. Компания разработала платформу управления данными, которая вводит дополнительный уровень абстракции над имеющейся инфраструктурой хранения данных. Такой подход не только обеспечивает переносимость данных из одного облака в другое, но и позволяет управлять данными, которые распределено хранятся сразу в нескольких местах, таким образом, что для приложений они выглядят как обычный набор данных в одном хранилище.

Материалы по теме:

Источник:

Постоянный URL: http://servernews.ru/978993
16.11.2018 [22:59], Геннадий Детинич

Накопитель SMART Modular nvNITRO на памяти MRAM вышел в исполнении U.2

Компания SMART Modular Technologies представила накопитель nvNITRO в форм-факторе U.2. До этого устройство распространялось в виде PCIe-адаптера с шиной PCI Express 3.0 x8. Поставки PCIe-версии накопителя SMART Modular nvNITRO ёмкостью 1 Гбайт стартовали в мае текущего года. Анонс разработки состоялся в августе 2017 года. Версия с 2 Гбайт памяти так и не вышла. Пусть вас не смущает небольшой по современным меркам объём памяти накопителей. Зато это память Spin-Transfer Torque MRAM (STT-MRAM) компании Everspin Technologies, которая, как сказано в спецификациях, имеет неограниченную устойчивость к износу.

Накопитель SMART Modular nvNITRO ёмкостью 1 Гбайт в форм-факторе U.2

Накопитель SMART Modular nvNITRO ёмкостью 1 Гбайт в форм-факторе U.2

Другое важное преимущество у магниторезистивной памяти с записью с переносом спина электрона — это малые задержки при обращении. Задержки при чтении порядка 6,26 мкс, а задержки при записи — 7,22 мкс. Даже у хвалёных и непревзойдённых Intel Optane на памяти 3D XPoint задержки на этих операциях в пределах 10 мкс, а у обычных SSD на памяти NAND они могут быть больше на один порядок. К сожалению, всё портит низкая плотность памяти MRAM. Разработчик и производители так и не смогли наладить массовое производство магниторезистивной памяти объёмом свыше 256 Мбит на один кристалл.

Информация в ячейке MRAM хранится в виде намагниченности слоёв

Информация в ячейке MRAM хранится в виде намагниченности слоёв

Выпуск накопителя nvNITRO в исполнении U.2 расширяет сферу использования устройств и повышает удобство эксплуатации. Например, данный форм-фактор поддерживает горячую замену накопителей, что невозможно в исполнении карты с интерфейсом PCIe. Также nvNITRO в исполнении U.2 удобнее использовать в качестве кеширующего накопителя в стойке, установив его непосредственно в корзину с SSD или HDD, доступ к данным на которых он должен кешировать.

Наиболее востребованной сферой применения накопителя nvNITRO считается область проведения финансовых транзакций, где время буквально — деньги. Производитель утверждает, что использование nvNITRO снижает время ожидания реакции финансовых приложений до 90 % по сравнению с SSD корпоративного класса. Правда, цена за накопитель обещает оказаться немалой. По форм-фактору U.2 информации пока нет, а в исполнении PCIe накопитель стоит от $2200.

nvNITRO Accelerator Card

nvNITRO Accelerator Card

Стоит также отметить высокое потребление накопителей nvNITRO. При объёме всего в 1 Гбайт устройство потребляет до 25 Вт в режиме чтение/запись в соотношении 70/30. Может так статься, что в этом вина контроллера, который выполнен на матрице FPGA, что достаточно неэффективно. Но подтверждения этому у нас нет.

Постоянный URL: http://servernews.ru/978314
16.11.2018 [17:00], Сергей Карасёв

SC18: серверы и системы хранения данных на стенде Huawei

Компания Huawei продемонстрировала на конференции SC18 (Supercomputing Conference) в Далласе (Техас, США) новейшие аппаратные решения корпоративного класса. С продуктами познакомились корреспонденты 3DNews.

На стенде Huawei, в частности, были представлены серверы и системы хранения данных семейства TaiShan. В этих устройствах применяются процессоры с архитектурой ARM.

Так, к примеру, сервер TaiShan X6000 содержит два процессора HiSilicon Hi1616, каждый из которых насчитывает 32 вычислительных ядра ARM Cortex-A72 с тактовой частотой до 2,4 ГГц.

Кроме того, продемонстрированы высокопроизводительные твердотельные накопители ES3000 V5 NVMe. Устройства выполнены в 2,5-дюймовом форм-факторе с интерфейсным разъёмом U.2. Применены микрочипы флеш-памяти 3D TLC NAND. В зависимости от модификации скорость последовательного чтения достигает 3500 Мбайт/с, скорость последовательной записи — 3050 Мбайт/с. Вместимость варьируется от 800 Гбайт до 8 Тбайт.

Huawei также показала решения для ускоренной обработки операций, связанных с искусственным интеллектом (ИИ). Это, к примеру, компактный модуль Atlas 200 AI и карта Atlas 300 AI, которая предназначена для дата-центров и серверов. Наконец, продемонстрированы акселераторы FX-Series FPGA. 

Постоянный URL: http://servernews.ru/978298
13.11.2018 [16:06], Геннадий Детинич

Western Digital предлагает расширять оперативную память массивами SSD

Для зарождающегося рынка решений и услуг «вычислений в памяти» (in-memory computing) компания Western Digital разработала семейство накопителей Ultrastar DC ME200 Memory Extension Drive. Подчеркнём, в наименовании новинки вы не увидите привычной аббревиатуры SSD. С точки зрения Western Digital — это именно «расширитель» ОЗУ, а не привычное всем устройство для долговременного хранения данных. Внешне новинки невозможно отличить от SSD в исполнении PCIe-адаптера или накопителя в форм-фактре U.2. Но логика работы накопителей Memory Extension Drive совсем другая и требует иного подхода со стороны разработчиков программ и операционных систем.

В компании Western Digital заявляют о совместимости Memory Extension Drive с Linux 64-bit OS, RHEL 6.5, 6.6, 6.7, 6.8, 6.9, 7.0, 7.1, 7.2, 7.3, 7.4, SLES 11-SP4, 12, 12-SP1, 12-SP2, Fedora Core версии от 4 до 27, Open SuSe версий 10 и 11, Ubuntu Server версий от 16.04 до 17.10 и Debian 9.5.0. Драйверы и утилиты создают платформу для адресации к виртуальной программно-конфигурируемой памяти, где нет различия между модулями DRAM и SSD с поддержкой протокола NVMe. Тем самым условно сколь угодно большой массив данных можно загрузить и обработать в памяти, где для программного обеспечения нет различия между модулями DRAM и накопителями SSD.

Для того, чтобы накопители Memory Extension Drive работали с производительностью, близкой к производительности оперативной памяти, а в ином случае весь этот огород не имеет смысла, разработчик задействовал свыше 20 алгоритмов кеширования, предсказания ветвлений и другие механизмы для сглаживания проблем, связанных с задержками обращения к SSD. При этом Western Digital настаивает, что проблему стирания границы между SSD и DRAM в основном должны решать специальные алгоритмы машинного обучения. В одиночку компания не потянет весь круг задач и призывает сообщество развивать программную инфраструктуру для накопителей Memory Extension Drive.

Как уверены в компании, накопители Memory Extension Drive хорошо подходят для решения следующих задач: для сетевого журналируемого хранилища данных Redis, для сервиса кеширования данных Memcached в оперативной памяти на основе хеш-таблицы, для баз данных In-Memory, для хранилищ данных, для IoT-платформ, для потоковой аналитики, для Apache (Spark, Storm, Kafka), для распределённых баз в памяти, для приложений с кешированием, для распределённого контента (CDN), для услуг SaaS, для аналитики как сервиса, AI/ML и сервисов с массивным журналированием.

На момент анонса компания поставляет избранным клиентам накопители Ultrastar DC ME200 Memory Extension Drive в виде моделей объёмом 1 Тбайт, 2 Тбайт и 4 Тбайт. Полка высотой 1U вместит достаточно накопителей в форм-факторе U.2, чтобы предоставить пользователю 24 Тбайт «почти что памяти DRAM». Насколько будут велики потери от работы такой виртуальной памяти? По данным WD, если взять за чистую производительность обращение к 786 Гбайт DRAM, скорость работы которой оценивается на уровне 1,080 млн транзакций в секунду, то микс 3:1 (576 Гбайт Ultrastar и 192 Гбайт DRAM) просядет до 91 % производительности или до 983 тыс. транзакций, а при соотношении 7:1 (672 Гбайт Ultrastar и 96 Гбайт DRAM) производительность снизится до 85 % или 918 тыс. транзакций в секунду. Достаточно интересно, но как за это проголосует индустрия, пока непонятно.

Постоянный URL: http://servernews.ru/978113
26.10.2018 [14:45], Андрей Крупин

«Рэйдикс» представила новый релиз ПО для управления системами хранения данных

Российская компания «Рэйдикс», занимающаяся разработкой программного обеспечения RAIDIX для SAN- и NAS-систем хранения данных с интерфейсами Fibre Channel, iSCSI и InfiniBand, объявила о выпуске обновлённой версии своего продукта.

Представленное отечественным разработчиком решение может быть установлено на недорогие стандартные серверные комплектующие x64_86 и позволяет создавать отказоустойчивые системы хранения данных с высокой производительностью и низкой стоимостью эксплуатации. В основе ПО лежат собственные запатентованные алгоритмы расчёта RAID, которые позволяют добиваться от аппаратной платформы СХД оптимальных показателей производительности и отказоустойчивости, надёжной защиты данных и максимальной полезной ёмкости. Решения на базе RAIDIX могут быть использованы в корпоративном секторе, медиаиндустрии, высокопроизводительных вычислениях (HPC), видеонаблюдении и других отраслях.

В новой версии RAIDIX 4.7 реализованы функции удалённой репликации файлов, что позволяет создавать катастрофоустойчивые решения и обеспечивать дополнительную защиту данных за счёт хранения копий на удалённых СХД. Кроме того, разработчики предусмотрели возможность подключения к серверам LDAP для общей работы пользователей с папками NFS. Также была добавлена поддержка контроллеров SAS LSI 9400, адаптеров FC QLogic QLE 269х и протокола NFS v.4 для сервиса NAS.

Программное обеспечение RAIDIX включено в реестр Минкомсвязи РФ как рекомендованное для закупки российскими компаниями и госструктурами.

Дополнительные сведения о системе RAIDIX можно найти на сайте raidix.ru.

Материалы по теме:

Источник:

Постоянный URL: http://servernews.ru/977376
01.10.2018 [15:05], Сергей Карасёв

Вступили в силу требования «пакета Яровой» о хранении интернет-трафика

С 1 октября 2018 года в России вступили в силу положения «пакета Яровой», обязывающие операторов связи хранить трафик пользователей Интернета.

Напомним, что так называемый «пакет Яровой» нацелен на борьбу с терроризмом. Он обязывает участников российского телекоммуникационного рынка хранить данные о переписке и звонках пользователей в течение трёх лет, а интернет-ресурсы — в течение года.

Часть положений «пакета Яровой» вступила в силу 1 июля нынешнего года. Теперь, как сообщается, начали действовать дополнительные требования: операторам связи придётся в течение полугода хранить содержания переписки и разговоров пользователей.

«Согласно утверждённым правительством правилам, операторы связи будут осуществлять хранение на территории РФ передаваемой пользователями информации на принадлежащих компании технических средствах. Документ предусматривает и возможность по согласованию с ФСБ хранить данные на ресурсах других операторов связи», — пишет «Интерфакс».

Нужно отметить, что «пакет Яровой» наделал много шума. Его внедрение привело к тому, что операторы понесли огромные расходы, обусловленные необходимостью формирования новой инфраструктуры. Это отразилось на стоимости услуг для рядовых абонентов: цены на связь начали расти. 

Постоянный URL: http://servernews.ru/976191
07.09.2018 [10:20], Сергей Карасёв

Рынок корпоративных систем хранения данных растёт ударными темпами

Компания International Data Corporation (IDC) подвела итоги исследования мирового рынка систем хранения данных корпоративного класса во втором квартале текущего года.

Отрасль демонстрирует ударные темпы роста, что объясняется быстрым развитием облачных платформ, развёртыванием новых сервисов и обновлением корпоративных инфраструктур.

По итогам квартала объём рынка достиг $13,2 млрд. Это на 21,3 % больше прошлогоднего значения, когда отрасль показала результат в $10,9 млрд.

Суммарная вместимость поставленных за три месяца хранилищ и накопителей достигла 111,8 Эбайт. Рост в годовом исчислении составил 70,7 %.

Рейтинг крупнейших поставщиков возглавляет Dell с выручкой в $2,5 млрд и долей в 19,1 %. На втором и третьем местах располагаются соответственно HPE/New H3C Group и NetApp, которые получили $2,3 млрд и $832 млн дохода: эти компании контролируют 17,3 % и 6,3 % отрасли.

Что касается сегмента внешних хранилищ, то здесь квартальная выручка за год поднялась на 14,4 % — с $5,4 млрд до $6,1 млрд. Тройка ведущих поставщиков выглядит следующим образом: Dell ($1,8 млрд; 29,2 %), NetApp ($832 млн; 13,5 %) и HPE/New H3C Group ($652 млн; 10,6 %). 

Постоянный URL: http://servernews.ru/975068
07.08.2018 [17:37], Сергей Карасёв

Правила хранения данных по «пакету Яровой» подверглись жёсткой критике

Министерство экономического развития Российской Федерации выступило с критикой в адрес требований по хранению данных в рамках так называемого «пакета Яровой».

Перечень требований, о котором идёт речь, подготовлен Министерством цифрового развития, связи и массовых коммуникаций. В нём описываются требования к оборудованию и программно-техническим средствам, используемым операторами связи с целью реализации «пакета Яровой». Этот антитеррористический закон, напомним, предусматривает, что операторы обязаны хранить данные о переписке и звонках пользователей в течение трёх лет, а интернет-ресурсы — в течение года. Плюс к этому участникам рынка придётся в течение полугода хранить содержания переписки и разговоров пользователей.

В выводах Минэкономразвития говорится, что часть предлагаемых требований по хранению данных попросту противоречат действующему законодательству.

Кроме того, отмечено наличие невыполнимых или трудноисполнимых на практике требований, предъявляемых к программно-аппаратным средствам. Более того, на рынке отсутствуют программно-технические средства и оборудование, соответствующее требованиям.

Наконец, говорится, что предлагаемые правила обернутся для участников IT-рынка слишком большими финансовыми затратами.

«Кроме того, сделан вывод о наличии в проекте акта положений, вводящих избыточные обязанности, запреты и ограничения для физических и юридических лиц в сфере предпринимательской и иной экономической деятельности или способствующих их введению, а также положений, приводящих к возникновению необоснованных расходов физических и юридических лиц в сфере предпринимательской и иной экономической деятельности, а также бюджетов всех уровней бюджетной системы Российской Федерации», — пишет Минэкономразвития. 

Постоянный URL: http://servernews.ru/973648
15.07.2018 [16:47], Сергей Карасёв

IBM FlashSystem 9100: мощная платформа хранения данных

Компания IBM представила систему FlashSystem 9100 — мощную платформу хранения данных, ориентированную на корпоративный рынок.

Как утверждает разработчик, анонсированное решение сочетает в себе быстродействие флеш-памяти и протокола Non-Volatile Memory Express (NVMe) с надёжностью и инновационными возможностями технологии IBM FlashCore и богатым комплексом функций IBM Spectrum Virtualize (широкий ряд служб обработки данных, которые можно применять более чем в 440 разнородных системах хранения данных IBM и других производителей).

Система выполнена в корпусе форм-фактора 2RU. Суммарная ёмкость установленных накопителей может достигать 2 Пбайт. Таким образом, в стойке 42RU можно сформировать хранилище ёмкостью до 32 Пбайт.

Заказчик может выбрать модули IBM FlashCore (FCM) с высоким внутренним быстродействием, многомерной защитой данных и новейшими функциями управления флеш-памятью, предоставляемыми технологией FlashCore, или предпочесть флеш-накопители NVMe, уже ставшие отраслевым стандартом.

Базовые конфигурации и системные возможности IBM FlashSystem 9100 можно легко дополнить компонентами IBM Spectrum Storage в одном или нескольких из трёх решений: решение для многократного использования, защиты и эффективности данных; решение для непрерывности бизнеса и многократного использования данных или решение для гибкости частного облака и защиты данных.

С целью снижения рисков, ускорения развёртывания и повышения окупаемости вложений все решения поставляются с утверждёнными проектными документами. 

Постоянный URL: http://servernews.ru/972610
Система Orphus