Материалы по тегу: схд

19.08.2019 [18:11], Сергей Юртайкин

Oracle увольняет сотни человек из подразделения Flash Storage

Oracle закрывает подразделение по выпуску систем хранения данных на основе флеш-памяти и в связи с этим сокращает не менее 300 рабочих мест. Об этом стало известно изданию Blocks & File от различных источников, в том числе от попавшего под сокращение сотрудника американской компании. Тот рассказал следующее:

«Сегодня группа Ларри [Эллисона — основателя Oracle], которая неэффективно использовалась для разработки технологий хранения данных, также известная как Pillar Data, была тихо распущена, а продукт снят с производства... Уволено примерно 300 человек».

Oracle объявила о приобретении Pillar Data в июне 2011 года, но стоимость покупки не назвала. Компания была основана Ларри Эллисоном вместе с Майком Уоркманом (Mike Workman). Последний возглавил подразделение Oracle Flash Storage, в которое вошла Pillar Data. В прошлом году в Oracle Flash Storage работало 2000 человек.

Об увольнениях в Pillar Data на конференции объявил старший вице-президент по системам на основе флеш-памяти в Oracle Майк Уоркман.

Двое пользователей портала thelayoff.com анонимно подтвердили кадровую чистку. Один из них написал, что уволены все сотрудники подразделения Уоркмана, кроме 12 человек. Речь идёт о 400 работниках, сообщил он.

Постоянный URL: http://servernews.ru/992656
16.08.2019 [14:08], Сергей Юртайкин

Доходы NetApp идут на спад из-за падения продаж СХД на флеш-памяти

Производитель систем хранения данных NetApp зарегистрировал падение доходов. Сказывается слабеющий спрос на оборудование компании с твердотельными накопителями в корпоративном секторе.

За отчётный трёхмесячный период, закрытый 26 июля 2019 года, выручка NetApp составила $1,2 млрд против $1,5 млрд годом ранее. Чистая прибыль компании в сравнении этих отрезков времени сократилась с 283 до 103 млн долларов.

На скорректированной основе (без учёта разовых расходов и доходов) прибыль NetApp оказалась равной 65 центам на акцию, что на 4 цента превосходит средний прогноз от аналитиков с Уолл-стрит. Эксперты ожидали продажи на уровне $1,24 млрд.

Поскольку финансовые результаты оказались выше ожиданий рынка, котировки NetApp поднялись на 4% на электронных торгах после закрытия биржи. Однако с начала 2019 года акции компании подешевели более чем на 30%.

После обнародования квартальных итогов генеральный директор NetApp Джордж Куриан (George Kurian) отметил, что в сегменте систем хранения данных, создаваемых на основе только флеш-памяти, клиенты предпочитают покупать устройства среднего уровня и запасаться ёмкостями, которые им потребуются на следующий год. Раньше компании совершали закупки на 3 года вперёд.

Продажи оборудования на флеш-памяти у NetApp вышли на годовой уровень в $1,7 млрд, что на 24 % меньше, чем годом ранее.

Постоянный URL: http://servernews.ru/992526
12.08.2019 [21:31], Владимир Мироненко

Топ-11 трендов в отрасли хранения данных за последние 20 лет

Облачное хранилище

Что, если большую часть данных вашей компании разместить за пределами инфраструктуры, управляемой вами? Благодаря этому вы снимаете с себя часть забот по эксплуатации и поддержке аппаратного обеспечения. Можно также по желанию варьировать ёмкость хранения. Кроме того, вы застрахованы от потери данных в случае локальных стихийных бедствий. К минусам можно отнести возможные проблемы в случае потери доступа в Интернет. Также потребуется анализ для понимания, насколько реальна экономия от использования облачных служб в масштабах вашего предприятия. Впрочем, облачные технологии давно и прочно вошли во все сегменты IT-индустрии. Лидерами облачного рынка являются Amazon AWS, Microsoft Azure и Google Cloud. А ведь когда-то публичная работа AWS началась с появления хранилища S3. И это была не просто очередная «файлопомойка», а...

Объектное хранилище

Блочное или просто файловое хранилище отчасти «страдает» от отсутствия понимания со стороны ПО, что за данные на самом деле на нём хранятся. Объектный подход предоставляет не только данные, но и метаданные вкупе с уникальными идентификаторами. Объектный подход позволяет неплохо справляться с неструктурированными данными и привёл к появлению нового класса систем. Собственно файлы-то программам не нужны, им нужна содержащаяся в них информация, так почему бы не сделать интерфейс прямого доступа к ней? Какая разница, где именно хранятся данные и на какой, например, ФС. 

Споры о преимуществах и недостатках обоих подходов получили неожиданное продолжение в мобильном сегменте: подход iOS ближе к объектному, а Android всё ещё даёт доступ к файлам, что многие пользователи считают важным преимуществом. 

Виртуализация систем хранения данных

Хотя сейчас много разговоров ведётся о виртуализации серверов, виртуализация хранения данных не менее важна. Идея состоит в том, чтобы управлять всеми типами ваших хранилищ как одним массивным пулом. Это пока просто идея, но надо полагать, вовсе не утопия. Первые шаги в этом направлении уже сделаны многими компаниями.

scanrail/Getty Images

scanrail/Getty Images

Дедупликация

Раньше не было простого способа узнать, во сколько вам обходится хранение дублируемой информации, пока не появилась технология дедупликации. Данная технология постоянно сканирует хранилище данных компании для устранения избыточности. Плюсы: это экономит деньги. Минусы: это может замедлить работу вашей сети.

Предположим, что 100 сотрудников сохранили одну и ту же копию какого-нибудь документа. Конечно же, было бы намного эффективнее, если бы они все имели доступ лишь к одной копии, а любые изменения записывались бы отдельно. И это приводит нас к следующему пункту. 

Инкрементальное резервное копирование

Если до этого вы постоянно сохраняли все свои данные, то теперь, сохранив один раз весь контент, в большинстве случаев вы в дальнейшем сохраняете лишь изменения. Риск состоит в том, что процедура восстановления информации после инкрементного копирования занимает больше времени, и есть шансы на то, что оно пойдет не так, как хотелось бы. Но многие компании всё же выбирают этот метод, поскольку рост объёма данных всё равно увеличивает время, необходимое для выполнения полного резервного копирования. 

JBOD

Крупным поставщикам оборудования для хранения данных вроде EMC, Hitachi, IBM или NetApp хочется, чтобы сетевые хранилища (NAS) и сети хранения данных (SAN) состояли лишь из дорогих жёстких дисков корпоративного класса. Но постепенно у пользователей появилось понимание, что вполне можно обойтись значительно более дешёвыми жёсткими дисками, поэтому появился термин JBOD (Just a bunch of disks, просто пачка дисков), который теперь становится уже JBOF для флеш-накопителей. Кроме того, можно запускать программное обеспечение NAS или SAN на своём собственном, неспециализированном аппаратном обеспечении вместо того, чтобы платить крупным компаниям за потенциально перегруженные и почти всегда переоценённые системы. 

Non-volatile memory express (NVMe)

Замена традиционных жёстких дисков на твердотельные накопители дало много преимуществ, но одна из проблем заключалась в том, что соединения между процессорами и хранилищем на материнской плате не были рассчитаны на новые скорости. Введение нового стандарта NVMe позволило снять эту проблему и теперь скорости интерфейса хватает с избытком. Связано это и с тем, что ни SAS, ни SATA в силу давности самих стандартов не способны обеспечить достаточного параллелизма. А именно его и предлагают современные SSD. 

Твердотельные накопители (SSD)

По сравнению с жёсткими дисками SSD значительно быстрее, используют меньше энергии, уменьшает шумовое загрязнение, требует меньше места и в последнее время начинает конкурировать с ними по цене. По плотности хранения они уже давно обогнали HDD — современные корпоративные модели могут иметь объём и в 30 Тбайт, а в течение года-полутора этот объём удвоится. Главная проблема заключается в том, насколько долго SSD смогут работать без сбоев, насколько они уязвимы к повреждению хранящихся данных. 

Storage class memory (SCM)

SCM находится где-то между оперативной памятью и SSD. Они быстрее последних и дешевле первой. Появление SCM привело к изменению всей иерархии памяти и повлияло на подходы к обработке данных. Типичный представитель SCM — 3D XPoint, которая теперь доступна и виде DIMM-модулей Intel Optane DCPMM. Конкуренцию этой технологии готовы составить Samsung Z-SSD и Toshiba XL-FLASH, а в перспективе даже пока экзотическая STT-MRAM

Исследователи также работают над тем, чтобы разместить память непосредственно рядом с процессором или поверх него, а не где-то на материнской плате. Это может произойти в ближайшем будущем.

Менеджмент хранилищ и совместимость

Было бы здорово, если бы все крупные компании, производящие оборудование и программное обеспечение для хранения данных, привели свои продукты в соответствие с единым стандартом. Это было бы хорошо для пользователей, но вряд ли бы вызвало радость у поставщиков. Идея родилась ещё в 2000-х, но оказалась несбыточной мечтой. Хотя отдельные группы разработчиков все ещё пытаются её реализовать, до идеала ещё далеко.

USB-флешки

Да, USB-флешки не имеют прямого отношения к «полноценным» СХД, но всё же не менее важны. Появились они на рубеже веков, и в те времена имели объём 8 Мбайт. В настоящее время они по-прежнему пользуются популярностью, но теперь их ёмкость начинается с 8 Гбайт, что вполне соответствует кривой закона Мура. Ближе к 2040 году мы узнаем, будут ли к этому времени предлагаться флеш-накопители ёмкостью 8 Тбайт в небольшом форм-факторе. Или же появятся совершенно новые решения.

А что для вас оказалось самым значимым и что вы ждёте в будущем от накопителей и систем хранения данных?

Постоянный URL: http://servernews.ru/992296
03.08.2019 [19:34], Геннадий Детинич

Amazon на пути к SSD-массивам с минимальными задержками: известно о покупке стартапа E8 Storage

По данным израильского интернет-ресурса Globes, на которое ссылается сайт StorageNewsletter, в последних числах июля компания Amazon договорилась приобрести израильский стартап E8 Storage.

Компания E8 Storage образована в 2014 году выходцами из подразделения IBM XIV по разработке систем хранения данных Зиваном Ори (исполнительный директор) и Алексом Фридманом (глава разработчиков). За пять лет существования E8 Storage привлекла около $18,3 млн инвестиций, преимущественно от компаний Accel Partners, Magma Venture Capital и Vertex Israel. По слухам, покупка E8 Storage обойдётся компании Amazon в сумму от $50 млн до $60 млн.

Компания E8 Storage отличилась разработкой стоечных систем хранения на SSD с поддержкой NVMe и программного обеспечения, которые позволяют за вполовину меньшие деньги создать удалённые хранилища с десятикратно большей производительностью в сравнении с конкурентами. Экономия стала возможной за счёт сборки СХД на базе решений E8 Storage из широкодоступных комплектующих, а рост производительности обусловлен использованием двухпортовых NVMe SSD с подключением к разным контроллерам, благодаря архитектуре RDMA Over Converged Ethernet и за счёт развитого программного обеспечения для программно-конфигурируемых подключений и облачных сред.

По факту удалённые системы хранения данных компании E8 Storage на флеш-массивах обещают едва ли не те же самые задержки, как и в случае прямого подключения. Для облачных сервисов компании Amazon подобные решения нужны как воздух. Системы E8 Storage оказались интересны для суперкомпьютеров, финансовых систем, для гипермасштабируемых ЦОД и для других платформ, требующих минимальные задержки при обращении к удалённым СХД.

Покупка E8 Storage станет вторым вложением средств Amazon в приобретение сторонних разработчиков облачных систем в Израиле. До этого в январе 2019 года Amazon приобрела в этой стране компанию CloudEndure за $200 млн. Сотрудники E8 Storage, как и CloudEndure, перейдут на работу в офис Amazon Web Services в Тель-Авиве.

Постоянный URL: http://servernews.ru/991835
28.07.2019 [09:40], Сергей Карасёв

Существующие системы хранения данных тормозят внедрение передовых технологий

Исследование, проведённое компанией NGD Systems, говорит о том, что одним из факторов, препятствующих внедрению современных информационных технологий, являются устаревающие системы хранения данных.

Речь идёт о решении задач в области искусственного интеллекта (ИИ), машинного обучения, Интернета вещей и пр. Компании, которые внедряют данные технологии, зачастую используют существующие платформы хранения информации, попросту не способные справляться с возрастающей интенсивностью обмена данными.

Опрос более чем 300 профессионалов в области хранения данных показал, что более половины из них (54 %) считают необходимым внедрение более современных платформ хранения и обработки информации.

В текущих условиях наиболее перспективным решением является применение массивов на основе быстрых твердотельных накопителей NVMe SSD. Подавляющее большинство респондентов — 86 % — называют именно эту технологию будущим платформ хранения данных.

Около 60 % опрошенных заявили, что их компании уже применяют решения NVMe SSD в составе своих инфраструктур. При этом главными препятствиями на пути внедрения накопителей данного типа являются их высокая стоимость и ограниченный бюджет — об этом заявили 67 % респондентов. 

Постоянный URL: http://servernews.ru/991486
26.07.2019 [18:43], Геннадий Детинич

Представлены спецификации NVMe 1.4 и NVMe-oF 1.1: облака и корпоративные системы станут отзывчивее

На днях организация NVM Express объявила о выходе финальных спецификаций интерфейса (архитектуры) NVM Express в версии 1.4 и спецификаций NVMe over Fabrics (NVMe-oF) версии 1.1 для последней оценки перед финальной публикацией в сентябре (так называемый 45-дневный обзор участниками разработки).

Предыдущие версии спецификаций вышли в мае 2018 года (NVMe 1.3a) и в июне 2016 года (NVMe-oF 1.0). За прошедшее с тех пор время в оба стандарта добавлены новые возможности для улучшения производительности и для лучшего управления потоками данных. Обе архитектуры обеспечат быстрое, простое и масштабируемое решение для создания вычислительных систем с доступом к данным как к системам хранения с прямым подключением, так и к удалённым СХД.

Samsung NVMe NF1 SSD

Samsung NVMe NF1 SSD

Спецификации NVMe 1.4 будут отвечать за прямое подключение накопителей и систем хранения во всех областях работы с данными: в облаках, в локальных корпоративных системах и в компьютерах пользователей. Новые спецификации заметно улучшают приоритизацию (QoS), ускоряют обмен данными с накопителями и упрощают развёртывание масштабируемых платформ для ЦОД.

В новых спецификациях NVMe, в частности, упрощены процедуры восстановления и миграции данных (Rebuild Assist), представлен модуль непрерывного журналирования событий (Persistent Event Log) для детального разбора полётов по возникающим проблемам, введён улучшенный многомаршрутный или асимметричный доступ к пространству имён (Asymmetric Namespace Access), а также предусмотрен буфер (Host Memory Buffer) на стороне клиентских систем для снижения задержек при обращении к SSD.

Спецификации NVMe-oF 1.1 включают поддержку транспорта TCP/IP для уже действующей сетевой инфраструктуры. Удалённое подключение SSD и массивов СХД должно быть максимально близко по возможностям работы к хранилищам и накопителям с прямым подключением. 

Отдельно улучшена работа с очередями процедур ввода/вывода. Улучшен параллелизм выполнения потоков command to response. Представлен ряд других улучшений, которые помогут собирать комплексные системы с интеграцией СХД одновременно с прямым и удалённым подключением. Разработчики архитектуры и протоколов NVMe ожидают, что поставки накопителей и систем с поддержкой NVM Express в этом году превысят совокупные поставки накопителей с SATA и SAS.

Постоянный URL: http://servernews.ru/991421
26.07.2019 [11:55], Сергей Карасёв

Synology FlashStation FS6400: стоечная система хранения данных в формате 2U

Компания Synology офциально анонсировала сервер хранения данных FlashStation FS6400, предназначенный для чувствительных к задержкам задач с высокой интенсивностью операций ввода-вывода.

Устройство имеет форм-фактор 2U — оно рассчитано на монтаж в стойку. В составе новинки задействованы два процессора Intel Xeon Silver 4110 с восемью ядрами и возможностью одновременной обработки до шестнадцати потоков инструкций (2,1–3,0 ГГц). Объём оперативной памяти DDR4 в базовой конфигурации составляет 32 Гбайт, в максимальной — 512 Гбайт.

Предусмотрены 24 отсека для установки 2,5-дюймовых накопителей с интерфейсом SAS или SATA. Максимальная внутренняя ёмкость может составлять 184,32 Тбайт в конфигурации 7,68 Тбайт × 24.

Таким образом, на основе сервера можно сформировать высокопроизводительное хранилище типа All-Flash (только твердотельные накопители), подходящее для постобработки мультимедийных файлов, развёртывания виртуальных машин, обработки транзакций в реальном времени и приложений баз данных.

Заявленная производительность превышает 240 000 операций ввода-вывода в секунду при произвольной записи блоками по 4 Кбайт. Поддерживаются такие решения по виртуализации, как VMware vSphere, Microsoft Hyper-V, Citrix Xen Server и OpenStack Cinder.

Среди прочего стоит упомянуть два порта 1GbE LAN, два разъёма 10GbE LAN и два порта USB 3.0. Есть также пара слотов расширения PCIe Gen3 x8. 

Постоянный URL: http://servernews.ru/991406
25.07.2019 [17:35], Сергей Карасёв

Новые сетевые хранилища iXsystems FreeNAS используют процессор Intel Atom C3000

Компания iXsystems анонсировала сетевые хранилища данных FreeNAS Mini E и FreeNAS Mini XL+, которые присоединились к ранее выпущенным моделям FreeNAS Mini и FreeNAS Mini XL.

Новинки используют аппаратную платформу Intel Atom C3000 Denverton, а не Avoton, как уже доступные решения. Кроме того, теперь применяется оперативная память стандарта DDR4 против DDR3 у более ранних устройств.

Хранилище FreeNAS Mini E относится к начальному уровню. Оно допускает установку четырёх 3,5-дюймовых накопителей с интерфейсом SATA и возможностью «горячей» замены, а также двух внутренних накопителей формата 2,5 дюйма.

Устройство использует чип Intel Atom C3338, а объём оперативной памяти составляет 8 Гбайт. Есть четыре сетевых порта Gigabit Ethernet LAN и дополнительный порт управления IPMI LAN.

Вторая новинка, FreeNAS Mini XL+, рассчитана на восемь 3,5-дюймовых накопителей с поддержкой «горячей» замены. Кроме того, можно установить один 2,5-дюймовый накопитель с возможностью «горячей» замены, а также один внутренний накопитель типоразмера 2,5 дюйма.

Оснащение хранилища включает процессор Intel Atom C3758, 32 Гбайт ОЗУ, слот PCI Express 3.0 x4, а также два Ethernet-порта 10 Гбит/c и сетевой порт управления.

Сравнительные характеристики различных устройств FreeNAS представлены ниже (данные ServeTheHome). Все устройства, как нетрудно догадаться, рассчитаны на работу с одноимённым дистрибутивом. 

Постоянный URL: http://servernews.ru/991362
21.07.2019 [11:29], Сергей Карасёв

Стоечный массив Western Digital IntelliFlash N5100 имеет ёмкость до 92 Тбайт

Компания Western Digital анонсировала массив хранения данных IntelliFlash N5100, ориентированный на использование в корпоративном секторе.

Решение предназначено для монтажа в стойку. Оно имеет типоразмер 2U; габариты составляют 437 × 89 × 628 мм.

Массив рассчитан на работу исключительно с производительными твердотельными накопителями NVMe. Для их установки доступны 24 отсека. При использовании изделий Ultrastar DC SN200 NVMe SSD вместимостью 3,84 Тбайт суммарный объём хранилища может достигать 92 Тбайт.

Утверждается, что показатель IOPS (операций ввода/вывода в секунду) при произвольных чтении и записи составляет до 400 000.  Применяется программная платформа IntelliFlash OS 3.10.

Доступны интерфейсы 40 GbE, 10 GbE и Gigabit Ethernet, а также 16/8 Gbps Fibre Channel. С установленными накопителями хранилище весит приблизительно 30 килограммов.

Что касается стоимости массива Western Digital IntelliFlash N5100, то она определяется выбранной конфигурацией. 

Постоянный URL: http://servernews.ru/991070
29.06.2019 [20:44], Андрей Созинов

Как создавалось и обрабатывалось реальное «фото» чёрной дыры M87

Чуть более двух месяцев назад учёным из Европейской Южной Обсерватории (ESO) удалось получить прямое визуальное изображение чёрной дыры в центре массивной галактики Messier 87, что в созвездии Девы. И теперь Supermicro опубликовала подробности о компьютерной системе, которая помогла получить данное изображение, ведь для этого потребовалось обработать огромное количество данных — 4 Пбайт.

Эти данные о сверхмассивной чёрной дыре, расположенной на расстоянии 55 млн световых лет, были получены с помощью восьми радиотелескопов, расположенных по всей Земле. Подробности о физической стороне процесса можно найти в замечательной лекции Архэ. Мы же обратимся к IT-составляющей. 

«Съёмка» длилась несколько ночей весной 2017 года, а получаемая информация — аналоговый сигнал на частотах порядка 2 ГГц — оцифровывалась и сохранялась на жёсткие диски. Сообщается, что запись данных проводилась на скорости 64 Гбайт/с, так что каждый телескоп за одну только ночь записывал 350 Тбайт данных. Исследователи использовали 1024 жёстких диска — по 128 на каждый телескоп, где они делились между четырьмя бэкенд-системами.

Использовались ёмкие накопители, заполненные гелием: в частности, HGST Ultrastar HelioSeal от Western Digital. Такие накопители лучше проявляют себя при работе на большой высоте, где расположена значительная часть радиотелескопов. Впрочем, в ближайшем будущем их, вероятно, могут сменить твердотельные накопители-«рулеры»: Supermicro на днях представила первые СХД и серверы с SSD формата EDSFF

После сбора данных накопители были доставлены в Институт Макса Планка (MPI) и обсерваторию Хейстек Массачусетского технологического института (MIT Haystack). Там данные с них обрабатывались с помощью программного обеспечения DiFX.

Кластер MIT, состоящий из 60 вычислительных узлов, размещается в десяти стойках, содержащих три поколения серверов Supermicro, в том числе и 38 систем Supermicro TwinPro. Все узлы объединены сетью Ethernet 25 Гбит/с и FDR InfiniBand, а серверы построены на 10-ядерных процессорах Intel Xeon. Объём хранилища MIT составляет примерно половину петабайта.

В свою очередь кластер MPI обладает тремя головными серверными узлами Supermicro и 68 вычислительными узлами (в сумме 1360 ядер). Также в систему MIP входит 11 систем хранения данных Supermicro (работающих под управлением BeeGFS) ёмкостью 1,6 петабайта и особые СХД собственной разработки Mark 5 и Mark 6. Для соединения используется FDR InfiniBand.

Все собранные данные были обработаны и «выровнены», то есть скорректированы по времени и положению телескопов. После всё было перепроверено, и здесь использование двух систем обеспечило более высокую точность. После сопоставления, данные были снова отправлены на обработку для визуализации, временно́го анализа и моделирования. В итоге это и позволило получить первое изображение чёрной дыры.

Постоянный URL: http://servernews.ru/989951
Система Orphus