Материалы по тегу: базы данных

18.05.2017 [09:00], Алексей Степин

Intel успешно продемонстрировала работу модулей памяти 3D XPoint

Основным ограничителем в ряде серьёзных задач, исполняемых в ЦОД, служит узкое место в виде подсистемы хранения данных. Да, в последние годы твердотельные накопители сделали огромный шаг вперёд, и всё же в ряде случаев они проигрывают обычной оперативной памяти, особенно там, где ценится низкая задержка при обращении к данным, например, в крупных системах БД. Технология Intel 3D XPoint призвана устранить это «бутылочное горлышко», решив заодно и проблему с необходимостью загружать данные в память каждый раз при сбоях электропитания. Как известно, она предусматривает создание не только накопителей в привычных нам форматах PCIe, M.2 и U.2, но и в виде модулей DIMM — и такие модули на днях Intel успешно продемонстрировала в работе.

Выглядят такие модули точно так же, как и обычные DIMM. Устанавливаются они в те же слоты серверной платформы, что и оперативная память, а современные технологии позволяют им выглядеть как блочным устройством, так и расширением RAM. Производительность у модулей Intel Persistent Memory находится в промежутке между DIMM и твердотельными накопителями, но особенно удобны они для использования совместно с приложениями типа «база данных в памяти», таких, как SAP HANA (платформа для анализа данных и машинного обучения). Неудивительно, что демонстрация состоялась на конференции SAP Sapphire 2017, которая проходит сейчас в городе Орландо, штат Флорида (США), и использовалась при этом именно платформа SAP HANA.

Разумеется, сфера применения энергонезависимых модулей памяти не ограничена базами данных — от внедрения новой технологии выиграют все, от платформ виртуализации и облачных сервисов до суперкомпьютеров, производительность которых тоже упирается в традиционные «костыли». Полный список задач занял бы не одну страницу. Когда же нам следует ожидать новую революцию в сфере хранения данных? Судя по официальным данным, представленным Intel, начала поставок модулей Persistent Memory следует ожидать в 2018 году вместе с обновлением процессоров Xeon Scalable (кодовое название Cascade Lake). Но работу над программной поддержкой такой памяти следует начинать уже сейчас, и Intel готова предоставить разработчикам нужные библиотеки NVML (Non-Volatile Memory Libraries). Дополнительная информация также имеется на сайте Persistent Memory Programming.

Проблема с делением вычислительных систем на зоны «быстрой» и «медленной» памяти действительно в последние годы встаёт всё более остро. В этом году, с 3 по 7 апреля в Казанском федеральном университете прошла международная конференция, посвящённая развитию параллельных вычислительных технологий, где этот вопрос разбирался отдельно и глубоко. Мы опубликовали даже посвящённую этому событию статью. Одним из главных «виновников» торжества стала Intel, которая продемонстрировала свои достижения: процессоры Xeon E5 v4, шину Omni-Path, ускорители Xeon Phi Knights Langing и сопроцессоры машинного обучения, в том числе, ускорители Nervana.

Затронула компания и технологию Optane. Первые накопители на базе энергонезависимой памяти 3D XPoint — это лишь верхушка айсберга: они практически ничем не отличаются от обычных SSD и могут предложить только количественные улучшения, а компания Intel замахивается на всю парадигму с делением памяти на области. На вышеприведённой диаграмме всё ещё присутствуют накопители SSD в качестве быстрой памяти подкачки, но ничто не мешает и переходу полностью на модули Persistent Memory DIMM. В такой схеме останется разве что удалённое звено СХД на базе HDD с SSD-кешем, но как показывает практика и демонстрация прототипа The Machine, оснащённого 160 Тбайт единого пространства памяти, можно отказаться и от этого звена. Пока это очень сложно, поскольку память NAND не обладает нужными скоростными характеристиками, а DRAM целиком зависит от надёжности электропитания. Массовое распространение чипов 3D XPoint может положить этой сложности конец.

В предельном виде иерархия для одного вычислительного узла станет выглядеть следующим образом: «ЦП + кеш + встроенная в ЦП быстрая память типа MCDRAM + модули NVDIMM 3DXP + межузловые соединения». Здесь на помощь придёт технология NVMe over Fabric, обеспечивающая быструю связь с низким временем отклика между различными узлами ЦОД или суперкомпьютера. Решения физического уровня существуют вполне подходящие: так, шина InfiniBand EDR уже в 2014 году могла обеспечивать соединения на скорости 300 Гбит/с, а решения уровня 2017 года достигли впечатляющих 600 Гбит/с. Первое поколение Intel Omni-Path уже работало на скорости 100 Гбит/с и впереди у этой шины новые скоростные горизонты. Создание суперкомпьютеров, облачных систем или целых крупных ЦОД с объёмными системами хранения данных в виде единого пространства памяти уже не видится фантастикой: как уже было сказано, в 2018 году появятся новые модули Intel Persistent Memory DIMM, которые существенно облегчат постройку таких систем и сделают их архитектуру ещё проще и стройнее, а значит, и эффективнее.

Постоянный URL: http://servernews.ru/952378
03.04.2017 [18:22], Сергей Карасёв

Mail.Ru Group выведет СУБД Tarantool на рынок США

Компания Mail.Ru Group сообщила о том, что opensource-решение для управления базами данных Tarantool выходит на американский рынок.

СУБД Tarantool — собственная разработка Mail.Ru Group, которая используется в компании около девяти лет и ориентирована на решения в области промышленного Интернета вещей (Industrial Internet of Things, IIoT). В отличие от большинства промышленных систем управления базами данных, предъявляющих высокие технические требования к ресурсам, Tarantool можно устанавливать даже на недорогие устройства стоимостью до $50. Tarantool позволяет также оптимизировать траты на IT-инфраструктуру за счёт высокой производительности.

Запуск Tarantool в США состоялся через год после того, как Mail.Ru Group официально представила новое направление своего бизнеса — «системы хранения данных», ориентированное на предоставление услуг на базе Tarantool. Совместно с AT Consulting компания приступила к разработке решений на основе этой СУБД для заказчиков из коммерческого и государственного секторов, а также к оказанию услуг по внедрению и кастомизации.

«Мы будем плотно работать с рынком США и Канады. Мы хотим дать бизнесу возможность в полной мере оценить преимущества Tarantool, как это уже сделал ранее ряд крупных компаний в Европе, среди которых Yota, "ВымпелКом", Badoo, Avito, QIWI, и Wallarm», — заявляет Mail.Ru Group.

Отмечается, что с целью продвижения Tarantool на американском рынке будет открыто представительство в Кремниевой долине. Специалисты будут оказывать полноценную поддержку и помощь клиентам, которые будут переходить на Tarantool или захотят оценить СУБД в рамках бесплатного пробного периода. 

Постоянный URL: http://servernews.ru/950141
03.12.2016 [19:19], Алексей Степин

Любопытные факты о процессоре Oracle SPARC S7

На наших страницах преимущественно рассказывается о процессорных архитектурах x86 и ARM — таковы реалии современного рынка информационных технологий. Но это не значит, что другие архитектуры умерли. Так, PowerPC успешно используется в различных адаптерах, таких, как аппаратные RAID-контроллеры, растёт популярность открытой архитектуры RISC-V, а в мощных системах трудятся процессоры IBM Power и Oracle SPARC. История у архитектуры SPARC долгая и славная. Начало она берёт в 1987 году, но более всего эти процессоры прославились, пожалуй, в недорогих рабочих станциях компании Sun Microsystems, впоследствии приобретённой корпорацией Oracle. Архитектура не умерла, и Oracle продолжила разрабатывать и выпускать новые высокопроизводительные процессоры на её основе. В этом году был выпущен более дешёвый вариант 32-ядерного процессора SPARC M7 — SPARC S7.

Этот чип также, в первую очередь, нацелен на применение в серверных системах, работающих с базами данных — разумеется, в первую очередь, с программным обеспечением самой Oracle. Производительность на ядро у S7 в сравнении с M7 выросла на 11 %, но сам процессор стал в максимальной конфигурации восьмиядерным с 16 Мбайт кеша L3. Возросла и тактовая частота, теперь она достигает 4,27 ГГц. Для сравнения, старший восьмиядерный Intel Xeon E5-2689A v4 имеет частоту лишь 3,4 ГГц, притом, что SPARC S7 производится с использованием более грубого 20-нм техпроцесса с 13 слоями металлизации. Чип поддерживает SMT: каждое ядро S7 способно выполнять до 8 виртуальных потоков, до 64 потоков суммарно на процессор. Основная операционная система для этих процессоров, Solaris OS, имеет соответствующие оптимизации для эффективного использования столь развитой многопоточности.

Структурная схема SPARC S7

Структурная схема SPARC S7

У S7 развитая система кешей: каждое ядро имеет по 16 Кбайт кеша L1 данных и инструкций, но что интереснее, подобное разделение имеет и кеш L2: каждые четыре ядра делят по 256 Кбайт кеша инструкций, а каждые два — такой же объём кеша данных. Как уже было сказано, кеш L3 общий, его объём составляет 16 Мбайт. Подсистема доступа к памяти представлена двумя двухканальными контроллерами DDR4, совокупная пропускная способность всей подсистемы может достигать 48 Гбайт/с (6 Гбайт/с на ядро) уже при частоте модулей памяти 1500 МГц, на практике же используются ещё более быстрые модули DDR4-2400, так что в реальных условиях производительность подсистемы памяти у S7 выше. Имеется также встроенный контроллер PCI Express 3.0, он обеспечивает 16 линий этого интерфейса.

Криптографический ускоритель: он у новинки не один

Криптографический ускоритель: он у новинки не один

Любопытной особенностью SPARC S7 является наличие криптографического сопроцессора, причем, он в процессоре не один, а по одному на каждое ядро, то есть, всего 8. Он поддерживает алгоритмы AES/Camellia/CRC32s/DES/MD5/RSA/SHA (всего 15 стандартов) на аппаратном уровне. Для ускорения работы с базами данных в составе процессора есть и другой ускоритель, так называемый «ускоритель аналитических данных» (Data Analytics Accelerator, DAX). Он работает в рамках технологии Software in Silicon, когда критическое приложение, например, база данных, полностью располагается в оперативной памяти. Для обеспечения безопасности и исключения атак типа Heartbleed и других, процессоры M7 и S7 поддерживают полностью аппаратную проверку доступа к памяти, где могут располагаться критические данные. Поддерживаются прямые запросы в память, где расположена БД, а также аппаратная декомпрессия данных на лету, что позволяет экономить оперативную память в рамках парадигмы Software in Silicon.

Блок Data Analytics Accelerator (DAX)

Блок Data Analytics Accelerator (DAX)

Все эти хитрости позволяют восьмиядерному SPARC S7 выглядеть весьма выгодно на фоне своих прямых конкурентов из лагеря x86. Разумеется, не во всех задачах новый процессор Oracle является лидером, но в тесте на производительность при работе с базами данных компания выбрала смешанный сценарий нагрузки, включающий в себя как обработку транзакций, так и аналитические операции, он показал себя великолепно. Сервер Oracle S7-2, оснащённый двумя восьмиядерными процессорами SPARC S7, не просто не проиграл системе HP ProLiant DL360 G9 (два процессора Xeon E5-2699 v4, 44 ядра/88 тредов, 2,2 ГГц), но и наголову разгромил её, показав 1,6-кратное превосходство и обработав 173 493 транзакции в минуту на ядро. У системы на базе x86 этот показатель составил всего 110 342 транзакции на ядро.

Аппаратные механизмы безопасности доступа к памяти

Аппаратные механизмы безопасности доступа к памяти

В другой важной для Oracle сфере, сфере Java-приложений, S7 также чувствует себя отлично: S7-2 опережает HP ProLiant DL360 G9 в 1,7 раза. По подсчётам компании, для обеспечения производительности 2,8 миллиона Java Ops в секунду требуется 28 серверов класса S7-2 (448 ядер, 8 Гбайт на ядро) общей стоимостью 614 тысяч долларов США, в то время, как на базе Intel Xeon такой уровень производительности потребует 32 сервера, подобных вышеописанному HP (32 сервера, 768 ядер, 8 Гбайт на ядро) и совокупная стоимость такой стойки заметно превысит миллион долларов США. Именно поэтому уникальные архитектуры, подобные SPARC, не собираются исчезать с рынка — в своих нишах они обеспечивают непревзойдённую эффективность. Системы на базе x86 универсальны, но в таких случаях они зачастую оказываются заметно менее выгодными.

Постоянный URL: http://servernews.ru/943792
16.05.2016 [04:48], Андрей Крупин

Dell выпустила новую версию решения SharePlex для оперативной репликации данных

Компания Dell объявила о выпуске новой версии инструментария SharePlex для оперативной репликации и интеграции данных практически в реальном времени. Обновлённое решение позволяет осуществлять репликацию баз данных Oracle не только в базы данных Oracle, но и в SAP HANA, Teradata и EnterpriseDB Postgres.

SharePlex помогает организациям запускать новые базы данных в облаке и на собственном оборудовании, выгружать данные для анализа и получать отчёты, осуществлять миграцию и обновление вычислительных сред, обеспечивая при этом высокие коэффициенты доступности критически важных приложений. Новая версия продукта позволяет предприятиям, мигрирующим на SAP HANA, Teradata или EnterpriseDB Postgres, существенно сократить время простоя и запускать неограниченное количество пробных операций без влияния на производственную среду.

«С добавлением поддержки SAP HANA, Teradata и EnterpriseDB Postgres компания Dell делает решение SharePlex удобнее и полезнее, — комментирует Дарин Бартик (Darin Bartik), вице-президент по маркетингу, системам и управления информацией в компании Dell. — Новый продукт позволяет работать со структурированными и неструктурированными данными, закрытым и открытым программным обеспечением, собственным оборудованием и облачными сервисами. Такой независимый подход позволяет Dell находить клиентов в новых областях и предоставлять то, что им требуется в конкретный момент».

Новая версия SharePlex будет доступна к заказу через официальных партнёров Dell с 24 мая текущего года. Дополнительные сведения о продукте представлены на сайте software.dell.com/products/shareplex.

Материалы по теме:

Источник:

Постоянный URL: http://servernews.ru/932973
19.09.2014 [12:10], Алексей Степин

Генеральный директор Oracle подаёт в отставку

Компания Oracle известна как один из крупнейших поставщиков решений для масштабных систем баз данных и даже имеет в своём арсенале собственные процессоры, об одном из которых мы не столь давно сообщали в наших новостях. Услуги и решения Oracle востребованы по всему миру, и, тем не менее, её основатель Ларри Эллисон (Larry Ellison) недавно объявил, что планирует подать в отставку с занимаемого им поста генерального директора компании. Полномочия по управлению Oracle, по его словам, будут переданы финансовому директору Сафре Кац (Safra Catz) и президенту Марку Харду (Mark Hurd). Оба они получат статус соуправляющих генеральных директоров (co-CEO). Хотя Ларри Эллисону и исполнилось недавно 70 лет, совсем отходить от дел он не планирует и сохранит за собой место сопредседателя совета директоров и должность технического директора (CTO).

Компания пытается избежать использования термина «соуправляющий директор», и в официальном разъяснении указывается, что и Хард, и Кац будут являться полноценными CEO, просто на плечи первого лягут все обязанности, связанные с продажами и обслуживанием крупных индустриальных клиентов, а вторая возьмет на себя ответственность за производство, финансовые операции и правовые моменты. Бывший же глава, почувствовавший, похоже, вкус к технике, оставит за собой самую интересную часть: все инженерные разработки как в аппаратной, так и в программной областях работы Oracle. Его можно понять, ведь в 70 лет нести ответственность за огромную компанию, одну из лидеров индустрии, не слишком-то легко.

Одно из новейших достижений Oracle: процессор SPARC M7

Одно из новейших достижений Oracle: процессор SPARC M7

Как выразился Эллисон в своём заявлении, «и Сафра, и Марк теперь будут отчитываться перед советом директоров, а не передо мной лично. Но в целом отношения не изменятся. Все мы трое хорошо поработали вместе за последние годы и собираемся продолжать наше сотрудничество и в будущем. Сохранять единство этой команды всегда было для меня приоритетом». Несмотря на то, что Oracle не планирует ничего экстраординарного, ответом бизнес-среды на это заявление экс-CEO стало падение акций компании более чем на три процента в течение нескольких часов.

Отметим, что Oracle планирует серьёзную кампанию по выкупу собственных акций на сумму 13 миллиардов долларов США.

Постоянный URL: http://servernews.ru/902099
20.01.2014 [15:11], Александр Будик

NEC анонсировала шесть новых серверов Express5800 Series

Компания NEC Corporation анонсировала начало продаж шести серверных систем в рамках известной линейки Express5800, которые оснащены новейшими процессорами Intel Xeon E5-2400 v2 с количеством ядер до десяти и характеризуются на 20% более высокой производительностью по сравнению с моделями предыдущего поколения. В серию вошли модели в стоечном, модульном, башенном форматах, а также в формате blade.

nec.com

nec.com

nec.com

nec.com

Модульный сервер с двумя процессорами E120e-M обеспечивает в 1,7 раза увеличенную производительность ввода-вывода данных для ускорения работы с накопителями. Высокопроизводительный RAID-контроллер позволяет построить на базе новинки сервер баз данных с высокой отзывчивостью или веб-сервер, который может обслуживать большое количество различных терминалов. Опционально доступны также сетевая карта стандарта 10GBASE-T и карта Infiniband.

nec.com

nec.com

Модели серии R120e отличаются сокращением на 12% энергопотребления по сравнению с предшественниками. Это стало возможным благодаря использованию более эффективных блоков питания стандарта 80Plus Titanium. В режиме простоя энергопотребление снижено на 7%.

Новые серверные системы будут доступны уже с 24 января. Компания планирует поставлять их в разные регионы по всему миру.

Постоянный URL: http://servernews.ru/796195
24.09.2013 [17:20], Андрей Крупин

Embarcadero Technologies представила платформу Connect для управления метаданными

Компания Embarcadero Technologies, занимающаяся поставками софтверных решений для разработчиков прикладных программ и систем баз данных, объявила о выпуске новой платформы управления метаданными Connect.

Embarcadero Connect предоставляет единый, с возможностью поиска, репозиторий (каталог) всех имеющихся в организации источников данных, именуемый корпоративной схемой информации (Enterprise Information Map). Эта схема позволяет любому авторизованному пользователю обнаруживать и эффективнее использовать имеющиеся корпоративные данные и информационные ресурсы при помощи отчетов, глоссариев и классификаторов, не нарушая при этом бизнес-правил и принятых в компании политик. Платформа также включает в себя характерные для социальных сетей сервисы, которые позволяют осуществлять коммуникации между пользователями системы, специалистами по анализу данных, администраторами баз данных и разработчиками.

«Connect связывает разрозненные и перекрывающиеся базы данных, метаданные, модели и определения в единую систему, которая дает возможность корпоративной аудитории увидеть в потоке информации бизнес-контекст и оперативно использовать его в своей работе, — прокомментировал выпуск продукта Майкл Суинделл (Michael Swindell), старший вице-президент Embarcadero Technologies по продуктам. — С помощью этой платформы пользователи и технические специалисты могут выполнять свою работу быстрее, проще и эффективнее, обеспечивая успех инициативам компании по корпоративному управлению данными, повышению безопасности данных и стандартизации».

Инструментарий Embarcadero Connect доступен для приобретения как на сайте разработчика, так и через партнеров Embarcadero Technologies. Дополнительные сведения о продукте представлены по адресу embarcadero.com/products/connect.

Материалы по теме:

Источник:

Постоянный URL: http://servernews.ru/763041
17.12.2010 [17:42], Валерий Косихин

"Облачные" вычисления изменят работу администраторов баз данных

Организация Embarcadero, занимающаяся разработкой ПО для администрирования баз данных, выяснила, какое влияние "облачные" вычисления оказывают на инструменты и методы работы, применяемые в этой области. Согласно исследованию под названием Database Trends Survey, 34% специалистов, обслуживающих базы, считают, что переход к "облачной" инфраструктуре изменит принципы работы с ними в большей степени, чем какая-либо другая современная технология. 27% опрошенных делают ставку на виртуализацию.

43% участников исследования признались, что быстродействие и стабильность работы базы данных на сегодняшний день являются для них главным источником головной боли, и были бы рады переложить ответственность за эти показатели на другие плечи. Скотт Уолз (Scott Walz), главный директор по продакт-менеджменту Embarcadero утверждает, что внедрение "облачных" сервисов позволит вынести из зоны ответственности администраторов баз данных такие функции, как установка обновлений ПО и оптимизация использования накопителей. Если база данных находится в "облаке", то ее стабильность является заботой поставщика "облачной" платформы.

Не менее важен и тот факт, что перенос баз данных на "облачные" хостинги даст администраторам возможность более эффективно расходовать рабочее время. Так, 43% участников Database Trends Survey отметили, что сейчас у них постоянно не хватает времени для выполнения заданий, причем 40% винят во всем плохое планирование действий. В то же время многим предприятиям будет нелегко решиться на экспорт баз данных "в облако", т.к. это сопряжено с неизбежным снижением контроля над сервисом.

Источник:

Постоянный URL: http://servernews.ru/593959
10.11.2010 [18:40], Георгий Орлов

Gather: рост объёма баз данных является проблемой для 47% бизнес-компаний

Рост объема баз данных предъявляет новые и весьма серьезные требования к развивающейся аппаратной инфраструктуре центров обработки данных. Такое заключение сделала в своем новом докладе консалтинговая компания Gather, специализирующаяся на исследованиях в IT-области. Проведенное компанией исследование показало, что для 47% коммерческих компаний проблема роста объема баз данных входит в тройку самых серьезных проблем. Производительность систем и возможность их расширения вызывают озабоченность у 37% организаций, в то время как 36% считает, что потенциальные проблемы связаны с перегрузкой сетей и архитектурой коммуникаций. Шесть организаций из десяти опрошенных сообщили о своих намерениях финансировать  в следующем году работы по архивации данных или их выводу из обращения, что поможет справиться с этой проблемой.

 

Gather

 

Другие организации планируют работы по защите данных в ситуациях внутренних, внешних и хакерских рисков, а также исследования в областях предварительной обработки данных, консолидации устройств хранения данных и управления этими устройствами. По словам Эйприл Адамс (April Adams), руководителя исследовательских работ Gather, рост объема баз данных потребует значительных вложений в оборудование, программное обеспечение, соответствующие работы и управление, тогда как решение основных проблем, связанных с собственно аппаратной инфраструктурой центров обработки данных, обойдётся значительно дешевле.

Источник:

Постоянный URL: http://servernews.ru/593758
Система Orphus