Компания Oracle анонсировала новую версию СУБД-платформы Exadata. Ещё в предыдущем поколении, Exadata X10M, Oracle приняла решение отказаться от использования процессоров Intel Xeon. В Exadata X11M упор сделан на гибкость развёртывания: on-premise; в виде локального сервиса, управляемого Oracle; в сторонних облаках, в том числе в составе мультиоблачных конфигураций.

Но и прирост производительности тоже заявлен солидный: новое поколение должно продемонстрировать на 55% возросшую скорость векторного поиска, который важен для обучения ИИ-моделей. Скорость сканирования данных выросла в 2,2 раза, а скорость обработки транзакций — на четверть. А на некоторых операциях прирост быстродействия достигает 32 раз. При этом новая платформа стоит столько же, сколько и предыдущая, говорит Oracle.

Источник здесь и далее: Oracle

Прирост производительности во многом обусловлен программными оптимизациями, но и аппаратную составляющую компания тоже подтянула. Основой Oracle Exadata X11M являются AMD EPYC, DDR5-6400, NVMe SSD и двухпортовые 100G-адаптеры. Каждый ДБ-сервер X11M содержит два 96-ядерных процессора AMD EPYC и 512 Гбайт RAM с возможностью расширения до 3 Тбайт. Впрочем, есть и конфигурация попроще — X11M-Z имеет один 32-ядерный EPYC и 768 Гбайт или 1,152 Тбайт памяти. В Exadata активно используется механизм RDMA, в том числе кеширующий слой Exadata RDMA Memory (XRMEM), на который уходит большая часть RAM.

Серверы хранения данных представлены в трёх вариантах: с одним (HC-Z) либо двумя 32-ядерными процессорами (EF и HC) и памятью объёмом 768 Гбайт либо 1,5 Тбайт соответственно. Узлы хранения HC (High Capacity) включают четыре кеширующих 6,8-Тбайт NVMe-накопителя Flash Accelerator F680 v2 (PCIe 5.0) и двенадцать 22-Тбайт SAS HDD (7200 RPM). В узлах EF (Extreme Flash) вместо HDD используются четыре 30,72-Тбайт NVMe SSD. А узлы HC-Z от HC отличаются тем, что имеют лишь пару 6,8-Тбайт кеширующих NVMe SSD и шесть 22-Тбайт HDD.

Минимальная конфигурация Exadata X11M состоит из двух серверов БД и трёх серверов хранения. Она обеспечивает скорость сканирования 135 Гбайт/с и предоставляет 1,9 Пбайт для хранения данных. Последнее достигнуто благодаря использованию гибридного сжатия Oracle Database Hybrid Columnar Compression.

В максимальной конфигурации каждая стойка X11M может содержать до 2880 процессорных ядер, 42 Тбайт RAM, 462 Тбайт высокопроизводительной флеш-памяти и 2,2 Пбайт (SSD) или 4,4 Пбайт (HDD) общего дискового пространства. Сетевая часть представлена RoCE-фабрикой на базе двухпортовых адаптеров, работающих в режиме Active–Active. Всего в стойку можно установить от 3 до 15 серверов БД и от 3 до 17 серверов хранения данных.

Конфигурация может быть расширена дополнительными стойками, подключаемыми посредством RoCE-интерконнекта, причём поддерживаются смешанные варианты, в которых совместно трудятся стойки Exadata X8M, X9M, X10M и X11M. Простоту масштабирования обеспечивают технологии Oracle Real Application Clusters (RAC) и Exadata Exascale and Automatic Storage Management (ASM).

На сегодня Exadata X11M является наиболее продвинутой БД-платформой, сочетающей в себе высочайшую производительность работы с базами данных Oracle, гибкость конфигурации и широкие возможности выбора варианта развёртывания, будь то использование платформы в рамках AWS, Microsoft Azure и Google Cloud или размещение в ЦОД заказчика, говорит Oracle.

В настоящее время деятельность крупных компаний связана с использованием больших объёмов данных, для структурирования и управления которыми требуются эффективные и надёжные в работе СУБД. А для их администрирования и мониторинга используются специальные инструменты, такие как Платформа Tantor российской компании «Тантор Лабс» (входит в «Группу Астра»).

В связи с уходом с локального рынка зарубежных вендоров растёт популярность отечественного ПО, обеспечивающего цифровизацию инфраструктуры на основе импортонезависимых технологий. Платформа Tantor, позволяющая вести администрирование и мониторинг корпоративных баз данных, поможет компаниям в решении задач миграции благодаря совместимости с СУБД на базе PostgreSQL различных вендоров.

PostgreSQL является одной из самых популярных в мире СУБД с открытым исходным кодом. Не так давно вышла 17-я версия PostgreSQL, получившая по сравнению с предыдущей множество улучшений и нововведений. В её подготовке приняли участие и специалисты «Тантор Лабс», показавшей самую высокую активность среди российских компаний в ходе международных мероприятий, касающихся работы над Postgres 17.

Источник изображений: «Тантор Лабс»

Платформа Tantor обладает полным набором функций для работы с СУБД в простом графическом интерфейсе с предоставлением информации в максимально удобном виде. Решение отличается простотой эксплуатации, а также высокой производительностью, надёжностью и отказоустойчивостью.

Снижение рисков простоя и потери данных достигается за счёт мониторинга ключевых метрик и конфигурируемой системы предупреждения о неисправностях, которая сможет доставить ответственному специалисту подробную информацию о неполадках быстро и надёжно. Также Платформа обладает инструментарием для регламентного обслуживания, который позволяет своевременно или по расписанию обслужить СУБД и оптимизировать её работу.

Соблюдение требований безопасности обеспечивается благодаря поддержке защищённого подключения к СУБД, расширенному контролю за пользовательскими учётными записями, в том числе синхронизацией с репозиториями, а также другими механизмами защиты, такими как анонимайзер чувствительных данных.

Платформа Tantor упрощает ведение разработки за счёт использования визуального профайлера SQL-запросов для оперативного выявления проблемных мест, сбора статистики планов выполнения запросов для оптимизации приложений, работающих с БД, и ещё целого ряда инструментов, которые помогут разработчику выявить проблему своевременно.

С выходом в октябре обновления Tantor 5.0 Платформа получила новые инструменты для разработчиков и администраторов баз данных, а также улучшение функциональности. В частности, встроенная база данных была обновлена до версии Tantor Special Edition 16, что повысило безопасность и скорость работы Платформы. Были добавлены инструменты «Браузер БД» для работы со схемой данных БД непосредственно из интерфейса и уже упомянутый «Анонимайзер» для обезличивания и маскирования данных, модуль управления параметрами с поддержкой сохранения конфигурации СУБД для дальнейшего использования на других экземплярах СУБД.

Кроме того, в интерфейсе Платформы появилась тёмная тема оформления, были добавлены новые API-методы Datasets и фильтрация экземпляров, а также новый вид таблиц с возможностью настройки с учётом своих предпочтений для более комфортной работы.

«Платформа Tantor 5.0 предлагает расширенные аналитические возможности и гибкость в настройке, что делает её незаменимым инструментом для разработчиков и администраторов, стремящихся идти в ногу со временем в области работы с данными», — отметил Вадим Яценко, глава «Тантор Лабс», добавив, что существенные нововведения будут способствовать росту эффективности работы пользователей.

«Яндекс» объявил о выходе нового компонента YDB DWH для поддержки аналитической обработки данных в СУБД YDB собственной разработки. СУБД YDB поддерживает работу со сложными аналитическими запросами (OLAP) — благодаря массивно-параллельной архитектуре (МРР) обеспечивает хранение сотен Тбайт данных и быстрое выполнение запросов, а также горизонтально масштабируется за счёт автоматического партиционирования по объёму и нагрузке.

Как сообщается, аналитическая функциональность компонента YDB DWH включает колоночные таблицы с консистентным хранением данных и управление смешанной нагрузкой. Платформа СУБД Яндекса также включает движок выполнения запросов со спиллингом данных на диск, стоимостной оптимизатор и поддержку федеративных SQL-запросов к внешним источникам данных: S3, PostgreSQL, Greenplum, Oracle, MS SQL. Это позволяет создавать корпоративного хранилища данных. В перспективе — поддержка SQL-диалекта PostgreSQL для бесшовной интеграции как для OLAP-, так и OLTP-сценариев.

Источник изображения: Yandex Cloud

Благодаря запуску YDB DWH, СУБД YDB стала универсальным решением для высокопроизводительной обработки транзакций и аналитических запросов, говорит компания. Подчёркивается, что рынку не хватает универсальных СУБД, способных работать в бизнес-критичных сценариях. Данное решение особенно актуально для финансового, телекоммуникационного и ретейла. По оценке «Яндекса», рынок систем по обработке данных в России в 2025 году составит 55 млрд руб. При этом доля аналитических СУБД будет составлять 32 % общего рынка обработки данных.

Помимо YDB DWH, в линейку лицензируемых надстроек СУБД YDB также входит шина данных YDB Topics и надстройка для задач машинного обучения YDB Search. Основной компонент платформы — компонент YDB Enterprise для высокопроизводительной обработки транзакций. Платформа предлагается по коммерческой лицензии для установки в контуре заказчика и как управляемый сервис в Yandex Cloud.

Компания «Тантор Лабс», входящая в «Группу Астра», анонсировала программно-аппаратный комплекс (ПАК) Tantor XData 2.0 для поддержания работы СУБД Tantor. По сравнению с платформой предыдущего поколения новинка, как утверждается, демонстрирует более высокую производительность, а также обладает улучшенным интерфейсом.

Оригинальная версия Tantor XData дебютировала в феврале нынешнего года: в разработке решения приняли участие специалисты группы компаний «Аквариус». Говорилось о применении серверов на процессорах Intel Xeon Cascade Lake-SP, AMD EPYC, Baikal-S или Kunpeng 920, а также ОС Astra Linux Special Edition. А в апреле 2024-го «Группа Астра» создала компанию «Иксдата» по выпуску ПАК для высоконагруженных СУБД.

Говорится, что в Tantor XData 2.0 применяется аппаратно-программное RAID-решение собственной разработки, которое обеспечивает трёхкратное сжатие данных и увеличивает производительность подсистемы хранения до 102 тыс. TPS (транзакций в секунду) в тестах pgbench (операции чтения/записи). Это на 25 % больше по сравнению с ПАК предыдущей версии.

Источник изображения: «Тантор Лабс»

В состав комплекса включено S3-совместимое хранилище, позволяющее гибко масштабировать ресурсы. При этом обеспечивается высокая доступность данных благодаря возможности дублирования и распределения между разными узлами. Реализована новая встроенная система резервного копирования на основе WAL-G: благодаря использованию объектного хранилища S3 упрощается восстановление информации из резервных копий. Кроме того, возможна миграция резервных копий баз данных между различными площадками или регионами.

Применяется СУБД Tantor 16.6. Усовершенствованный графический интерфейс с модулем управления и мониторинга аппаратных ресурсов DCImanager позволяет централизованно взаимодействовать как с программной, так и с аппаратной частью ПАК в режиме «одного окна»: это повышает удобство и прозрачность административных операций. В Tantor XData 2.0 улучшены возможности работы с кластерами баз данных: остановка и запуск для планового обслуживания, ведение реестра задействованных ресурсов, автоматизированное выделение сетевых и дисковых ресурсов при формировании кластера, усиленный механизм работы с секретами для повышения уровня безопасности.

Интерфейс для проведения полного цикла инсталляции/обновления и конфигурирования ПАК XData 2.0 обеспечивает автоматизацию ключевых этапов: монтажа, коммутации и первичной настройки аппаратного комплекса, установки и конфигурации операционной системы на управляющие и вычислительные серверы, на серверы хранения данных, установку, настройку, диагностику и обновление компонентов ПАК, предварительную проверку перед вводом в промышленную эксплуатацию.

Компания «Ред софт» сообщила о выпуске новой версии системы управления базами данных «Ред база данных 5.0», построенной на базе кроссплатформенной реляционной СУБД Firebird и зарегистрированной в реестре российского ПО.

Система управления базами данных «Ред база данных» соответствует принятым в IT-отрасли стандартам и может быть задействована в проектах различного масштаба: от встроенных аппаратных комплексов и решений для небольших организаций до IT-систем крупных корпораций с размерами баз данных до десятков терабайт и десятками миллионов транзакций в день. В состав дистрибутива СУБД входят серверный модуль (с исполняемыми и исходными кодами), дополнительные компоненты, средства инсталляции, настройки и администрирования программной платформы.

Источник изображения: rdb.red-soft.ru

Среди ключевых нововведений СУБД «Ред база данных 5.0»: табличные пространства, поддержка формата JSON, профайлер SQL- и PSQL-кода, возможность параллельного выполнения операций резервного копирования, восстановления и сборки мусора, поддержка частичных индексов, улучшенный оптимизатор запросов, кеш компилированных запросов, улучшенный алгоритм сжатия записей, новые функции и пакеты для работы с BLOB, поддержка синхронно-асинхронного режима репликации.

В дополнение к вышеперечисленному разработчики реализовали в продукте планировщик заданий, в также дополнительные возможности для организации безопасной работы с данными и администрирования программного комплекса. «Ред база данных 5.0» соответствует новым требованиям по безопасности информации к системам управления базами данных, утверждённым приказом ФСТЭК России №64 от 14 апреля 2023 года, по 4 классу защиты и 4 уровню доверия. Сертификат соответствия действителен до 8 октября 2028 года.

Российский производитель серверного оборудования OpenYard сообщил о создании программно-аппаратного комплекса (ПАК) на основе СУБД YDB, предназначенного для бизнес-критичных систем. Новое решение найдёт применение в высоконагруженных корпоративных инфраструктурах с повышенными требованиями к надёжности и отказоустойчивости, например, в крупных банках, промышленных, телекоммуникационных компаниях, говорит OpenYard.

ПАК OpenYard построен на 19″ серверах корпоративной серии, которые выпускаются в собственном производственном комплексе полного цикла, находящемся в Рязанской области. Программная часть ПАК представляет собой открытое, масштабируемое и высокодоступное решение на основе СУБД YDB от Яндекса. YDB подходит для всех профилей нагрузок и видов обработки данных: миграции с неактуальных транзакционных решений и построения корпоративных хранилищ данных, консолидации баз данных, разработки высоконагруженных сервисов.

Источник изображения: OpenYard

Также YDB поддерживает автоматическое горизонтальное масштабирование. Уровень доступности кластеров YDB составляет 99,99 %. Благодаря производительности свыше 3 млн TPS с помощью YDB можно создавать высоконагруженные системы федерального масштаба для большого количества пользователей или с большим потоком транзакций.

OpenYard отметила, что ПАК полностью соответствует законодательным и регуляторным требованиям, будет выпускаться серийно и подойдёт для широкого круга заказчиков. ПАК обеспечивает централизованное управление и поддержку софта и оборудования в режиме одного окна. Сейчас компания занимается процедурой внесения ПАК OpenYard на основе платформы YDB в Реестр российской промышленной продукции Минпромторга. Предзаказ на ПАК можно будет оформить позже в этом году.

Российская компания Selectel, являющаяся специализированным поставщиком IT-решений на базе собственной сети дата-центров, и отечественный разработчик систем управления и обработки данных Arenadata объявили о технологическом партнёрстве.

В рамках сотрудничества компании намерены предложить рынку новое решение в сфере управления большими данными — аналитическую распределённую СУБД Arenadata DB уровня Enterprise на выделенных серверах Selectel, доступных к быстрому заказу и масштабированию при росте нагрузки. Готовые конфигурации выделенных серверов Selectel позволяют быстро развернуть решение, интегрировать его с действующими IТ-системами заказчика и запустить проект в минимальные сроки без необходимости закупать собственное серверное оборудование.

Источник изображения: macrovector / freepik.com

Arenadata DB построена на базе проекта с открытым исходным кодом Greenplum и может применяться в критически важных системах, работающих с большими объёмами данных — от десятков до сотен терабайт данных. Платформа поддерживает обработку аналитических запросов любой сложности и может быть особенно актуальна для банков и финтеха, ретейла, телекоммуникационных организаций, производственных и добывающих предприятий, государственного сектора.

СУБД Arenadata DB имеет свидетельство о государственной регистрации программы для ЭВМ, включена в реестр российского ПО и зарегистрирована в государственном реестре системы сертификации средств защиты информации по требованиям безопасности информации ФСТЭК России по 4 уровню доверия. Платформа поддерживает отечественные операционные системы Alt Linux и Astra Linux, а также Ubuntu, CentOS и Red Hat.

Российская компания «Тантор Лабс» (входит в группу «Астра», занимается разработкой СУБД Tantor, а также развитием одноимённого инструмента для управления и мониторинга БД, основанных на PostgreSQL) сообщила о масштабных доработках расширения PipelineDB — высокопроизводительного инструмента для агрегации временных рядов, совместимого с PostgreSQL

PipelineDB предназначен для выполнения SQL-запросов, которые уменьшают количество элементов в потоковых наборах данных. Решение позволяет в реальном времени обрабатывать, агрегировать, обобщать и фильтровать потоковые данные, объединять их с историческими данными для сравнения и анализа, а также выполнять вычисления в скользящих временных окнах. Расширение поддерживает вероятностные структуры данных и возможность слияния непрерывно наполняемых таблиц.

Источник изображения: macrovector / freepik.com

Исторически решение разрабатывалось как Open Source-проект PipelineDB Core — форк PostgreSQL. В 2018 году проект трансформировался в расширение PostgreSQL, что существенно упростило его использование. Однако в 2019 году он был закрыт. Последней версией PostgreSQL, с которой работал PipelineDB, была 11-я. Специалисты «Тантор Лабс» портировали PipelineDB на новые версии PostgreSQL (13, 15 и 16-ю), добавили поддержку СУБД Tantor, реализовали новые функции и исправили множество ошибок.

Обновлённый PipelineDB поставляется в двух вариантах: как бесплатное Open Source-расширение (доступно в репозитории Tantor) и как отдельный самостоятельный продукт с функциональными доработками.

Спустя менее двух лет с момента выхода на биржу компания MariaDB сообщила о переходе в категорию частных в связи с поглощением инвестиционной фирмой K1 Investment Management за нераскрытую сумму. В феврале этого года K1 Investment Management направила ей не имеющее обязательной силы предложение о покупке из расчёта $0,55 за акцию, что составляет $37 млн. Вполне возможно, что сумма сделки близка к этому предложению.

Основанная в 2009 году MariaDB предлагает одноимённую open source СУБД, а также СУБД-как-услугу (DBaaS) SkySQL. Продукты компании разработаны для обеспечения высокой доступности, масштабируемости и производительности, что делает их популярной альтернативой проприетарным базам данных, например, предлагаемым Oracle, которой в составе Sun была продана и предшественница MariaDB — MySQL.

Источник изображения: MariaDB

Предложения компании включают MariaDB Enterprise Server, полностью управляемую платформу базы данных как услуги, которая поддерживает как транзакционные, так и аналитические рабочие нагрузки. Решение позволяют компаниям использовать возможности баз данных с открытым исходным кодом в облачных средах с минимальными затратами на управление.

Сервисами MariaDB пользуются компании из разных отраслей, включая финансы, телекоммуникации и электронную коммерцию, для обработки критически важных приложений. На момент сделки у MariaDB было около 700 активных клиентов, среди которых Deutsche Bank AG, Nokia Corp., Red Hat Inc., Samsung Electronics Co. Ltd., ServiceNow Inc. и Министерство обороны США.

Также было объявлено о назначении гендиректором MariaDB Рохита де Соузы (Rohit de Souza), до этого возглавлявшего компании Actian Corp. и Micro Focus International plc. Прежний гендиректор Пол О'Брайен (Paul O'Brien) останется в компании в качестве консультанта.

«Сбер» объявил, что к концу 2024 года полностью завершит в рамках импортозамещения перевод своих автоматизированных систем в значимых объектах критической информационной инфраструктуры (КИИ) с иностранных СУБД на собственное решение Platform V Pangolin — реляционную СУБД корпоративного класса на базе PostgreSQL. С 2020 года Platform V Pangolin является целевой СУБД в «Сбере».

Реляционная СУБД Platform V Pangolin входит в состав цифровой облачной платформы «СберТеха» Platform V «СберТеха». Platform V Pangolin основана на доработанной СУБД с открытым кодом PostgreSQL. Доработки повышают безопасность хранимых данных, доступность, надёжность и производительность системы. Также улучшено масштабирование.

Источник изображения: «Сбер»

По словам старшего вице-президента и руководителя блока «Технологии» Сбербанка, продукты собственной платформы нисколько не уступают по функциональности решениям западных вендоров, и более того, по ряду параметров превосходят их, и уже успешно заместили в «Сбере» многие из них. В частности, СУБД Platform V Pangolin полностью соответствует повышенным требованиям «Сбера» к производительности и безопасности: «Решение гарантирует надёжное хранение и быструю обработку больших объёмов данных в высоконагруженных системах компании».

Platform V Pangolin входит в реестр российского ПО и полностью подходит для задач импортозамещения. Решение используют в крупных российских компаниях и с 2021 года оно доступно для внешнего рынка. В настоящее время больше 80 тыс. инсталляций Platform V Pangolin успешно используется в составе сервисов и приложений разного уровня масштаба и критичности.