Материалы по тегу: sql

02.06.2022 [21:55], Андрей Крупин

ФСТЭК России сертифицировала обновление СУБД Postgres Pro

Компания Postgres Professional сообщила о переоформлении сертификата соответствия Федеральной службы по техническому и экспортному контролю (ФСТЭК России) для обновлённой системы управления базами данных Postgres Pro Certified.

Postgres Pro Certified построена на базе свободной объектно-реляционной СУБД PostgreSQL и предназначена для работы с персональными и конфиденциальными данными. В платформу включены средства защиты от несанкционированного доступа к информации, механизмы контроля целостности исполняемых файлов и другие важные с точки зрения безопасности функции.

Обновлённая Postgres Pro Certified поддерживает две версии ядра СУБД — 11.15.1 и 14.2.1. В релизе устранены ряд серьёзных уязвимостей, позволявших злоумышленникам обходить защитные механизмы программного комплекса. Во избежание проблем с информационной безопасностью рекомендуется не затягивать с развёртыванием выпущенных для системы управления базами данных апдейтов.

Сертифицированная СУБД Postgres Pro может применяться для защиты информации в значимых объектах критической информационной инфраструктуры 1-й категории, в государственных информационных системах 1-го класса защищённости; в автоматизированных системах управления производственными и технологическими процессами 1-го класса защищённости; в информационных системах персональных данных при необходимости обеспечения 1-го уровня защищённости персональных данных; в информационных системах общего пользования 2-го класса.

Постоянный URL: http://servernews.ru/1067196
19.04.2022 [17:48], Сергей Карасёв

ВТБ откажется от иностранных СУБД и перейдёт на PostgreSQL

В рамках общебанковской задачи по переводу ключевых информационных систем на импортонезависимые технологии ВТБ ускоряет переход на альтернативное программное обеспечение. Речь, в частности, идёт о замене баз данных — вместо иностранных продуктов планируется внедрение свободно распространяемой PostgreSQL. Все новые решения уже используют эту СУБД.

Сообщается, что в прошлом году в банке был создан собственный центр компетенций по развитию и поддержке инфраструктурных услуг на базе PostgreSQL. Кластеры PostgreSQL обеспечат отказоустойчивость, необходимый уровень производительности и защищённости. Уже до конца текущего года планируется вывести из эксплуатации около трети СУБД зарубежных поставщиков.

 Изображение: ВТБ

Изображение: ВТБ

Окончательный перевод существующих в банке систем на PostgreSQL запланирован на конец 2024 года. «В дальнейшем разработанные ВТБ информационные системы на базе открытого программного обеспечения планируется зарегистрировать в Едином реестре российского ПО, что обеспечит их доступность для других участников российских технологического и банковского рынков», — говорится в сообщении.

Постоянный URL: http://servernews.ru/1064262
02.02.2022 [00:31], Владимир Мироненко

От создателей MySQL: MariaDB Corporation AB выйдет на Нью-Йоркскую фондовую биржу

Финский стартап MariaDB Corporation AB привлёк $104 млн в рамках финансирования серии D и объявил о намерении выйти на Нью-Йоркскую фондовую биржу через механизм SPAC путём слияния с Angel Pond Holdings. Ожидается, что сделка будет завершена во втором полугодии 2022 финансового года, после чего новая компания будет иметь статус публичной с рыночной стоимостью около $672 млн.

Компания Angel Pond SPAC была основана бывшим партнёром Goldman Sachs доктором Теодором Т. Ваном (Theodore T. Wang) и соучредителем Alibaba Group Шихуаном «Саймоном» Се (Shihuang «Simon» Xie). Комментируя слияние двух компаний, д-р Ван заявил, что MariaDB, обладая проверенной технологией, имеет хорошие возможности для извлечения выгоды из стремительного роста объёмов данных по всему миру и миграции в облака.

Объединённую компанию MariaDB plc возглавит нынешний генеральный директор MariaDB Майкл Ховард (Michael Howard). Глава компании сказал, что её миссия — создать базу данных для всех, обеспечив баланс простоты и производительности. Ховард также заявил, что с MariaDB клиенты экономят до 90 % своих общих затрат на СУБД.

MariaDB является примером того, как можно успешно монетизировать разработку с открытым исходным кодом. Среди существующих инвесторов стартапа Intel Capital, Alibaba Group, Европейский инвестиционный банк, Runa Capital, Tesi, GP Bullhound, OpenOcean, California Technology Ventures, Spintop Ventures, Smartfin, ServiceNow и OnCorps.

Напомним, что MariaDB основана создателем MySQL Микаэлем Видениусом. Компания MySQL AB, сформированная в 1995 году, в 2008-м была продана Sun Microsystems за $1 млрд. А сам Микаэль впоследствии покинул Sun. После появления информации о том, что Sun будет поглощена Oracle, была начата работа над проектом MariaDB (форк MySQL). Изначально за него отвечала компания Monty Program, основанная Видениусом, а после слияния со SkySQL была сформирована MariaDB Corporation AB.

Постоянный URL: http://servernews.ru/1059247
09.07.2021 [19:39], Владимир Мироненко

HPE приобрела стартап Ampool для ускорения SQL в Ezmeral

HPE приобрела стартап Ampool, разработчика облачной высокопроизводительной аналитической SQL-платформы для инженеров по обработке данных и бизнес-аналитиков. Тем самым компания дополнит свою платформу Ezmeral возможностями обработки посредством SQL данных из различных источников.

С ростом объёмов информации и облачных возможностей предприятиям всё чаще требуются услуги анализа данных, а SQL продолжает оставаться основной рабочей нагрузкой для баз данных во многих организациях. В связи с тем, что HPE сотрудничает с заказчиками и независимыми поставщиками ПО для того, чтобы сделать Ezmeral унифицированной платформой для всего спектра рабочих нагрузок с интенсивным использованием данных, возникла потребность в модернизации стека SQL.

 storagenewsletter.com

storagenewsletter.com

Текущие технологии SQL не учитывают новые требования к гибридному облаку и масштабированию. Эту проблему и призвана решить покупка Ampool. Решение Ampool опирается на масштабируемый in-memory слой объединения данных в сочетании с многоуровневым движком для ускорения обработки аналитических запросов любого масштаба. Стартап, основанный в 2015 году выходцами из Yahoo, LinkedIn, VMware, Pivotal и Veritas, будет играть ключевую роль в ускорении выполнения в Ezmeral Analytics интерактивных рабочих нагрузок SQL. Это поможет улучшить качество, повторяемость, скорость работы и время окупаемости для ИИ, аналитики и других задач с интенсивным использованием данных.

Постоянный URL: http://servernews.ru/1043912
27.05.2021 [00:48], Игорь Осколков

Western Digital и Percona ускорят работу MySQL с помощью ZNS-накопителей Ultrastar DC ZN540

Western Digital объявила на своём мероприятии Flash Perspective о партнёрстве с компаний Percona, специализирующейся на доработке и поддержке СУБД с открытым исходным кодом. В рамках партнёрства компании оптимизируют работу MySQL c ZNS-накопителями Ultrastar DC ZN540.

Western Digital уже несколько лет активно продвигает концепцию зонированного хранения, которая подходит как для SMR HDD, так и для SSD. В прошлом году технология Zoned Namespaces (ZNS) стала частью стандарта NVMe 1.4, а её поддержка была добавлена в основную ветку ядра Linux. ZNS-накопители теперь тоже есть, так что дело осталось за малым, то есть за адаптацией системного и прикладного ПО, поскольку при ZNS-накопитель управляется хостом.

Western Digital разработала открытый модуль ZenFS для RocksDB, который позволяет напрямую работать с ZNS-накопителями. Это, в свою очередь, позволяет работать с ними движку MyRocks для MySQL. И Percona Server for MySQL может стать первым заметным коммерческим продуктом, который выиграет от использования SSD c ZNS. Релиз намечен на вторую половину этого года. Percona, как обычно, будет оказывать услуги консалтинга, поддержки, настройки и оптимизации.

Согласно внутренним тестам Western Digital и Percona, при высокой нагрузке на запись использование MyRocks в связке с ZenFS и SSD ZN540 увеличивает скорость транзакций в 3,3 раза по сравнению со стандартным движком InnoDB и SSD Ultrastar DC SN540 и в 1,4 раза — с MyRocks без ZenFS на SN 540. Кроме того, для 95% наиболее быстрых транзакций снижение задержки составило до 6,9 и 1,5 раз соответственно. Для смешанных нагрузок прирост скорости в обоих случаях составил 1,6 раз.

Постоянный URL: http://servernews.ru/1040536
15.04.2021 [00:12], Андрей Галадей

Google представила язык программирования Logica для работы с данными

Компания Google представила новый язык программирования с открытым исходным кодом (лицензия Apache 2.0) под названием Logica. Название новинки образовано от слов Логика (Logic) и Агрегация (Agregation). Она выступает преемником Yedalog (язык, разработанный в Google ранее) и похожа на Datalog.

Новый язык компилируется в SQL и доступен для запуска в Google BigQuery, при этом он поддерживает механизмы абстракции, которых нет в SQL. Как утверждается, Logica упрощает тестирование пользовательских запросов и других задач.

 moodle.fbtuit.uz

moodle.fbtuit.uz

Фактически, Logica расширяет возможности SQL, поскольку многие возможности языка 70-х годов прошлого века уже недостаточны по современным меркам. Если точнее, то в Logica можно импортировать модули и повторно использовать повторяющиеся логические блоки. В последнем случае можно, к примеру, передать функцию в функцию, что невозможно в обычном SQL.

Logica решает эту проблему, позволяя избавиться от печально известных длинных запросов в SQL. Этот и другие языки программирования решают проблемы SQL, используя синтаксис математической логики высказываний, а не естественный английский язык. Это позволяет упростить выражение сложных запросов и в целом улучшить классический синтаксис логического программирования.

Постоянный URL: http://servernews.ru/1037381
13.01.2021 [16:54], Владимир Мироненко

Microsoft SQL Azure вошла в тройку лучших баз данных 2020 года

Microsoft сообщила о том, что база данных SQL Azure Database вошла в число самых популярных баз данных 2020 года по версии DB-Engines, недавно объявившей о присуждении награды «DBMS of the Year» (СУБД года). DB-Engines собирает информацию о системах управления базами данных, составляя на её основе широко признанный рейтинг популярности систем управления базами данных.

При определении победителя в номинации «СУБД года» учитывается рост популярности за год. Так, рейтинг популярности базы данных SQL Azure вырос в минувшем году на 253 %, в результате чего она вошла в тройку лучших СУБД за 2020 год — впервые за девять лет публикации рейтинга DB-Engines в него попало облачное решение.

Azure SQL предоставляет гибкие возможности для миграции и модернизации существующих приложений или создания новых приложений в облаке. Она построена том же ядре SQL Server, доступном локально, что обеспечивает единообразие и унифицированное взаимодействие для всего портфеля клиента. Это позволяет администраторам баз данных и разработчикам использовать свои существующие навыки работы с SQL в облаке для модернизации и внедрения инноваций.

Первое же место в рейтинге DBMS of the Year 2020 снова досталось PostgreSQL, которая уже занимала эту позицию в 2017 и 2018 г.г. Составитель отдельно отмечают, что на базе этой СУБД есть и другие продукты, которые тоже участвуют в рейтинге, если предоставляют какие-то существенные изменения в функциональности. На третьем месте по итогам 2020 года тоже оказался двукратные обладатель звания «СУБД года» — MongoDB получала его в 2013 и 2014 годах.

Обладатели первого места «DBMS of the Year»:

  • 2020 — PostgreSQL
  • 2019 — MySQL
  • 2018 — PostgreSQL
  • 2017 — PostgreSQL
  • 2016 — Microsoft SQL Server
  • 2015 — Oracle
  • 2014 — MongoDB
  • 2013 — MongoDB
Постоянный URL: http://servernews.ru/1029967
16.12.2020 [10:18], Андрей Крупин

СУБД Jatoba получила сертификат ФСТЭК России

Компания «Газинформсервис» сообщила о сертификации Федеральной службой по техническому и экспортному контролю системы управления базами данных Jatoba.

Платформа Jatoba разработана специалистами «Газинформсервиса» на базе свободной объектно-реляционной системы управления базами данных PostgreSQL и предназначена для высоконагруженных IT-инфраструктур крупных предприятий. Особенностями отечественной СУБД являются расширенные функциональные возможности, увеличенная синтаксическая совместимость с процедурным языком PL/SQL, а также встроенные средства предотвращения анализа и изменения исходных кодов процедур и функций.

 Архитектура и схема работы СУБД Jatoba

Архитектура и схема работы СУБД Jatoba

Выданный ведомством сертификат допускает использование СУБД Jatoba в значимых объектах критической информационной инфраструктуры 2 категории, государственных информационных системах 2 класса защищённости, автоматизированных системах управления производственными и технологическими процессами 2 класса защищённости и в информационных системах персональных данных при необходимости обеспечения 2 уровня защищённости персональных данных.

Подробные сведения о платформе Jatoba представлены на сайте gaz-is.ru.

Постоянный URL: http://servernews.ru/1027959
06.08.2020 [13:54], Юрий Поздеев

ScaleFlux SSD с набортной ПЛИС в три раза ускоряет работу Percona MySQL

СУБД MySQL в реализации от Percona работает быстрее с SSD ScaleFlux и есть замеры, подтверждающие это. В сравнительных тестах ScaleFlux CSD 2000 оказался почти в 3 раза быстрее, чем Intel DC P4610 (на определенных рабочих нагрузках, разумеется).

Основная идея ScaleFlux проста — отдельные аппаратные блоки в накопителях могут выполнять некоторые операции быстрее, чем сам сервер, где эти накопители находятся: сжатие/распаковка, перекодирование видео и тому подобное. В частности, ScaleFlux CSD 2000 поддерживает аппаратное сжатие GZIP, которое эффективно удваивает емкость и обеспечивает на 40-70 процентов больше операций ввода-вывода в секунду, чем аналогичные твердотельные NVMe-накопители при смешанных рабочих нагрузках чтения-записи OLTP.

В своих совместных тестах Percona и ScaleFlux сравнили CSD 2000 с твердотельным накопителем Intel DC P4610 емкостью 3,2 Тбайт (64-слойная TLC 3D NAND + NVMe PCIe 3.1 x4). Модель CSD 2000 во многом похожа на него: интерфейс NVMe PCIe 3.0, ёмкость 4 Тбайт, чипы памяти TLC 3D NAND. Однако у неё есть FPGA, выполняющий функции обработки данных (сжатие и кодирование) и функции ускорения для баз данных.

База данных Percona имеет буфер «DoubleWrite» для защиты от потери и повреждения данных, в котором набор страниц извлекается из буфера и хранится до тех пор, пока данные не будут окончательно записаны в базу данных. Твердотельный накопитель CSD 2000 имеет функцию «атомарной записи», которая делает двойной буфер избыточным и его можно отключить, что значительно ускоряет запись в базу данных. Intel P4610 не имеет функции атомарной записи.

Ниже представлены результаты тестов двух накопителей в Sysbench, причем CSD 2000 был протестирован как с функцией двойного буфера, так и без нее, а для накопителя Intel отдельно сделан тест со сжатием данных силами самого сервера:

По диаграммам видно, что по мере увеличения потоков от 8 до 256 преимущество ScaleFlux растет, при этом атомарная запись становится значительным фактором при 64 потоках и выше (темно-синий столбец). Отключение Percona DoubleWrite позволило CSD 2000 повысить производительность при 64 потоках с 2000 запросов в секунду до более чем 2700. При количестве потоков от 64 до 128 накопитель ScaleFlux почти в три раза быстрее, чем Intel.

Идея переноса вычислений «ближе к данным» существует уже не первый год, обычно для этого в СХД используются специализированные ускорители (ASIC), расположенные в контроллерах, однако в последние годы наметилась тенденция переноса некоторых рабочих нагрузок непосредственно в устройства хранения (накопители), что дает значительный прирост производительности, разгружая контроллер СХД и центральный процессор.

Постоянный URL: http://servernews.ru/1017543
17.07.2020 [01:49], Юрий Поздеев

Tintri: система хранения данных для SQL

Tintri выпустила обновление для своей платформы хранения данных с поддержкой виртуальных машин, которое обеспечивает тот же уровень детализации управления для баз данных SQL. Преимущества включают в себя упрощение клонирования баз данных и возможность для администраторов напрямую выделять больше ресурсов при необходимости.

Интегрированное с SQL хранилище данных базируется на технологии Tintri, разработанной для виртуальных машин, благодаря которой массивы VMstore стали популярным выбором для сред VMware. Новая версия ПО интегрирует хранилище непосредственно с SQL сервером, а также упрощает и автоматизирует задачи управления хранилищем для баз данных SQL и, следовательно, администраторов баз данных (DBA).

Tintri отмечает, что одна виртуальная машина может содержать несколько баз данных с разными запросами по ресурсам и это может усложнить управление каждой из них. Например, если вы хотите клонировать базу данных, вы должны клонировать всю ВМ, операционную систему и все остальное. Tintri позволяет «заглянуть внутрь» виртуальных машин и напрямую интегрироваться с базами данных для предоставления хранилища с необходимыми параметрами.

Как и в случае с VMstore, обновленное ПО представляет емкость хранилища как единый том для баз данных, избавляя от необходимости делить его на LUN и RAID-группы. Это позволяет администраторам получить более полное представление о том, что происходит с хранилищем на уровне каждой отдельной базы данных.

Tintri позволяет просматривать все объекты, используемые SQL сервером, вплоть до уровня отдельных файлов, причем нет необходимости развертывать какие-либо агенты внутри виртуальных машин, вместо этого используются расширенные события SQL для мониторинга и сбора разнообразной системной информации от SQL. Такой подход позволяет видеть всю инфраструктуру базы данных, управлять моментальными снимками и репликацией данных, причем моментальные снимки не оказывают влияния на производительность, так как выполняются без остановки ввода-вывода.

Tintri утверждает, что они единственный поставщик, способный предоставить гарантии QoS для каждой отдельной базы данных SQL сервера, при этом ресурсы распределяются автоматически по мере необходимости при изменении требований для каждой базы данных. Интегрированное с SQL хранилище является обновлением ПО Tintri для массивов VMstore и не требует дополнительных лицензий.

Постоянный URL: http://servernews.ru/1015868
Система Orphus