Спустя год разработки вышла новая стабильная версия реляционной СУБД PostgreSQL под номером 15. PostgreSQL 15 обеспечивает ряд улучшений производительности, добавляет команду «MERGE», включает поддержку сжатия Zstd и LZ4 и ряд других новшеств.

( читать дальше... )

>>> Подробности

Спустя год разработки вышла новая стабильная версия реляционной СУБД PostgreSQL под номером 14.

( читать дальше... )

>>> Подробности

30 сентября в Нижнем Новгороде пройдёт PGConf.NN - бесплатная техническая конференция по СУБД PostgreSQL. Организаторы — компания Postgres Professional и ассоциация IT-компаний iCluster. Начало докладов — в 14:30. Место проведения — технопарк «Анкудиновка» (ул. Академика Сахарова, д. 4).

Доклады:

• «JSON or not JSON» — Олег Бартунов, генеральный директор Postgres Professional;

• «Обзор возможностей резервного копирования в PostgreSQL и Postgres Pro» — Иван Фролков, ведущий инженер Postgres Professional;

• «SQL vs NoSQL» — Дмитрий Адмакин, руководитель отдела разработки БАРС Груп.

Регистрация на мероприятие открыта на сайте PGConf: https://pgconf.ru/202109

>>> Подробности

Состоялся выпуск свободной встраиваемой СУБД SQLite версии 3.36.0.

Основные изменения:

• Вывод команды EXPLAIN QUERY PLAN стал более понятным.
• BOM в начале токена теперь трактуется как пробел (пропускается).
• Доступа к rowid (идентификатору строки) в представлении (VIEW) или подзапросе теперь приводит к ошибке. Раньше такой идентификатор строки был неопределённым и часто имел значение NULL. Использование опции компиляции -DSQLITE_ALLOW_ROWID_IN_VIEW возвращает прежнее поведение.
• Интерфейсы sqlite3_deserialize() и sqlite3_serialize() теперь включены по умолчанию. Опция компиляции -DSQLITE_ENABLE_DESERIALIZE утратила свою актуальность и была заменена опцией компиляции -DSQLITE_OMIT_DESERIALIZE, отключающей вышеупомянутые интерфейсы.
• Виртуальная ФС «memdb» теперь поддерживает совместное использование базы данных, хранящейся в памяти, несколькими соединениями в одном процессе, если имя базы данных начинается с «/».
• Прекращено использование оптимизации EXISTS-to-IN в связи с тем, что она чаще замедляла запросы чем делала их быстрее.
• Оптимизация constant-propagation теперь работать с запросами без объединения (non-join queries).
• Расширение REGEXP теперь включено в CLI-сборки.

Код СУБД SQLite распространяется на условиях общественного достояния.

>>> Подробности

Очень часто в процессе разработки и тестирования бывает необходимо использовать в программе данные, максимально приближенные к реальным, уже имеющимся в продукте. Однако, чтобы избежать риска утечки реальных данных с продакшен-серверов, данные должны быть обработаны, из них должна быть удалена личная информация, такая как: имена и адреса пользователей, адреса электронной почты, номера телефонов, данные платёжных карт и пр.

Для этого предлагается использовать Datanymizer — он анонимизирует данные на стороне сервера и передаст в тестовую среду уже чистый SQL-дамп, в котором персональные данные удалены или заменены несуществующими данными, похожими по формату на реальные.

Datanymizer написан на Rust и поддерживает глобальные переменные, ограничения уникальности и встроенные правила.

Подробное описание установки и использования читайте в статье.

>>> Подробности

Состоялся релиз компактной встраиваемой реляционной СУБД — SQLite 3.25.0.

( читать дальше... )

>>> Подробности

Состоялся релиз компактной встраиваемой реляционной СУБД — SQLite 3.24.0.

Основные изменения:

• Добавлена поддержка команды UPSERT в стиле PostgreSQL.
• Добавлена поддержка вспомогательных столбцов в таблицах r-tree.
• В C API добавлены функции для обнаружения ключевых слов SQL, используемых в SQLite (sqlite3_keyword_count(), sqlite3_keyword_name() и sqlite3_keyword_check()).
• Добавлено C API для динамических строк, базирующееся на объекте sqlite3 str.
• ALTER TABLE теперь распознает «true» и «false» как допустимые аргументы для DEFAULT.
• Добавлена оптимизация сортировки ссылок (включается опцией «SQLITE_ENABLE_SORTER_REFERENCES» во время компиляции).
• Улучшен формат raw-вывода EXPLAIN QUERY PLAN.
• Добавлена настройка SQLITE_DBCONFIG_RESET_DATABASE в API sqlite3_db_config().
• Улучшения CLI:
  • программа sqlite3 теперь автоматически перехватывает raw-вывод EXPLAIN QUERY PLAN и переформатирует его в графы ASCII-art;
  • строки, начинающиеся с «#», теперь воспринимаются как комментарии, а не как SQL-запросы;
  • добавлена опция "--append" в команду .backup;
  • добавлена команда .dbconfig.
• Улучшена производительность и исправлено множество ошибок.

>>> Подробности

fselect — это консольная утилита для поиска файлов с помощью выражений, напоминающих SQL. В некоторых случаях может заменить традиционный find.

Преимущества:

• возможность создания сложных запросов с помощью скобок и операторов SQL;
• поиск по ширине/высоте изображений;
• поиск внутри zip-архивов;
• форматирование вывода в CSV, JSON и null-terminated строки.

Пример:

$ fselect "fsize, modified, path from /home/pupseng depth 3 where size >= 1mb and ( name like '%.jpg' or name like '%.png' )"

1.82 MiB	2018-01-16 13:31:59	/home/pupseng/Pictures/Screenshot from 2018-01-16 13:31:46.png	
1.29 MiB	2017-09-05 13:00:02	/home/pupseng/Downloads/Telegram Desktop/image_2017-09-05_12-59-55.png	
2.74 MiB	2017-05-31 12:23:31	/home/pupseng/Downloads/Telegram Desktop/IMG_9514.jpg	
2.25 MiB	2017-07-28 15:57:44	/home/pupseng/Downloads/Telegram Desktop/image_2017-07-28_15-57-35.png	
3.56 MiB	2016-07-04 16:43:13	/home/pupseng/Downloads/fugue.png	
7.15 MiB	2016-10-24 12:25:32	/home/pupseng/Natasha/DCIM6807.jpg	

Утилита написана на языке программирования Rust и в настоящий момент устанавливается с помощью cargo. Крайне приветствуется помощь в организации сборки пакетов для различных дистрибутивов Linux, а также Mac OS.

>>> Подробности на Github

Состоялся релиз компактной встраиваемой реляционной СУБД — SQLite 3.15.

( читать дальше... )

SQLite распространяется как общественное достояние.

>>> Подробности

Скотт Гатри, вице-президент Microsoft по облачным технологиям и решениям для предприятий, анонсировал в корпоративном блоге выпуск Microsoft SQL Server 2016. Новая версия станет доступна в середине этого года и будет работать в том числе на Linux. Бета-версия доступна уже сейчас, полноценный релиз для Linux ожидается в середине 2017 года. Речь идет как об облачной, так и о локальной версии ПО.

«Мы рады работать с Microsoft, когда они приносят SQL Server на Linux,» сказал Марк Шаттлворт, основатель Canonical. «Заказчики уже используют сервисы Azure Data Lake на Ubuntu, а теперь разработчики будут иметь возможность строить новые приложения со всеми возможностями промышленного SQL Server'а.»

Пол Кормье, президент по продуктам и технологиям Red Hat, сказал: «SQL Server доказал свою эффективность и является ценным активом для корпоративных клиентов Linux по всему миру. ... Мы считаем, что наши заказчики положительно воспримут эту новость и будут рады видеть рост будущих инвестиций Microsoft в Linux. Мы строим наше партнерство на технологиях гибридных облаков, охватывая не только Linux, но и middleware, PaaS. Мы рады расширению партнерства за счет SQL Server на Red Hat Enterprise Linux. Благодаря этому корпоративные клиенты получат более широкий выбор возможных баз данных.»

>>> Подробности

Сегодня Google представил релиз библиотеки с SQL-подобным синтаксисом, написанную на языке Javascript.

Поскольку начиная с 2010 года сообществу так и не удалось выработать стандарта WebSQL, в этой области не существовало реляционной БД, которая могла обеспечить полноценную кросс-браузерность.

Имеющиеся решения — IndexedDB и LocalStorage были по сути объектно-ориентированными хранилищами и не имели свойств,которыми обладают реляционные БД.

Lovefield создан, чтобы заполнить этот пробел в подобном ПО.

Он предоставляет мощный и гибкий движок запросов. В качестве бэкэнда в нем используется IndexedDB.

Синтаксис самих SQL-запросов декларативен, т.е. отсутствует прямой парсинг запросов, что делает систему устойчивой к SQL-инъекциям, а также простой в изучении для разработчиков, уже хорошо знакомых с традиционным SQL.

На данные момент движок Lovefield реализует такую функциональность:

• Поддержка запросов select, insert, update и delete;
• Простая семантика транзакций для обеспечения атомарности операций;
• Возможность задания ограничений для проверки сохранения целостности (primary key, unique, nullable/not-nullable).
• Поддержка агрегатных функций(count, min, max, sum, avg, stddev, distinct);
• Поддержка группировки в SELECT-запросах через выражение «group by»;
• Возможность формирования запросов, охватывающих несколько таблиц (INNER JOIN, OUTER JOIN);
• Более простой, чем в IndexedDB, механизм изменения схемы данных;
• Кроссбраузерность — поддерживаются браузеры Chrome, Firefox, IE10.

В плане производительности новый движок использует оптимизатор запросов, который оценивает различные варианты выполнения и выбирает наиболее эффективный.

Lovefield обеспечивает приемлемую производительность для БД размером до 50 тысяч строк.

В ближайшем будущем разработчики планируют добавить поддержку таких возможностей как внешние ключи, самосоединения таблиц, каскадное добавление/удаление записей и другое.

>>> Подробности

12 мая был выпущен очередной релиз СУБД MariaDB под номером 10.0.11. Этот выпуск включает в себя лишь исправление ошибок и обновление компонентов а также некоторые нововведения, среди изменений стоит отметить:

• Обновление компонента TokuDB до версии 7.1.6.
• Обновление механизма хранилища Spider до версии 3.2.
• Обновление компонента XtraDB до версии 5.6.17-65.0.
• Обновление компонента InnoDB до версии 5.6.17.
• Обновление компонента performance_schema до версии 5.6.17.
• Обновление Connect и OQGraph.
• Начиная с этой версии доступно онлайн-изменение структуры партиционной таблицы с помошью ALTER TABLE.
• Добавлена новая системная переменная default_regex_flags, чтобы RLIKE вел себя не по стандарту, но в рамках обратной свместимости.

>>> Подробности

Microsoft разрабатывает под Linux ODBC-драйвер для MS SQL Server. Анонс был сделан Квентином Кларком (Quentin Clark), вице-президентом компании по системам баз данных, на саммите Professional Association for SQL Server (PASS) 2011.

Предварительный релиз будет включать в себя следующее:

• 64-битную версию драйвера для RHEL5;
• утилиты BCP и SQLCMD;
• поддержку протокола Kerberos, SSL и кодировки UTF-8 на стороне клиента.

32-битные версии драйвера, а также 64-битная версия для RHEL6 заявлены в планах разработчиков.

Предварительная версия драйвера будет обнародована в конце осени.

>>> Подробности

PostgreSQL Global Development Group представила новую версию популярного сервера баз данных PostgreSQL — 9.1.0. По словам разработчиков, в новой версии добавлена уникальная функциональность, выходящая за пределы возможностей обыкновенных реляционных баз данных.

Основные изменения в новой версии:

• Синхронная репликация в распределённой БД.
• Поддержка внешних таблиц (т.е. чтения файлов вне БД как таблиц). Пока возможно только чтение, запись не поддерживается.
• Поддержка предложения COLLATE для выбора символьной сортировки (collation).
• Поддержка расширений для сервера.
• Полноценная изоляция сериализуемых (serializable) транзакций. В старых версиях могли происходить некоторые аномалии, которые теперь устранены. Старый алгоритм изоляции ныне соответствует уровню «Repeatable read».
• Возможность создавать непротоколируемые таблицы с помощью опции UNLOGGED в команде CREATE TABLE.
• Теперь допускается изменение данных (INSERT/UPDATE/DELETE) в предложении WITH.
• Индексы GiST теперь обеспечивают быстрый поиск ближайших соседей.
• Добавлена поддержка SELinux и команды SECURITY LABEL.
• Добавлен ряд новых возможностей программирования сервера с помощью PL/Python.

Конечно, это только основные нововведения, тогда как полный список изменений и улучшений весьма велик.

С момента выхода версии 9.0 прошёл без малого год, с момента последнего обновления в ветке 9.* (9.0.4) — около 4 месяцев, а с момента выхода первого и последнего релиз-кандидата (9.1 RC1) — 20 дней.

Сервер распространяется под собственной лицензией, похожей на лицензию BSD и одобренной Open Source Initiative.

Исходный код

>>> Анонс выпуска

Команда разработчиков phpMyAdmin объявила о выходе версии 3.4.0 данного инструмента администрирования баз данных. Руководитель проекта Michal Čihař в своем блоге отмечает, что новый релиз является огромным шагом вперед и несет на своем борту множество нововведений и улучшений, а именно:

• Упрощенный интерфейс для импорта/экспорта баз данных
• Редактор ENUM/SET
• Визуальный конструктор запросов к базе данных
• Более широкое использование технологии AJAX
• Обновление пользовательских настроек и диаграмм
• Поддержка различных форматов для экспорта баз данных
• Новая тема по умолчанию

Также Michal Čihař сообщает, что во время работы над новой версией было обработано более 160 предложений по улучшению проекта и сообщений об ошибках. Также он заявил, что некоторые функциональные нововведения были воплощены по итогам конференций Google Summer of Code последних лет.

Примечания к релизу

Скачать

>>> Подробности

Спустя 2 года разработки и тщательного тестирования команда Drizzle рада представить официальный публичный (GA) релиз системы управления базами данных Drizzle 7 (номер версии произошёл от того, что Drizzle начала свой путь как форк от MySQL 6.0 в 2008 году).

Основные отличия от MySQL:

• убран embedded-сервер;
• оптимизация для множественных параллельных соединений к серверу;
• переработана для поддержки только современных POSIX-систем, такие вещи как MS Windows, HP UX, Irix в Drizzle не поддерживаются;
• разделение на временные зоны тоже излишне, только UTC;
• микро-ядро СУБД написано на С++ с использованием STL и Boost;
• на уровне сети Drizzle использует как традиционный протокол mysql, так и свой собственный;
• так как фокус сделан на минимализации микро-ядра, весь функционал СУБД реализуется плагинами, в том числе планировщик, сетевые протоколы, хранилища, логгирование и аутентификация (возможна аутентификация через PAM, LDAP, а также HTTP);
• хранимые процедуры, SQL views и триггеры к сожалению пока не реализованы;
• реализованы плагины-хранилища: MyISAM (рекомендуется только для временных таблиц), PBXT, HAILDB (доработанный InnoDB, рекомендуемый формат по умолчанию);
• были убраны некоторые команды, функции, ключевые слова и объекты (подробности по ссылке выше);
• хорошая документация;
• нативная репликация (Drizzle делает упор на облачные модели);
• заявляется о значительно улучшенной по сравнению с MySQL производительности.

Анонс в блоге проекта

Скачать с Launchpad (на сайте проекта есть пакеты для Ubuntu/Debian, Fedora/RedHat)

>>> Сайт проекта

Сайт GNU Savannah был взломан. Вредителями была использована SQL injection атака, направленная на http://savannah.gnu.org. В результате были скомпроментированы зашифрованные пароли и злоумышленники получили доступ к некоторым закрытым материалам. Сайт до сих пор не работает, однако идет активный процесс восстановления данных из бэкапов БД и вскоре он вновь будет в строю.

>>> Подробности

Как-то незаметно прошёл выход новой версии клиента для управления сервером PostgreSQL.

В новой версии:

• можно группировать управляемые сервера — для тех, у кого их много;
• во вкладке «Статистика» можно выбрать несколько строк и скопировать их содержимое; хотя, конечно, это больше ошибка, чем нововведение;
• в контекстном меню появилась возможность выбрать для функций и процедур скрипты SELECT и EXEC;
• можно перечитать конфигурацию сервера;
• поддержка нововведений 9-го сервера;
• расширенная статистика сервера;
• сильно расширились возможности резервного копирования и восстановления сервера, теперь в комплекте идут бинарные файлы pg_dump и pg_restore;
• немного улучшили инструмент запросов;
• увеличилось количество настраиваемых параметров самого PgAdmin;
• и другое.

>>> Подробности

На зеркалах уже появился tarball завтрашнего релиза одной из ведущих открытых реализаций реляционной СУБД - PostgreSQL 9. Данное обновление преподносит пользователям огромное число новшеств, главные из которых:

• Простая в использовании репликация
• Массовое управление правами доступа
• Различные улучшения в хранимых процедурах, включая анонимные блоки кода
• Exclusion constraints - обобщенный аналог ограничения уникальности, позволяющий строить более сложные условия
• Откладываемые ограничения уникальности (deferrable unique constraints)
• Новая реализация VACUUM FULL. Теперь команда полностью перезаписывает таблицу и индексы, устраняя проблему роста индексов и работает быстрее предыдущего алгоритма
• Новая быстрая реализация LISTEN/NOTIFY
• Различные улучшения производительности, в том числе исключение ненужных операций JOIN (что улучшает производительность некоторых ORM)

Также появился встроенный модуль passwordcheck для анализа стойкости паролей, аутентификация через RADIUS и LDAP, Python3 в PL/Python и многое другое.

>>> Changelog

SQLite — бессерверная СУБД, не требующая конфигурирования и распространяющаяся под лицензией public domain.

В новой версии были добавлены:

• Поддержка логирования перед записью (WAL), позволяющая несколько ускорить обработку запросов к БД в большинстве случаев
• Расширение планировщика запросов для автоматического фонового построения индексов БД, что также позволяет сократить время на обработку запроса
• Директива ORDER BY при указанной директиве GROUP BY теперь не будет иметь значения (noop)
• Добавлен код возврата SQLITE_DBSTATUS_CACHE_USED для функции статуса sqlite3_db_status()
• Логический размер БД теперь будет сохраняться в заголовке, что позволит корректно работать в системах, где отсутствует ftruncate()

Новая версия рекомендуется для разработчиков и новых установок.

>>> Анонс