Вопрос к специалистам по PostgreSQL

Присоединяюсь к вопросу

У одного инстанса один wal. Нужно несколько wal - запускай несколько инстансов.

И на каждую базу по инстансу, да? Это какой оверхед будет? Ерунда…

Какую задачу решаем, что надо писать wal для каждой базы отдельно? У postgresql другая идеология, там один инстанс - минимальная единица, и уже из инстансов собирается кластер.

у меня в кластере 100 баз, и все они бухгалтерские, разных организаций, вал я конечно собираю, но это скорее на случай развала рейда, внезапного, то есть просто на всякий случай.

А мне иногда нужно просто откатить одну базу из кластера, для этого я лью каждую базу в дамп каждые 2 часа

cluster это набор баз данных, в терминологии постгреса, расскажите что вы имеете в виду, уж очень наболело

While multiple databases can be created within a single cluster, it is advised to consider carefully whether the benefits outweigh the risks and limitations. In particular, the impact that having a shared WAL (see Chapter 29) has on backup and recovery options.

https://www.postgresql.org/docs/current/manage-ag-overview.html

Вот такая ерунда.

а хочется в итоге простого, чтобы WAL создавался для каждой базы в отдельности.

но ты ведь его хочешь?

а в чем оверхед на твой взгляд? Как я понял из твоего кейса, базы маленькие и без нагрузки особой? Снимай бекап через walg, а при необходимости делай time to point recovery и бери оттуда уже то, что тебе надо было. walg удивишься как быстро тебе это сделает, а то про какие-то 2 часа и дамп пишешь, непонятно..

Попробуй pgbackrest он позволяет восстанавливать как кластер целиком так и отдельно конкретную БД в нем, кластер на время восстановления останавливается (два года назад такое условие было, возможно что-то поменялось)

И на каждую базу по инстансу, да? Это какой оверхед будет?

Это какой оверхед будет?

ну во первых если развернуть 100 инстансев, это сколько в них воркеров будет? если у меня сейчас 10 ядер и десять воркеров?

Потом как это админить? 100 портов нужно знать и помнить.

Потом, шаредмемори сколько выделять?

И так далее…

Или именно это и нужно сделать?

ну во первых если развернуть 100 инстансев, это сколько в них воркеров будет? если у меня сейчас 10 ядер и десять воркеров?

Если несколько баз постоянно заняты работой, то можно и меньше десяти. Ну а так — да, по количеству ядер в системе.

Потом как это админить? 100 портов нужно знать и помнить

Ну типа это твоё дело. Ты ж одмин.

Потом, шаредмемори сколько выделять?

Старые доки приводили примерные цифры:

https://www.postgresql.org/docs/9.2/kernel-resources.html
«Connections (1800 + 270 * max_locks_per_transaction) * max_connections»

Но это такие себе расчеты, потому что большую часть разделяемой памяти использует буфер, а буфер должен быть такой, чтобы в него влазили индекса и данные из твоей транзакции — иначе база будет «свопаться». Потому эта цифра может составлять от единиц мегабайт до единиц гигабайт в зависимиости от размеров базы. Конечно, можно сделать предел размера разделяемой памяти больше, чем размер БД, но в итоге это закончится тем, что постгрес засунет всю базу в память и будет использовать примерно столько памяти, не больше.

database per cluster is best practice!