Деградация VM в Proxmox 5

Память под ceph c ecc ?
Контрольные суммы чекаете ?

Использую zfs, не сталкивался.

Стоит Ceph с ecc памятью проблем нет.

zfs+ceph ?

Нет, я решил не искать на задницу проблем, по-этому у меня везде локальный zfs. Проблем не было таких. Есть другие приокольчики, но там терпимо :)

Ты же вроде собирался на lvm переходить?

Я с lvm сбежал наоборот. И не вспоминаю о нем уже много лет. :) lvm однозначно быстрее zfs... Но zfs уже привычней. Проще. Я уже начал переходить на SSD. Пока понимаю что virtio всё равно не так хорош... Но всё же. zfs+SSD - пока радует и производительностью и фичами.

Да вот не все ноды имеют память с ЕСС. Пичалька! На дело в том, что и на обычном NFS происходит то же самое. А вообще Ceph у меня всегда зелёненький и сам восстанавливается, если что. Ну бывало пару раз руку приложил, но успешно. Так ли необходим ЕСС для Ceph?

Да вот не все ноды имеют память с ЕСС. Пичалька!

Печалька для чего? Для zfs, отсутствие ECC не есть печалька. Это печалька только лишь для Вас. Если у Вас есть проблемы с памятью, то совершенно нету никакой разницы zfs у Вас там или не zfs - данные могут быть записаны неверно абсолютно на любой файловой системе. В том числе и на NFS. ZFS просто напоминает всем об этом. ECC память ровно для того и придумана (в частности), чтобы быть больше уверенным, что на диск запишется то, что должно быть туда записано, не больше, не меньше. Если диски бьются на всех узлах, то может быть дело всё же в Сети?

Может быть где-то утечки памяти? Помониторьте, поконтролируйте.