Ошибки файловой системы на KVM

1

1

Собрал новый сервак, на нем крутятся виртуалки на KVM. Но один виртуальный сервер на cent os как то странно себя ведет, периодически падает, в логах сервера вот это:

Apr 19 16:32:23 sip kernel: Buffer I/O error on device vda, logical block 5242830
Apr 19 16:32:23 sip kernel: Buffer I/O error on device vda, logical block 5242830
Apr 19 16:32:23 sip kernel: Buffer I/O error on device vda3, logical block 256
Apr 19 16:32:23 sip kernel: Buffer I/O error on device vda2, logical block 4969200
Apr 19 16:32:23 sip kernel: Buffer I/O error on device vda3, logical block 256
Apr 19 16:32:23 sip kernel: Buffer I/O error on device vda2, logical block 4969200
Apr 19 16:32:23 sip kernel: Buffer I/O error on device vda2, logical block 4969214
Apr 19 16:32:23 sip kernel: Buffer I/O error on device vda2, logical block 4969214
Apr 19 16:32:23 sip kernel: Buffer I/O error on device vda2, logical block 4969215
Apr 19 16:32:23 sip kernel: end_request: I/O error, dev vda, sector 40370168
Apr 19 16:32:23 sip kernel: end_request: I/O error, dev vda, sector 40370432
Apr 19 16:32:23 sip kernel: end_request: I/O error, dev vda, sector 40370168
Apr 19 16:32:23 sip kernel: end_request: I/O error, dev vda, sector 40374272
Apr 19 16:32:23 sip kernel: end_request: I/O error, dev vda, sector 40374272

Во время перезагрузки делаю fsck -y. Находит битые сектора и фиксит их. После загрузки системы делаю: ]# badblocks -sv /dev/vda1

Checking blocks 0 to 307199
Checking for bad blocks (read-only test): done
Pass completed, 0 bad blocks found.

Остальные виртуальны сервера ведут себя адекватно. Пробовал даже подмонтировал его к другому серверу и чкал диск, тест проходил на ура. При этом иногда он может работать неделю, а потом за один день 2 раза упасть на ровном месте с этой ошибкой.

Ссылка

←	Centos 7 & samba - глючит

Не подключается к openvpn на raspberry pi (raspbian)

→

Держи нас в курсе.

anonymous
(19.04.18 17:18:29 MSK)

Ссылка

smartctl с хоста покажите

~~int13h~~ ★★★★★
(19.04.18 17:24:02 MSK)

Ответ на: комментарий от int13h 19.04.18 17:24:02 MSK

Не получается, выдает постоянно ошибки, так как у меня там не один диск, а raid собран. Да и если бы сам raid глючил, то думаю что и остальные бы 10 виртуалок колбасило бы.

iliaxxx ★
(19.04.18 17:32:51 MSK) автор топика
Последнее исправление: iliaxxx 19.04.18 17:35:38 MSK (всего исправлений: 1)

Ответ на: комментарий от iliaxxx 19.04.18 17:32:51 MSK

что не получается? считать показания SMART?

smartctl на самом железном сервере.

что в dmesg на железном сервере?

~~int13h~~ ★★★★★
(19.04.18 17:38:35 MSK)

Ответ на: комментарий от int13h 19.04.18 17:38:35 MSK

да, и какое кеширование для накопителя ВМ?

с dumpxml покажите.

~~int13h~~ ★★★★★
(19.04.18 17:41:34 MSK)

Ссылка

Ответ на: комментарий от int13h 19.04.18 17:38:35 MSK

Там много чего, ошибка всего одна проскачила:

6.904811] Error: Driver 'pcspkr' is already registered, aborting...
[    7.578599] kvm: VM_EXIT_LOAD_IA32_PERF_GLOBAL_CTRL does not work properly. Using workaround
[    7.635100] Adding 5849084k swap on /dev/sda5.  Priority:-1 extents:1 across:5849084k
[    7.653677] EXT4-fs (sda1): re-mounted. Opts: (null)
[    7.729952] EXT4-fs (sda1): re-mounted. Opts: errors=remount-ro
[    7.962865] loop: module loaded
[    8.625868] EXT4-fs (sdb1): mounted filesystem with ordered data mode. Opts: (null)
[    9.004035] ip_tables: (C) 2000-2006 Netfilter Core Team
[    9.064393] nf_conntrack version 0.5.0 (16384 buckets, 65536 max)
[    9.185168] Bridge firewalling registered
[    9.190209] device eth0 entered promiscuous mode

iliaxxx ★
(19.04.18 17:45:24 MSK) автор топика

Ответ на: комментарий от iliaxxx 19.04.18 17:45:24 MSK

Я переносил этот сервер с другого сервера на нем стоял Vmware, конвертировал на KVM через

qemu-img convert /mnt/hdd0/server/server.vmdk -c -O qcow2 /mnt/hdd0/server

Если на изначальном сервере были ошибки, то и при конвертации они перенесутся?

iliaxxx ★
(19.04.18 17:58:57 MSK) автор топика

Ответ на: комментарий от iliaxxx 19.04.18 17:58:57 MSK

Сейчас на этой виртуалке запустил проверку:

badblocks -sv /dev/vda2

Выхлоп получил такой:

************
19876858
19876859
19876860
19876861
19876862
19876863
done
Pass completed, 492402 bad blocks found.

Походу на старом сервере когда работал vmware, там были косяки по диску, а я при конвертации перенес эти косяки. Такое может быть?

iliaxxx ★
(19.04.18 18:02:34 MSK) автор топика

Ответ на: комментарий от iliaxxx 19.04.18 18:02:34 MSK

мне кажется всему виной кривые опции монтирования и внезапное отключение питания или остановка виртуалки.

Deleted
(19.04.18 18:11:26 MSK)

Ссылка

Ответ на: комментарий от iliaxxx 19.04.18 18:02:34 MSK

да, безусловно.

qemu-img не парсит фс. а что у вас там было — мб ошибки.

~~int13h~~ ★★★★★
(19.04.18 19:57:14 MSK)

Ответ на: комментарий от int13h 19.04.18 19:57:14 MSK

Тогда ясно откеля ноги растут у ошибак на этой виртуалке.
Есть варианты решения данной ошибки, ибо монтировать то я пробовал и чикать, не помогло. Что можно еще сделать?
Может есть варианты самим KVM чикнуть диск и пофиксить бад сектора?

iliaxxx ★
(19.04.18 20:16:22 MSK) автор топика

Ответ на: комментарий от iliaxxx 19.04.18 20:16:22 MSK

По-моему, проще всего не парить мозг, завести новый образ диска, создать там нужные разделы и FS и скопировать данные rsync-ом (еще надо будет загрузчик поставить). Заодно скорее всего увидите, в каких файлах есть сбои при чтении.

undertaker ★★
(19.04.18 21:24:13 MSK)

Ссылка

Ответ на: комментарий от int13h 19.04.18 19:57:14 MSK

В общем, ноги у проблемы растут именно из виртуалке. Выполнил проверку массива на железке:

 badblocks -s /dev/sdb1 > /root/badblock

Выхлоп показал что нет бадовых секторов

iliaxxx ★
(20.04.18 11:24:08 MSK) автор топика

Ответ на: комментарий от iliaxxx 20.04.18 11:24:08 MSK

значит ошибки были еще на vmware

~~int13h~~ ★★★★★
(20.04.18 11:55:28 MSK)

Ответ на: комментарий от int13h 20.04.18 11:55:28 MSK

Никто не сталкивался с механизмами конвертации из Vmware в KVM с проверкой файловой системы? Мне просто нужно еще будет машины переносить.

iliaxxx ★
(20.04.18 13:15:49 MSK) автор топика

Ответ на: комментарий от iliaxxx 20.04.18 13:15:49 MSK

я постоянно конвертирую vmdk в qcow2. проблем нет.

я же вам написал, что qemu-img не работает с фс, и ему безразлично, что у вас проблемы на фс.

~~int13h~~ ★★★★★
(20.04.18 13:50:44 MSK)

https://russiancoders.tech/topic/H3Ok4zX8TGW6IveCUMgs/1/#9

anonymous
(20.04.18 14:13:02 MSK)

Ссылка

Ответ на: комментарий от int13h 20.04.18 13:50:44 MSK

Всем привет и снова я.
А ларчик с этим багом проще открывался. Нашел виртуалку с такимже багом. На чек он выдавал вот такой выхлоп:

# qemu-img check server_name
Leaked cluster 115256 refcount=1 reference=0
Leaked cluster 188362 refcount=1 reference=0
Leaked cluster 188363 refcount=1 reference=0

Сделал вот так:

qemu-img convert -c -O qcow2 server_name server_name_clon

После чего на выхлопе чека получил:

qemu-img check server_name_clon
No errors were found on the image.

Супер, проблема с бад секторами на сервере решена. Но тот сервер веси всего 20 гигв. Сделал копию за 40 минут. Проблема том что процесс qemu-img использует всего одно ядро.
А мне нужно конвертировать сервер вером 580 гигов.
Вопрос, как запустить процесс qemu-img в многоядерном режиме?

iliaxxx ★
(21.04.18 23:53:29 MSK) автор топика

Ответ на: комментарий от iliaxxx 21.04.18 23:53:29 MSK

Оставил KVM включенным и через 2 дня сервак глюконул. На экране осталось то что в журнал логов не попадало:

http://images.vfl.ru/ii/1524722946/b96c233e/21514276.jpg

Может кто чего скажет по этой ошибке?

iliaxxx ★
(26.04.18 09:12:55 MSK) автор топика

Ссылка

Вы не можете добавлять комментарии в эту тему. Тема перемещена в архив.

←	Centos 7 & samba - глючит

Admin

Не подключается к openvpn на raspberry pi (raspbian)

→

Похожие темы