Сервер сдох - не загружается

0

2

Работал месяца 4 на hetzner.com и сегодня перестал загружаться. Сапорт говорит что все ок

Ответ из сапорта

The drive check did not see any issue with the hardware:

-----------------%<-----------------
HDDTEST WCAZA5967379: Ok
HDDTEST WMAY03689708: Ok
HDDTEST 11106522340004610090: Ok
HDDTEST 111065183500046100D6: Ok
-----------------%<-----------------

The server is booted to the rescue system with password: ******

You should try to backup your data and then reinstall the system if you cannot fix the boot.

Не знаю с чего начать. Есть доступ к rescue shell. На сервере был(есть?) md raid6 вроде. Я уже не помню что там было. Как примонтировать\найти все raid? Нужно понять восстанавливаемый ли диск или нет и если нет, то заново установлю дебиан. А ещё лучше найти из-за чего сбой произошел

Ссылка

←	Бесперебойник критично завышает напряжение на выходе.

линковка контейнеров docker

→

mdadm --assemble --scan
mdadm: /dev/md/2 assembled from 2 drives - not enough to start the array while not clean - consider --force.

mdadm --assemble --scan --force
mdadm: Marking array /dev/md/2 as 'clean'
mdadm: /dev/md/2 has been started with 2 drives (out of 4).

cat /proc/mdstat
Personalities : [raid1] [raid6] [raid5] [raid4]
md2 : active raid6 sda3[0] sdc3[2]
      220672000 blocks super 1.2 level 6, 512k chunk, algorithm 2 [4/2] [U_U_]
      bitmap: 1/1 pages [4KB], 65536KB chunk

md1 : active raid1 sda2[0] sdd2[3] sdc2[2] sdb2[1]
      523264 blocks super 1.2 [4/4] [UUUU]

md0 : active raid1 sda1[0] sdd1[3] sdc1[2] sdb1[1]
      6286336 blocks super 1.2 [4/4] [UUUU]

unused devices: <none>

gobot ★★★★
(31.03.20 15:45:15 MSK) автор топика
Последнее исправление: gobot 31.03.20 15:47:40 MSK (всего исправлений: 2)

Примонтировал раздел

mount /dev/md2 /mnt/

Диск вроде жив, данные есть. Но почему не загружается?

gobot ★★★★
(31.03.20 16:03:47 MSK) автор топика

Ответ на: комментарий от gobot 31.03.20 16:03:47 MSK

Но почему не загружается?

А загрузчик у тебя на чем стоял?

Tanger ★★★★★
(31.03.20 16:09:55 MSK)

Ответ на: комментарий от Tanger 31.03.20 16:09:55 MSK

Да дефолтный, дебиан. ХЗ

gobot ★★★★
(31.03.20 16:10:46 MSK) автор топика

Ответ на: комментарий от gobot 31.03.20 16:10:46 MSK

На каком разделе? на md0 (raid1)? В каком режиме он пытается грузиться: efi/bios?

hetzner не предоставляет удаленный доступ типа intel amt?

Tanger ★★★★★
(31.03.20 16:15:42 MSK)

Ответ на: комментарий от Tanger 31.03.20 16:15:42 MSK

mount /dev/md1 /mnt/
ls /mnt/
config-4.19.0-6-amd64  grub  initrd.img-4.19.0-6-amd64  lost+found  System.map-4.19.0-6-amd64  vmlinuz-4.19.0-6-amd64

Походу на /dev/md1 !

В каком режиме он пытается грузиться: efi/bios?

не знаю

hetzner не предоставляет удаленный доступ типа intel amt?

KVM доступ давал, но там какой то файл j*** явовский нужно скачивать ХЗ

gobot ★★★★
(31.03.20 16:19:26 MSK) автор топика

Ответ на: комментарий от gobot 31.03.20 15:45:15 MSK

md2 : active raid6

у тебя RAID6, два раздела отвалилось - значит пока живой, но резервов уже нету. Бэкапся напоследок и восстанавливай раид.

Atlant ★★★★★
(31.03.20 16:21:15 MSK)
Последнее исправление: Atlant 31.03.20 16:21:42 MSK (всего исправлений: 1)

Ответ на: комментарий от gobot 31.03.20 16:03:47 MSK

Диск вроде жив, данные есть. Но почему не загружается?

Потому, что RAID не очень жив, а в конфиге где-то написано «не загружаться» (или так по умолчанию). Хотя грузиться, на самом деле, можно, так как отказ двух дисков в RAID6 ещё не смерть. Нужно дописать какой-то параметр, не помню.

AS ★★★★★
(31.03.20 16:25:11 MSK)
Последнее исправление: AS 31.03.20 16:25:38 MSK (всего исправлений: 1)

Ссылка

Ответ на: комментарий от Atlant 31.03.20 16:21:15 MSK

Не отвалились. Я при создании raid6 отключал sata, чтобы меньше тормозило. То есть метил как сбойные, удалял

gobot ★★★★
(31.03.20 16:26:46 MSK) автор топика

Ответ на: комментарий от gobot 31.03.20 16:19:26 MSK

ну дык скачай jar и подключись. Но да, восстановить raid нужно пока он совсем не рассыпался.

mdadm /dev/md2 --add /dev/sdb3

После синхронизации:

mdadm /dev/md2 --add /dev/sdd3

Tanger ★★★★★
(31.03.20 16:27:50 MSK)

Ответ на: комментарий от gobot 31.03.20 16:26:46 MSK

Ээ.. на кой тогда там вообще raid6? Сделал бы raid0.

Tanger ★★★★★
(31.03.20 16:28:21 MSK)
Последнее исправление: Tanger 31.03.20 16:28:42 MSK (всего исправлений: 1)

Ответ на: комментарий от Tanger 31.03.20 16:27:50 MSK

ну дык скачай jar и подключись

А что это даст? Я и так все делаю через rescue

mdadm /dev/md2 --add /dev/sdb3

mdadm /dev/md2 --add /dev/sdb3
[>....................]  recovery =  1.5%

После этого что? Как загрузчик восстановить?

gobot ★★★★
(31.03.20 16:32:05 MSK) автор топика

Ответ на: комментарий от Tanger 31.03.20 16:28:21 MSK

Я бы рад, но нельзя. Там 2 сата и 2 ssd. Дефолтный авто-установщик делает raid6...

gobot ★★★★
(31.03.20 16:33:14 MSK) автор топика

Ответ на: комментарий от gobot 31.03.20 16:33:14 MSK

давай дождись полной синхронизации раида. А после грузи java-консоль и перебирай в bios|gpt загрузочные диски/ssd. Далее нужно будет разместить копию загрузчика на всех дисках/ssd.
Но это лучше уже после запуска основной системы.

Atlant ★★★★★
(31.03.20 16:37:58 MSK)

Ответ на: комментарий от gobot 31.03.20 16:32:05 MSK

mdadm /dev/md2 –add /dev/sdb3

Написал до того как прочитал То есть метил как сбойные, удалял.

Сейчас он добавил sdb3 в массив и записывает на него данные.

А что это даст?

Ты увидишь на что загрузчик ругается.

Как загрузчик восстановить?

А он ли сломался?

Tanger ★★★★★
(31.03.20 16:38:52 MSK)

Ответ на: комментарий от Tanger 31.03.20 16:38:52 MSK

То есть метил как сбойные, удалял

метил как сбойные ещё давно, при установке

Ты увидишь на что загрузчик ругается

Как я это увижу? по KVM я не буду загружаться

А он ли сломался?

ХЗ

gobot ★★★★
(31.03.20 16:44:44 MSK) автор топика

Ответ на: комментарий от Atlant 31.03.20 16:37:58 MSK

перебирай в bios|gpt загрузочные диски/ssd

это я точно не осилю сейчас. Сервер нужно вернут через час в рабочее состояние

gobot ★★★★
(31.03.20 16:46:02 MSK) автор топика

Ссылка

Ответ на: комментарий от gobot 31.03.20 16:44:44 MSK

по KVM я не буду загружаться

почему?

Tanger ★★★★★
(31.03.20 16:52:18 MSK)

Ответ на: комментарий от Tanger 31.03.20 16:52:18 MSK

+1
только так можно понять на каком этапе возникает проблема загрузки.

Deleted
(31.03.20 16:55:09 MSK)

Ответ на: комментарий от Tanger 31.03.20 16:52:18 MSK

Не знаю как. Долго. Мне сейчас нужно решить.

gobot ★★★★
(31.03.20 16:59:38 MSK) автор топика

Ссылка

Ответ на: комментарий от Deleted 31.03.20 16:55:09 MSK

Вот что пишет KVM

Failed to start LSB: System Managment Data Engine

Нихера не понятно

gobot ★★★★
(31.03.20 17:09:50 MSK) автор топика

Ответ на: комментарий от gobot 31.03.20 17:09:50 MSK

Это после загрузки ядра ?

Deleted
(31.03.20 17:12:08 MSK)

Ответ на: комментарий от Deleted 31.03.20 17:12:08 MSK

Это сапорт отправил, после загрузки KVM

gobot ★★★★
(31.03.20 17:19:55 MSK) автор топика

Ответ на: комментарий от gobot 31.03.20 17:19:55 MSK

Шта ?
О котором KVM сейчас речь ?

Deleted
(31.03.20 17:20:48 MSK)

Ответ на: комментарий от Deleted 31.03.20 17:12:08 MSK

Он такой скрин паршивый прислал, там ничего не видно

gobot ★★★★
(31.03.20 17:20:49 MSK) автор топика

Ссылка

Ответ на: комментарий от Deleted 31.03.20 17:20:48 MSK

Обычный KVM. А шта?

gobot ★★★★
(31.03.20 17:21:37 MSK) автор топика

Ссылка

Скорее всего сервер не сдох, а вдруг решил перезагрузиться. И так как была кривая инсталляция, то загрузиться не смог. Синкай диск, делай массив нормальным. И поставь куда-нибудь загрузчик. В чруте dpkg-reconfigure grub-pc. Но, может, перед этим нужно будет выполнить grub-install /dev/sdX

turtle_bazon ★★★★★
(31.03.20 18:00:36 MSK)

Ответ на: комментарий от turtle_bazon 31.03.20 18:00:36 MSK

Сейчас попросил сапорт убрать sata, чтобы авто поставить raid1 из чисто ssd

gobot ★★★★
(31.03.20 18:06:34 MSK) автор топика
Последнее исправление: gobot 31.03.20 18:07:00 MSK (всего исправлений: 1)

Ссылка

You should try to backup your data and then reinstall the system if you cannot fix the boot.

Это переводится с английского примерно так: вам нужно сохранить ваши данные в backup и переинсталлировать систему, если вы не можете исправить загрузку.

anonymous
(01.04.20 01:50:49 MSK)