Перенос mysql без даунтайма

самописный скрипт, который реплицирует БД на другой сервер, а после репликации одновременно меняет конфиги (чистит кеш) в нужных сайтах

самописный скрипт, который реплицирует БД на другой сервер, а после репликации одновременно меняет конфиги (чистит кеш) в нужных сайтах

Нутро покаж

master-master репликация. У меня есть ресурс на котором одна мастер-нода, а две-слейв. На мастере админка, на слейвах отображение инфо :)

master-master репликация. У меня есть ресурс на котором одна мастер-нода, а две-слейв. На мастере админка, на слейвах отображение инфо :)

А если репликации нет?

Сначала ни у кого нет. Надо настроить :)

для 1 сайта

#!/bin/bash
mysqldump -uusername -h11.11.11.11 -ppassword database > db1.sql
mysql -uusername2 -h22.22.22.22 -ppassword2 database < db1.sql
cd ~/sites/forum1/
cp -f ~/Documents/newconfig.php config.php
rm -R cache

а вообще, то я предполагаю, что есть какой-то более изящный вариант
Но какой - хз, меня пока скрипт(ы) устраивает(ют), да и особо не вникал.

Сначала ни у кого нет. Надо настроить :)

Как ты это сделаешь без даунтайма? :)

mysqldump -uusername -h11.11.11.11 -ppassword database > db1.sql

Если мускуль под нормальной нагрузкой - это его положит автоматом.

Как ты это сделаешь без даунтайма? :)

Если InnoDB, то mysqldump с опциями --single-transaction и --master-data.

это его положит автоматом

положит именно mysql? или i/o?
по идее, конечно, работа замедлится, но чтобы оно падало - странно как-то, не должно

если i/o то можно через pipe в gzip
кроме того, есть доп. опции в man mysqldump

положит именно mysql? или i/o?

Из-за высокого i/o и обращений к мускулю - все остальные приложения, которые его юзают - пойдут лесом.

по идее, конечно, работа замедлится, но чтобы оно падало - странно как-то, не должно

Это не работа замедлится, это сайт по 3-4 минуты открываться будет с 502ой :)

если i/o то можно через pipe в gzip

Не поможет, потому что i/o генерирует как раз сам mysqldump заставляя mysql судорожно читать базу/ы.

Это всё надо сделать атомарно, а это в данном варианте даунтайм и есть. Нужно настроить именно репликацию, чтобы базы на старой и новой нодах были одинаковы во время работы движка. Тогда можно поменять URI для подключения к БД.

А бэкапов данный БД нету? Не смущает mysqldump в момент бэкапа?

сервер без даунтайма
скрипт, который реплицирует БД на другой сервер, а после репликации одновременно меняет конфиги (чистит кеш)

жжжесть. )))

А бэкапов данный БД нету? Не смущает mysqldump в момент бэкапа?

Бэкапы - чистерство :) вопрос был с нуля.

Сорри, седня тяпница ... я перестал чтолибо понимать в этом посте :) Что бы вы не делали, удачи вам!

Сорри, седня тяпница ... я перестал чтолибо понимать в этом посте :) Что бы вы не делали, удачи вам!

Еще раз:
у тебя есть из ниоткуда взявшийся mysql сервер, без бекапов и реплик. Полностью standalone. Копий данных нигде нет.
Задача: перенести без даунтайма.
Как ты это сделаешь?

если БД не сверхнагружена - со стороны пользователя реальный downtime составляет менее секунды после изменения конфига

разным людям - разные потребности при разных условиях - разные решения
жесть? что сказать-то хотел? предложи свой вариант

Перевод базы в R/O считается даунтаймом?

ionice + nice?

Перевод базы в R/O считается даунтаймом?

Само собой. У тебя ж допустим сайт, который активно пишет чота там, юзвери тусуются и трафик льется как из ведра.

ionice + nice?

На что? :) на mysqldump это бесмысленно, он не трогает не i/o, не процессор не грузит. Выть начинает mysql.

Ну тогда мой вариант ответа - НИКАК!

А вообще тема интересная, может чегото и недопонимаю в современных технологиях. Последим, вдруг кто что придумает!

он не трогает не i/o, не процессор не грузит

...

http://i.imgur.com/yUEvvKT.png

даже не знаю что сказать. В любом случае, комбинацию nice+ionice стоит попробовать.

В любом случае, комбинацию nice+ionice стоит попробовать.

У меня такая ситуация была - не помогало :)

Полностью standalone. Копий данных нигде нет.

А какой там raid? ;-) Я как-то просто вытащил диск из зеркала и восстановил на другом. Это, правда, не БД было. Да и вообще ничего особо важного... Кстати, средствами твоей любимой ФС такое не сделать?

т.е. ты уже применял это к mysqldump?
если НЕ через mysqldump, то надо делать репликацию. Других вариантов я не вижу

Я как-то просто вытащил диск из зеркала и восстановил на другом.

На очень активном сервере есть риск получить неконсистентную базу на выходе от такого действия.
Именно поэтому варианты с ФС отпадают.

т.е. ты уже применял это к mysqldump?

Да.

если НЕ через mysqldump, то надо делать репликацию. Других вариантов я не вижу

Ага. Читаем вторую строку поста ;)

innobackupex'ом снять дамп, запилить мастер-мастер.

Читаем вторую строку поста

да, видел. Просто так сказал.

А вообще, то еще некоторое шаманство можно почерпнуть отсюда: http://dba.stackexchange.com/questions/20/how-can-i-optimize-a-mysqldump-of-a...
Но там примерно 50% 4.2

Шаманили, все равно вешает.

А ты как?

Кроме репликации, можно дампить во время минимальной нагрузки, и лить на целевую тачку через пайп.

Если база небольшая конечно.

innobackupex'ом снять дамп, запилить мастер-мастер.

И давно уже у нас innodb/myisam нормально в мастер/мастер работает?
Плюс для мастера/мастера нужен рестарт боевого мускуля. А это даунтайм.

можно дампить во время минимальной нагрузки

Вот мы это уже обсудили и выянилось, что как бы нет :) не вариант

да уж. Вот незадача. Хоть бери и пиши собственный велосипед для замены mysqldump

Эх, ясно кароче.
Никто не хочет (либо не умеет) делать реплику без даунтайма и мускульдампа под нагрузкой.

Узрите:
https://www.percona.com/doc/percona-xtrabackup/2.1/howtos/setting_up_replicat...

invokercd reprimand

Эту же тулзу отлично юзать под бекапы (для которых она и сделана, кстати).

ээй, это же как раз то, о чем я писал.

о! спасибо!
мб в будущем пригодится!

Где ты там нашел мастер-мастер?

вопрос был «как вы переносите». если надо перенести, то есть отказаться от старого без простоя (точнее с минимальным) - нужен м-м. если бы ты написал «как поднять м-с под нагрузкой», я бы не упоминал мастер-мастер.

А-ха-ха!

Так это был экзамен??? Спасибо за двойку :)

P.S. Тоесть фишка в том что innobackupex «более дружественно» делает бэкап базы MySQL чем mysqldump?

P.S. Тоесть фишка в том что innobackupex «более дружественно» делает бэкап базы MySQL чем mysqldump?

Ага. Код открыт, можно поглядеть как именно.
Меня это на сервере с нагрузкой спасло.

А если репликации нет?

тогда NoWay

точнее с минимальным

А я вот без простоя )

Так вопрос был, любой вариант, кроме реплики?

Дамп не катит при серьезных нагрузках, а где серьезные нагрузки там по-любому есть репликация.

За ссылочку спасибо.

а где серьезные нагрузки там по-любому есть репликация.

Неа :)

Так вопрос был, любой вариант, кроме реплики?

Вопрос был, любой вариант кроме mysqldump и когда из коробки ничего не преднастроено.