217.174.199.129 le 12 juillet 2013 à 08:53

2013-07-12T08:53:25Z

← Version précédente		Version du 12 juillet 2013 à 08:53
Ligne 104 :		Ligne 104 :

	# Purge des anciens dumps :		# Purge des anciens dumps :
	$BIN_TMPWATCH $RETENTION_TIME $OLDESTDIR_DEMO		# Il faut bien mettre l'option --mtime sinon c'est l'access time qui est pris en compte par défaut et ce n'est pas bon
	$BIN_TMPWATCH $RETENTION_TIME $OLDESTDIR_PREPROD		$BIN_TMPWATCH --mtime $RETENTION_TIME $OLDESTDIR_DEMO
			$BIN_TMPWATCH --mtime $RETENTION_TIME $OLDESTDIR_PREPROD

	# Deplacement du dump de la veille dans OLD :		# Deplacement du dump de la veille dans OLD :

217.174.199.129 le 31 janvier 2013 à 13:50

2013-01-31T13:50:49Z

Voir les modifications

217.174.199.129 : Page créée avec « Ce script de dump (agarik) est avancé, avec une rétention et purge des dumps. Il permet via des variables de backuper par tables ou bases, tout en verifiant que les opti... »

2013-01-30T11:23:59Z

Page créée avec « Ce script de dump (agarik) est avancé, avec une rétention et purge des dumps. Il permet via des variables de backuper par tables ou bases, tout en verifiant que les opti... »

Nouvelle page

Ce script de dump (agarik) est avancé, avec une rétention et purge des dumps. Il permet via des variables de backuper par tables ou bases, tout en verifiant que les options de dumps
sont présents dans la version de mysql. La fonction "send" est propre à la supervision sur cette plateforme et doit être supprimée (ou à adapter pour remonter une info).
Il permet de backuper 2 instances mysql qui tournent sur des ports différents, mais il peut facilement etre adapté pour X instances

<pre>
#!/bin/bash
# Declaration des variables :
DATE=`date +%Y-%m-%d`
VISION="/opt/agarik/Vision/bin/bb_send_raw"
DISPLAY="supervision.agarik.com"
TARGET="$(hostname | sed -e 's/\./,/g')"
SERVICE="backup"
DBUSER="root"
DBPASS3306="Q47avklYt"
DBPASS3307="8Osx4OBm"
DESTDIR3306="/var/db_backup/CURRENT"
OLDESTDIR3306="/var/db_backup/OLD"
DESTDIR3307="/var/db_backup-3307/CURRENT"
OLDESTDIR3307="/var/db_backup-3307/OLD"
LOGDIR="/var/log/"
BIN_MYSQLDUMP="/opt/applis/mysql/bin/mysqldump"
BIN_MYSQL="/opt/applis/mysql/bin/mysql"
BIN_TMPWATCH="/usr/sbin/tmpwatch"
BIN_MKDIR="/bin/mkdir"
BIN_MV="/bin/mv"
LIFE_MESSAGE="1560"
RETENTION_TIME="192" # en heures
TYPE_BACKUP="bases" # choix possible par "bases" ou par "tables"
BASE_LIST=""
TABLE_LIST=""
DUMP_ALLOPT="routines skip-lock-tables events"
DUMP_OPT=""
# Supervision
Send()
{
"${VISION}" "${DISPLAY}" "status+${LIFE_MESSAGE} ${TARGET}.${SERVICE} ${1} $(date) ${SERVICE} ${2}"
}

# Execution du dump :
exec 1> $LOGDIR/sqldump.ok
exec 2> $LOGDIR/sqldump.error

for binary in $BIN_MYSQLDUMP $BIN_MYSQL $BIN_TMPWATCH $BIN_MKDIR $BIN_MV
do
if [ ! -f $binary -a ! -x $binary ]; then
echo "Attention probleme lors des dumps de cette nuit ! $binary n'existe pas" > $LOGDIR/sqldump.error
color="red"
Send "${color}" "$(cat $LOGDIR/sqldump.error)"
exit 1

fi
done

if [ ! -d $DESTDIR3306 ]; then $BIN_MKDIR -p $DESTDIR3306;
if [ $? != 0 ]; then
echo "Attention probleme lors des dumps de cette nuit ! Répertoire de destination $DESTDIR3306 des dumps impossible à créer" > $LOGDIR/sqldump.error
color="red"
Send "${color}" "$(cat $LOGDIR/sqldump.error)"
exit 1
fi
fi

if [ ! -d $OLDESTDIR3306 ]; then $BIN_MKDIR -p $OLDESTDIR3306;
if [ $? != 0 ]; then
echo "Attention probleme lors des dumps de cette nuit ! Répertoire de destination $OLDESTDIR3306 des dumps impossible à créer" > $LOGDIR/sqldump.error
color="red"
Send "${color}" "$(cat $LOGDIR/sqldump.error)"
exit 1
fi
fi

if [ ! -d $DESTDIR3307 ]; then $BIN_MKDIR -p $DESTDIR3307;
if [ $? != 0 ]; then
echo "Attention probleme lors des dumps de cette nuit ! Répertoire de destination $DESTDIR3307 des dumps impossible à créer" > $LOGDIR/sqldump.error
color="red"
Send "${color}" "$(cat $LOGDIR/sqldump.error)"
exit 1
fi
fi

if [ ! -d $OLDESTDIR3307 ]; then $BIN_MKDIR -p $OLDESTDIR3307;
if [ $? != 0 ]; then
echo "Attention probleme lors des dumps de cette nuit ! Répertoire de destination $OLDESTDIR3307 des dumps impossible à créer" > $LOGDIR/sqldump.error
color="red"
Send "${color}" "$(cat $LOGDIR/sqldump.error)"
exit 1
fi
fi

for option in $DUMP_ALLOPT
do
if [ `$BIN_MYSQLDUMP --help |grep -c -- --$option` -gt 0 ];
then
DUMP_OPT="$DUMP_OPT --$option"
fi
done

# Purge des anciens dumps :
$BIN_TMPWATCH $RETENTION_TIME $OLDESTDIR3306
$BIN_TMPWATCH $RETENTION_TIME $OLDESTDIR3307

# Deplacement du dump de la veille dans OLD :
$BIN_MV $DESTDIR3306/* $OLDESTDIR3306/
$BIN_MV $DESTDIR3307/* $OLDESTDIR3307/

BASE_LIST3306="`$BIN_MYSQL --port 3306 --socket=/tmp/mysql.sock -p$DBPASS3306 -BN -e \"show databases\"`"
if [ "$BASE_LIST3306" = "" -o $? != 0 ]; then
echo "Attention probleme lors des dumps de cette nuit ! Aucune base presente ou erreur dans la command de dump" > $LOGDIR/sqldump.error
color="red"
Send "${color}" "$(cat $LOGDIR/sqldump.error)"
exit 1
fi

BASE_LIST3307="`$BIN_MYSQL --port 3307 --socket=/tmp/mysql-3307.sock -p$DBPASS3307 -BN -e \"show databases\"`"
if [ "$BASE_LIST3307" = "" -o $? != 0 ]; then
echo "Attention probleme lors des dumps de cette nuit ! Aucune base presente ou erreur dans la command de dump" > $LOGDIR/sqldump.error
color="red"
Send "${color}" "$(cat $LOGDIR/sqldump.error)"
exit 1
fi

case $TYPE_BACKUP in
tables)
for dbname in $BASE_LIST3306 ; do
TABLE_LIST="`$BIN_MYSQL --port 3306 --socket=/tmp/mysql.sock -p$DBPASS3306 -BN -e \"show tables\" $dbname`"
if [ $? != 0 ]; then
echo "Attention probleme lors des dumps de cette nuit ! Erreur dans la commande de dump" > $LOGDIR/sqldump.error
color="red"
Send "${color}" "$(cat $LOGDIR/sqldump.error)"
exit 1
fi
for tablename in $TABLE_LIST; do
echo $BIN_MYSQLDUMP --port 3306 --socket=/tmp/mysql.sock $DUMP_OPT --skip-lock-tables --user=$DBUSER $dbname $tablename
$BIN_MYSQLDUMP --port 3306 --socket=/tmp/mysql.sock $DUMP_OPT --skip-lock-tables --user=$DBUSER --password=$DBPASS3306 $dbname $tablename 2> $LOGDIR/sqldump.error | gzip -c > $DESTDIR3306/$dbname.$tablename.$DATE.sql.gz
#### !! si mysqldump renvoie UNE seule fois une erreur, le process complet s'arrete et renvoie rouge
if [ $? -ne 0 -o -s $LOGDIR/sqldump.error ]; then
echo "Attention probleme lors des dumps de cette nuit!"
color="red"
Send "${color}" "$(cat $LOGDIR/sqldump.error)"
exit 1
fi
done
done

for dbname in $BASE_LIST3307 ; do
TABLE_LIST2="`$BIN_MYSQL --port 3307 --socket=/tmp/mysql-3307.sock -p$DBPASS3307 -BN -e \"show tables\" $dbname`"
if [ $? != 0 ]; then
echo "Attention probleme lors des dumps de cette nuit ! Erreur dans la commande de dump" > $LOGDIR/sqldump.error
color="red"
Send "${color}" "$(cat $LOGDIR/sqldump.error)"
exit 1
fi
for tablename in $TABLE_LIST2; do
echo $BIN_MYSQLDUMP --port 3307 --socket=/tmp/mysql-3307.sock $DUMP_OPT --skip-lock-tables --user=$DBUSER $dbname $tablename
$BIN_MYSQLDUMP --port 3307 --socket=/tmp/mysql3307.sock $DUMP_OPT --skip-lock-tables --user=$DBUSER --password=$DBPASS3307 $dbname $tablename 2> $LOGDIR/sqldump.error | gzip -c > $DESTDIR3307/$dbname.$tablename.$DATE.sql.gz
#### !! si mysqldump renvoie UNE seule fois une erreur, le process complet s'arrete et renvoie rouge
if [ $? -ne 0 -o -s $LOGDIR/sqldump.error ]; then
echo "Attention probleme lors des dumps de cette nuit!"
color="red"
Send "${color}" "$(cat $LOGDIR/sqldump.error)"
exit 1
fi
done
done
;;

bases)
for dbname in $BASE_LIST3306 ; do
echo $BIN_MYSQLDUMP --port 3306 --socket=/tmp/mysql.sock $DUMP_OPT --skip-lock-tables --user=$DBUSER $dbname
$BIN_MYSQLDUMP --port 3306 --socket=/tmp/mysql.sock $DUMP_OPT --skip-lock-tables --user=$DBUSER --password=$DBPASS3306 $dbname 2> $LOGDIR/sqldump.error | gzip -c > $DESTDIR3306/$dbname.$DATE.sql.gz
## !! si mysqldump renvoie UNE seule fois une erreur, le process complet s'arrete et renvoie rouge
if [ $? -ne 0 -o -s $LOGDIR/sqldump.error ]; then
echo "Attention probleme lors des dumps de cette nuit!"
color="red"
Send "${color}" "$(cat $LOGDIR/sqldump.error)"
exit 1
fi
done
for dbname in $BASE_LIST3307 ; do
echo $BIN_MYSQLDUMP --port 3307 --socket=/tmp/mysql-3307.sock $DUMP_OPT --skip-lock-tables --user=$DBUSER $dbname
$BIN_MYSQLDUMP --port 3307 --socket=/tmp/mysql-3307.sock $DUMP_OPT --skip-lock-tables --user=$DBUSER --password=$DBPASS3307 $dbname 2> $LOGDIR/sqldump.error | gzip -c > $DESTDIR3307/$dbname.$DATE.sql.gz
## !! si mysqldump renvoie UNE seule fois une erreur, le process complet s'arrete et renvoie rouge
if [ $? -ne 0 -o -s $LOGDIR/sqldump.error ]; then
echo "Attention probleme lors des dumps de cette nuit!"
color="red"
Send "${color}" "$(cat $LOGDIR/sqldump.error)"
exit 1
fi
done
;;

*)
echo "Attention probleme lors des dumps de cette nuit. Type de backup non reconnu, merci de modifier la variable TYPE_BACKUP" > $LOGDIR/sqldump.error
color="red"
Send "${color}" "$(cat $LOGDIR/sqldump.error)"
exit 1
;;
esac

if [ `find $DESTDIR -type f | wc -l` -gt 0 -a "`du -ks $DESTDIR | awk {'print $1'}`" -gt 4 ] ;
then echo "dumps des bases OK"
else echo "Attention probleme lors des dumps de cette nuit. Il n'y aucune base backupée ou leur taille est de zero" >> $LOGDIR/sqldump.error
color="red"
Send "${color}" "$(cat $LOGDIR/sqldump.error)"
exit 1
fi

echo "dumps des bases OK"
echo "`ls -lh $DESTDIR3306 $DESTDIR3307`"
color="green"
Send "${color}" "$(cat $LOGDIR/sqldump.ok)"
exit 0
</pre>
[[Catégorie:Script]]

Mysql dump multi instance en bash - Historique des versions

217.174.199.129 le 12 juillet 2013 à 08:53

217.174.199.129 le 31 janvier 2013 à 13:50

217.174.199.129 : Page créée avec « Ce script de dump (agarik) est avancé, avec une rétention et purge des dumps. Il permet via des variables de backuper par tables ou bases, tout en verifiant que les opti... »