it-roy-ru.com

автоматически выгружать все таблицы mysql в отдельные файлы?

Я хотел бы получить дампы каждой таблицы MySQL в отдельных файлах. В руководстве указано, что синтаксис этого 

mysqldump [options] db_name [tbl_name ...]

Что указывает на то, что вы знаете имена таблиц до этого. Я мог бы настроить скрипт, который теперь знает каждое имя таблицы, но, скажем, я добавляю новую таблицу в будущем и забываю обновить скрипт дампа. Тогда мне не хватает дампов для одного или нескольких столов. 

Есть ли способ автоматически выгружать каждую существующую таблицу в отдельный файл? Или я собираюсь сделать сценарий-фу; запросить базу данных, получить все имена таблиц и вывести их по имени.

Если я пойду по пути script-fu, какие языки сценариев могут получить доступ к базе данных mysql?

56
user151841

Программа командной строки mysqldump делает это для вас - хотя документы очень неясны по этому поводу.

Стоит отметить, что ~/output/dir должен быть доступен для записи пользователю, которому принадлежит mysqld. В Mac OS X:

Sudo chown -R _mysqld:_mysqld ~/output/dir
mysqldump --user=dbuser --password --tab=~/output/dir dbname

После выполнения описанного выше у вас будет один файл tablename.sql, содержащий схему каждой таблицы (оператор создания таблицы) и файл tablename.txt, содержащий данные.

Если вы хотите создать дамп только со схемой, добавьте флаг --no-data:

mysqldump --user=dbuser --password --no-data --tab=~/output/dir dbname
54
Salient Digital

Вот скрипт, который выводит данные таблицы в виде команд SQL в отдельные сжатые файлы. Он не требует присутствия на хосте сервера MySQL, не кодирует пароль в скрипте жестко и предназначен только для конкретной базы данных, а не для всех баз данных на сервере:

#!/bin/bash

# dump-tables-mysql.sh
# Descr: Dump MySQL table data into separate SQL files for a specified database.
# Usage: Run without args for usage info.
# Author: @Trutane
# Ref: http://stackoverflow.com/q/3669121/138325
# Notes:
#  * Script will Prompt for password for db access.
#  * Output files are compressed and saved in the current working dir, unless DIR is
#    specified on command-line.

[ $# -lt 3 ] && echo "Usage: $(basename $0) <DB_Host> <DB_USER> <DB_NAME> [<DIR>]" && exit 1

DB_Host=$1
DB_user=$2
DB=$3
DIR=$4

[ -n "$DIR" ] || DIR=.
test -d $DIR || mkdir -p $DIR

echo -n "DB password: "
read -s DB_pass
echo
echo "Dumping tables into separate SQL command files for database '$DB' into dir=$DIR"

tbl_count=0

for t in $(mysql -NBA -h $DB_Host -u $DB_user -p$DB_pass -D $DB -e 'show tables') 
do 
    echo "DUMPING TABLE: $DB.$t"
    mysqldump -h $DB_Host -u $DB_user -p$DB_pass $DB $t | gzip > $DIR/$DB.$t.sql.gz
    tbl_count=$(( tbl_count + 1 ))
done

echo "$tbl_count tables dumped from database '$DB' into dir=$DIR"
53
Trutane

Вы можете сделать это:

  1. Получить список баз данных в MySQL
  2. сбросить каждую базу данных с помощью mysqldump
# Optional variables for a backup script
MYSQL_USER="root"
MYSQL_PASS="something"
BACKUP_DIR=/srv/backup/$(date +%Y-%m-%dT%H_%M_%S);
test -d "$BACKUP_DIR" || mkdir -p "$BACKUP_DIR"
# Get the database list, exclude information_schema
for db in $(mysql -B -s -u $MYSQL_USER --password=$MYSQL_PASS -e 'show databases' | grep -v information_schema)
do
  # dump each database in a separate file
  mysqldump -u $MYSQL_USER --password=$MYSQL_PASS "$db" | gzip > "$BACKUP_DIR/$db.sql.gz"
done
17
Elias Torres Arroyo

Вот соответствующий импорт.

#!/bin/bash

# import-files-mysql.sh
# Descr: Import separate SQL files for a specified database.
# Usage: Run without args for usage info.
# Author: Will Rubel
# Notes:
#  * Script will Prompt for password for db access.

[ $# -lt 3 ] && echo "Usage: $(basename $0) <DB_Host> <DB_USER> <DB_NAME> [<DIR>]" && exit 1

DB_Host=$1
DB_user=$2
DB=$3
DIR=$4

DIR=$DIR/*


echo -n "DB password: "
read -s DB_pass
echo
echo "Importing separate SQL command files for database '$DB' into '$DB'"

file_count=0


for f in $DIR

do 
    echo "IMPORTING FILE: $f"

    gunzip -c $f | mysql -h $DB_Host -u $DB_user -p$DB_pass $DB

    (( file_count++ ))
done

echo "$file_count files importing to database '$DB'"
5
WillRubel
#!/bin/bash

for i in $(mysql -uUser -pPASSWORD DATABASE -e "show tables;"|grep -v Tables_in_);do mysqldump -uUSER -pPASSWORD DATABASE $i > /backup/dir/$i".sql";done

tar -cjf "backup_mysql_"$(date +'%Y%m%d')".tar.bz2" /backup/dir/*.sql
2
djadk

Похоже, все здесь забыли о autocommit=0;SET unique_checks=0;SET foreign_key_checks=0;, что должно ускорить процесс импорта ...

#!/bin/bash
MYSQL_USER="USER"
MYSQL_PASS="PASS"

if [ -z "$1" ]
  then
    echo "Dumping all DB ... in separate files"
    for I in $(mysql -u $MYSQL_USER --password=$MYSQL_PASS -e 'show databases' -s --skip-column-names); 
    do 
      echo "SET autocommit=0;SET unique_checks=0;SET foreign_key_checks=0;" > "$I.sql"
      mysqldump -u $MYSQL_USER --password=$MYSQL_PASS $I >> "$I.sql"; 
      echo "SET autocommit=1;SET unique_checks=1;SET foreign_key_checks=1;commit;" >> "$I.sql"
      gzip "$I.sql"
    done
    echo "END."
else
      echo "Dumping $1 ..."
      echo "SET autocommit=0;SET unique_checks=0;SET foreign_key_checks=0;" > "$1.sql"
      mysqldump -u $MYSQL_USER --password=$MYSQL_PASS $1 >> "$1.sql"; 
      echo "SET autocommit=1;SET unique_checks=1;SET foreign_key_checks=1;commit;" >> "$1.sql"
      gzip "$1.sql"
fi
1
WonderLand

Если вы хотите сбросить все таблицы из всех баз данных, просто объедините ответ Элиаса Торреса Арройо и Трутана: а если вы не хотите вводить свой пароль на терминале, просто сохраните свой пароль в дополнительном конфигурационном файле (chmod 0600) - см. Mysqldump запущен cron и паролем безопасности

#!/usr/bin/env bash

# this file
# a) gets all databases from mysql
# b) gets all tables from all databases in a)
# c) creates subfolders for every database in a)
# d) dumps every table from b) in a single file

    # this is a mixture of scripts from Trutane (http://stackoverflow.com/q/3669121/138325) 
    # and Elias Torres Arroyo (https://stackoverflow.com/a/14711298/8398149)

[ $# -lt 3 ] && echo "Usage: $(basename $0) <DB_Host> <DB_USER> <DIR>" && exit 1

DB_Host=$1
DB_user=$2
BACKUP_DIR=$3/$(date +%Y-%m-%dT%H_%M_%S);

test -d "$BACKUP_DIR" || mkdir -p "$BACKUP_DIR"
# Get the database list, exclude information_schema
database_count=0
tbl_count=0

for db in $(mysql --defaults-extra-file=/yourfile/config.cnf -B -s -u $DB_user -e 'show databases' | grep -v information_schema)
do
    # dump each database in a separate file
    (( database_count++ ))
    DIR=$BACKUP_DIR/$db
    [ -n "$DIR" ] || DIR=.

    test -d $DIR || mkdir -p $DIR

    echo
    echo "Dumping tables into separate SQL command files for database '$db' into dir=$DIR"

    for t in $(mysql --defaults-extra-file=/yourfile/config.cnf -NBA -h $DB_Host -u $DB_user -D $db -e 'show tables')
    do
        echo "DUMPING TABLE: $db.$t"
        mysqldump --defaults-extra-file=/yourfile/config.cnf -h $DB_Host -u $DB_user $db $t  > $DIR/$db.$t.sql
        tbl_count=$(( tbl_count + 1 ))
    done

    echo "Database $db is finished"

done


echo "Backup completed"
0
sneaky

Я не мастер Bash, но я бы просто сделал это с помощью сценария Bash. Не обращая внимания на MySQL, зная каталог данных и имя базы данных, вы можете просто просмотреть все файлы .frm (по одному на каждую таблицу в этом каталоге db /) и найти список таблиц. 

Я уверен, что есть способы сделать его более приятным и принимать аргументы или еще много чего, но это хорошо сработало для меня.

tables_in_a_db_to_sql.sh

#!/bin/bash

database="this_is_my_database"
datadir="/var/lib/mysql/"
datadir_escaped="\/var\/lib\/mysql\/"

all_tables=($(ls $datadir$database/*.frm | sed s/"$datadir_escaped$database\/"/""/g | sed s/.frm//g))

for t in "${all_tables[@]}"; do
        outfile=$database.$t.sql
        echo "-- backing up $t to $outfile"
        echo "mysqldump [options] $database $t > $outfile"
        # mysqldump [options] $database $t > $outfile
done

Заполните [опции] и желаемое соглашение об использовании файла, как вам нужно, и раскомментируйте последнюю строку mysqldump.

0
Riedsio