itsource

mysqldump를 사용하여 특정 데이터베이스 테이블을 건너뛰는 방법

mycopycode 2022. 9. 6. 22:33
반응형

mysqldump를 사용하여 특정 데이터베이스 테이블을 건너뛰는 방법

mysqldump 명령에서 특정 테이블을 제한하는 방법이 있습니까?

예를 들어 다음 구문을 사용하여 table1과 table2만 덤프합니다.

mysqldump -u username -p database table1 table2 > database.sql

하지만 table1과 table2를 제외한 모든 테이블을 덤프하는 비슷한 방법이 있을까요?mysqldump 문서에서는 아무것도 찾을 수 없습니다.모든 테이블 이름을 지정하는 방법밖에 없습니까?

--ignore-table 옵션을 사용할 수 있습니다.그래서 네가 할 수 있는

mysqldump -u USERNAME -pPASSWORD DATABASE --ignore-table=DATABASE.table1 > database.sql

뒤에 공백이 없습니다.-p(이것은 오타가 아닙니다).

여러 테이블을 무시하려면 이 옵션을 여러 번 사용하십시오. 이 옵션은 버전 5.0 이상부터 작동하도록 문서화되어 있습니다.

여러 테이블을 무시하는 대체 방법이 필요한 경우 다음과 같은 스크립트를 사용할 수 있습니다.

#!/bin/bash
PASSWORD=XXXXXX
HOST=XXXXXX
USER=XXXXXX
DATABASE=databasename
DB_FILE=dump.sql
EXCLUDED_TABLES=(
table1
table2
table3
table4
tableN   
)
 
IGNORED_TABLES_STRING=''
for TABLE in "${EXCLUDED_TABLES[@]}"
do :
   IGNORED_TABLES_STRING+=" --ignore-table=${DATABASE}.${TABLE}"
done

echo "Dump structure"
mysqldump --host=${HOST} --user=${USER} --password=${PASSWORD} --single-transaction --no-data --routines ${DATABASE} > ${DB_FILE}

echo "Dump content"
mysqldump --host=${HOST} --user=${USER} --password=${PASSWORD} ${DATABASE} --no-create-info --skip-triggers ${IGNORED_TABLES_STRING} >> ${DB_FILE}

@Brian-Fisher의 답변과 이 투고에 대한 일부 사람들의 코멘트에 따라 제 데이터베이스에는 많은 (불필요한) 테이블이 있기 때문에 복사할 때는 내용을 생략하고 싶었지만 구조는 그대로 유지했습니다.

mysqldump -h <host> -u <username> -p <database> --no-data > db.sql
mysqldump -h <host> -u <username> -p <database> --no-create-info --ignore-table=schema.table1 --ignore-table=schema.table2 >> db.sql

그 결과 파일은 구조적으로 건전하지만 덤프된 데이터는 9GB가 아니라 500MB까지로 되어 있어 훨씬 좋습니다.이제 9GB의 데이터를 조작하거나 디스크 공간이 부족할 염려 없이 테스트 목적으로 파일을 다른 데이터베이스로 가져올 수 있습니다.

여러 테이블을 무시하는 또 다른 예

/usr/bin/mysqldump -uUSER -pPASS --ignore-table={db_test.test1,db_test.test3} db_test> db_test.sql

사용.--ignore-table다음과 같은 구문을 사용하여 테이블 배열을 만듭니다.

--ignore-table={db_test.table1,db_test.table3,db_test.table4}

추가:

데이터베이스 Import

 # if file is .sql
 mysql -uUSER  -pPASS db_test < backup_database.sql
 # if file is .sql.gz
 gzip -dc < backup_database.sql.gz | mysql -uUSER -pPASSWORD db_test

테이블을 무시하고 .sql.gz로 내보내 공간을 절약하는 간단한 스크립트

#!/bin/bash

#tables to ignore
_TIGNORE=(
my_database.table1
my_database.table2
my_database.tablex
)

#create text for ignore tables
_TDELIMITED="$(IFS=" "; echo "${_TIGNORE[*]/#/--ignore-table=}")"

#don't forget to include user and password
/usr/bin/mysqldump -uUSER -pPASSWORD --events ${_TDELIMITED} --databases my_database | gzip -v > backup_database.sql.gz

도움이 되는 정보가 포함된 링크

주의: mysql Ver 14.14 Distributed 5.55를 사용하여 ubuntu 서버에서 테스트 완료

여러 데이터베이스의 경우:

mysqldump -u user -p --ignore-table=db1.tbl1 --ignore-table=db2.tbl1 --databases db1 db2 ..

일부 테이블 데이터를 제외하지만 테이블 구조는 제외합니다.방법은 다음과 같습니다.

데이터 없이 모든 테이블의 데이터베이스 구조를 덤프합니다.

mysqldump -u user -p --no-data database > database_structure.sql

그런 다음 제외된 테이블을 제외한 데이터를 사용하여 데이터베이스를 덤프하고 구조를 덤프하지 마십시오.

mysqldump -u user -p --no-create-info \
    --ignore-table=database.table1 \
    --ignore-table=database.table2 database > database_data.sql

그런 다음 새 데이터베이스에 로드하려면 다음 절차를 수행합니다.

mysql -u user -p newdatabase < database_structure.sql
mysql -u user -p newdatabase < database_data.sql

를 사용할 수 있습니다.mysqlpump을 지휘하다

--exclude-tables=name

명령어를 입력합니다.제외할 테이블 목록을 쉼표로 구분하여 지정합니다.

mysqlpump 구문은 mysqldump와 매우 유사하지만 성능이 훨씬 향상되었습니다.exclude 옵션 사용 방법에 대한 자세한 내용은http://https://dev.mysql.com/doc/refman/5.7/en/mysqlpump.html#mysqlpump-filtering 를 참조해 주세요.

일반적으로 큰 테이블을 처리할 시간이 없거나 시간이 없을 때 이 기능을 사용해야 합니다.mysqldump --여기서 mysqldump는 mysqldump입니다.를 들어, 「」라고 하는 것은,mysqldump -uuser -ppass database --where="1 = 1 LIMIT 500000" > resultset.sql.

모든 테이블이 포함된 모든 데이터베이스를 덤프하지만 특정 테이블은 건너뜁니다.

on github : https://github.com/rubo77/mysql-backup.sh/blob/master/mysql-backup.sh

#!/bin/bash
# mysql-backup.sh

if [ -z "$1" ] ; then
  echo
  echo "ERROR: root password Parameter missing."
  exit
fi
DB_host=localhost
MYSQL_USER=root
MYSQL_PASS=$1
MYSQL_CONN="-u${MYSQL_USER} -p${MYSQL_PASS}"
#MYSQL_CONN=""

BACKUP_DIR=/backup/mysql/

mkdir $BACKUP_DIR -p

MYSQLPATH=/var/lib/mysql/

IGNORE="database1.table1, database1.table2, database2.table1,"

# strpos $1 $2 [$3]
# strpos haystack needle [optional offset of an input string]
strpos()
{
    local str=${1}
    local offset=${3}
    if [ -n "${offset}" ]; then
        str=`substr "${str}" ${offset}`
    else
        offset=0
    fi
    str=${str/${2}*/}
    if [ "${#str}" -eq "${#1}" ]; then
        return 0
    fi
    echo $((${#str}+${offset}))
}

cd $MYSQLPATH
for i in */; do
    if [ $i != 'performance_schema/' ] ; then 
    DB=`basename "$i"` 
    #echo "backup $DB->$BACKUP_DIR$DB.sql.lzo"
    mysqlcheck "$DB" $MYSQL_CONN --silent --auto-repair >/tmp/tmp_grep_mysql-backup
    grep -E -B1 "note|warning|support|auto_increment|required|locks" /tmp/tmp_grep_mysql-backup>/tmp/tmp_grep_mysql-backup_not
    grep -v "$(cat /tmp/tmp_grep_mysql-backup_not)" /tmp/tmp_grep_mysql-backup

    tbl_count=0
    for t in $(mysql -NBA -h $DB_host $MYSQL_CONN -D $DB -e 'show tables') 
    do
      found=$(strpos "$IGNORE" "$DB"."$t,")
      if [ "$found" == "" ] ; then 
        echo "DUMPING TABLE: $DB.$t"
        mysqldump -h $DB_host $MYSQL_CONN $DB $t --events --skip-lock-tables | lzop -3 -f -o $BACKUP_DIR/$DB.$t.sql.lzo
        tbl_count=$(( tbl_count + 1 ))
      fi
    done
    echo "$tbl_count tables dumped from database '$DB' into dir=$BACKUP_DIR"
    fi
done

https://stackoverflow.com/a/17016410/1069083의 약간의 도움을 받아

보다 고속의 lzop을 사용하고 있습니다.http://pokecraft.first-world.info/wiki/Quick_Benchmark:_Gzip_vs_Bzip2_vs_LZMA_vs_XZ_vs_LZ4_vs_LZO 를 참조해 주세요.

나는 Rubo77의 솔루션이 마음에 든다. 나는 Paul의 솔루션을 수정하기 전에 그것을 본 적이 없다.이것은 원하지 않는 테이블을 제외한 단일 데이터베이스를 백업합니다.그런 다음 압축을 풀고 8일 이상 경과된 파일을 삭제합니다.1일 1회 풀(로그 테이블 제외)을 실행하는 버전과 몇 개의 cron 작업을 사용하여 1시간마다 가장 많이 변경되는 가장 중요한 테이블을 백업하는 버전 중 하나를 사용합니다.

#!/bin/sh
PASSWORD=XXXX
HOST=127.0.0.1
USER=root
DATABASE=MyFavoriteDB

now="$(date +'%d_%m_%Y_%H_%M')"
filename="${DATABASE}_db_backup_$now"
backupfolder="/opt/backups/mysql"
DB_FILE="$backupfolder/$filename"
logfile="$backupfolder/"backup_log_"$(date +'%Y_%m')".txt

EXCLUDED_TABLES=(
logs
)
IGNORED_TABLES_STRING=''
for TABLE in "${EXCLUDED_TABLES[@]}"
do :
   IGNORED_TABLES_STRING+=" --ignore-table=${DATABASE}.${TABLE}"
done

echo "Dump structure started at $(date +'%d-%m-%Y %H:%M:%S')" >> "$logfile"
mysqldump --host=${HOST} --user=${USER} --password=${PASSWORD} --single-transaction --no-data --routines ${DATABASE}  > ${DB_FILE} 
echo "Dump structure finished at $(date +'%d-%m-%Y %H:%M:%S')" >> "$logfile"
echo "Dump content"
mysqldump --host=${HOST} --user=${USER} --password=${PASSWORD} ${DATABASE} --no-create-info --skip-triggers ${IGNORED_TABLES_STRING} >> ${DB_FILE}
gzip ${DB_FILE}

find "$backupfolder" -name ${DATABASE}_db_backup_* -mtime +8 -exec rm {} \;
echo "old files deleted" >> "$logfile"
echo "operation finished at $(date +'%d-%m-%Y %H:%M:%S')" >> "$logfile"
echo "*****************" >> "$logfile"
exit 0

이 스크립트는 완전성을 위해 모든 뷰를 제외하고 데이터베이스에서 백업을 가져오는 데 한 줄짜리 스크립트로 사용할 수 있습니다.DB 이름은 종업원으로 간주됩니다.

ignore=$(mysql --login-path=root1 INFORMATION_SCHEMA \
    --skip-column-names --batch \
    -e "select 
          group_concat(
            concat('--ignore-table=', table_schema, '.', table_name) SEPARATOR ' '
          ) 
        from tables 
        where table_type = 'VIEW' and table_schema = 'employees'")

mysqldump --login-path=root1 --column-statistics=0 --no-data employees $ignore > "./backups/som_file.sql"   

이치노으로는 「」를 사용합니다.group_concat ★★★★★★★★★★★★★★★★★」concat원하는 문자열 또는 셸 명령어를 거의 생성할 수 있습니다.

mysqldump를 사용하여 특정 테이블 건너뛰기

일부 데이터베이스에 테스트 테이블이 있고 이러한 테이블을 백업에서 제외할 경우 -- exclude-tables 옵션을 사용하여 모든 데이터베이스에 걸쳐 이름 테스트가 있는 테이블을 제외할 수 있습니다.

shell> mysqldump --exclude-tables=test --resultfile=backup_excluding_test.sql

언급URL : https://stackoverflow.com/questions/425158/how-to-skip-certain-database-tables-with-mysqldump

반응형