ข้ามบางตารางด้วย mysqldump


558

มีวิธี จำกัด ตารางบางอย่างจากคำสั่ง mysqldump หรือไม่?

ตัวอย่างเช่นฉันจะใช้ไวยากรณ์ต่อไปนี้เพื่อถ่ายโอนข้อมูลเฉพาะ table1 และ table2:

mysqldump -u username -p database table1 table2 > database.sql

แต่มีวิธีคล้ายกันในการดัมพ์ตารางทั้งหมดยกเว้น table1 และ table2 หรือไม่ ฉันไม่พบอะไรในเอกสาร mysqldump ดังนั้น brute-force (การระบุชื่อตารางทั้งหมด) เป็นวิธีเดียวที่จะไปได้หรือไม่

คำตอบ:


940

คุณสามารถใช้ตัวเลือก--ignore-table ดังนั้นคุณสามารถทำได้

mysqldump -u USERNAME -pPASSWORD DATABASE --ignore-table=DATABASE.table1 > database.sql

ไม่มีช่องว่างหลังจาก-p(นี่ไม่ใช่การพิมพ์ผิด)

หากคุณต้องการละเว้นหลายตารางคุณสามารถใช้สคริปต์แบบนี้ได้

#!/bin/bash
PASSWORD=XXXXXX
HOST=XXXXXX
USER=XXXXXX
DATABASE=databasename
DB_FILE=dump.sql
EXCLUDED_TABLES=(
table1
table2
table3
table4
tableN   
)

IGNORED_TABLES_STRING=''
for TABLE in "${EXCLUDED_TABLES[@]}"
do :
   IGNORED_TABLES_STRING+=" --ignore-table=${DATABASE}.${TABLE}"
done

echo "Dump structure"
mysqldump --host=${HOST} --user=${USER} --password=${PASSWORD} --single-transaction --no-data --routines ${DATABASE} > ${DB_FILE}

echo "Dump content"
mysqldump --host=${HOST} --user=${USER} --password=${PASSWORD} ${DATABASE} --no-create-info --skip-triggers ${IGNORED_TABLES_STRING} >> ${DB_FILE}

4
ขอบคุณ! ทำงานได้อย่างสมบูรณ์แบบ ... ฉันไม่รู้ว่าจะทำอย่างไร
Zac

20
มีวิธีใดบ้างที่จะข้ามเนื้อหาตาราง? โครงสร้างที่ฉันต้องการสำรองข้อมูล
Andres SK

5
คุณสามารถใช้ตัวเลือก --no-data = true แต่ฉันไม่รู้ว่าคุณสามารถทำได้ในระดับต่อตารางหรือไม่
Brian Fisher

60
หากชื่อฐานข้อมูลไม่ได้ถูกตั้งค่าสำหรับแต่ละ --ignore-table คุณจะได้รับข้อความแสดงข้อผิดพลาด 'การใช้ตัวเลือก --ignore-table = <database>. <table>' ข้อผิดพลาด ตรวจสอบให้แน่ใจว่าคุณประกาศฐานข้อมูลเสมอ!
supajb

26
หากคุณต้องการละเว้นข้อมูลบางตาราง แต่ยังคงทิ้งโครงสร้างของพวกเขาคุณสามารถเรียกใช้ mysqldump อีกครั้งสำหรับตารางเหล่านั้นและเชื่อมต่อกับข้อมูลสำรองที่คุณเพิ่งสร้างขึ้น
carpii

119

การสร้างคำตอบจาก @ Brian-Fisher และตอบความคิดเห็นของบางคนในโพสต์นี้ฉันมีตารางจำนวนมาก (และไม่จำเป็น) ในฐานข้อมูลของฉันดังนั้นฉันจึงอยากข้ามเนื้อหาเมื่อคัดลอก แต่เก็บโครงสร้างไว้ :

mysqldump -h <host> -u <username> -p <schema> --no-data > db-structure.sql
mysqldump -h <host> -u <username> -p <schema> --no-create-info --ignore-table=schema.table1 --ignore-table=schema.table2 > db-data.sql

ไฟล์สองไฟล์ที่ได้นั้นมีโครงสร้างเสียง แต่ข้อมูลที่ถูกทิ้งอยู่ในขณะนี้ ~ 500MB มากกว่า 9GB ซึ่งดีกว่ามากสำหรับฉัน ตอนนี้ฉันสามารถนำเข้าไฟล์ทั้งสองนี้ไปยังฐานข้อมูลอื่นเพื่อการทดสอบโดยไม่ต้องกังวลกับการจัดการข้อมูล 9GB หรือพื้นที่ดิสก์หมด


ทดสอบและใช้งานภายใต้ MySQL 5.5.43 (สำหรับ debian-linux-gnu (x86_64)) ขอบคุณ
Abdel

เรียบง่ายและสง่างาม ทางออกที่ดี
Greg Glockner

4
ทางออกที่ดี ฉันต้องเพิ่ม --skip-triggers ในคำสั่งที่สองเพื่อให้การถ่ายโอนข้อมูลทำงานได้ในภายหลัง (สมมติว่าคุณมีทริกเกอร์) แต่อย่างอื่น: สมบูรณ์แบบ
Rainer Mohr

ขอบคุณมันใช้งานได้และมีประโยชน์มาก
หิมาลัย Garg

59

สำหรับหลายฐานข้อมูล:

mysqldump -u user -p --ignore-table=db1.tbl1 --ignore-table=db2.tbl1 --databases db1 db2 ..

5
มีการตอบกระทู้นี้แล้วว่าดีกว่า
alxgb

19
ถูกต้อง แต่วิธีนี้ใช้ได้กับหลายฐานข้อมูล
อเล็กซ์

สิ่งที่น่าสนใจ - ฉันคิดก่อนmysqldและmysqldumpจะเป็นโปรแกรมเดียวกัน
Martin Thoma

4
นั่นคือสิ่งที่ฉันกำลังมองหา - คำตอบเดียวกับคำตอบซึ่งไม่ได้บังคับให้ฉันอ่านบางอย่างสำหรับ 2-3 นาที: P
jebbie

43

อีกตัวอย่างหนึ่งสำหรับการเพิกเฉยหลายตาราง

/usr/bin/mysqldump -uUSER -pPASS --ignore-table={db_test.test1,db_test.test3} db_test> db_test.sql

การใช้--ignore-tableและสร้างอาร์เรย์ของตารางที่มีไวยากรณ์เช่นdatabase.table

--ignore-table={db_test.table1,db_test.table3,db_test.table4}

ลิงค์กับข้อมูลที่จะช่วยคุณ

บีบอัดเอาท์พุท mysqldump

หมายเหตุ: ทดสอบในเซิร์ฟเวอร์ ubuntu พร้อม mysql Ver 14.14 Distrib 5.5.55

นำเข้าฐานข้อมูล

 mysql -uUSER  -pPASS db_test < db_test.sql

สคริปต์อย่างง่ายเพื่อละเว้นตาราง

#!/bin/bash

#tables to ignore
_TIGNORE=(
my_database.table1
my_database.table2
my_database.tablex
)

#create text for ignore tables
_TDELIMITED="$(IFS=" "; echo "${_TIGNORE[*]/#/--ignore-table=}")"

#don't forget to include user and password
/usr/bin/mysqldump -uUSER -pPASSWORD --events ${_TDELIMITED} --databases my_database | gzip -v > backup_database.sql.gz

วิธีที่ยอดเยี่ยมในการหลีกเลี่ยงการใช้สคริปต์เมื่อคุณต้องการละเว้นหลายตาราง คำตอบนั้นควรได้รับเพิ่มเติม "+1"
svfat

คำตอบที่สมบูรณ์แบบ !!! +1 ทำให้วันของฉัน :)
SagarPPanchal

7

หากต้องการยกเว้นบางตารางข้อมูลแต่ไม่ตารางโครงสร้าง นี่คือวิธีที่ฉันทำ:

ดัมพ์โครงสร้างฐานข้อมูลของตารางทั้งหมดโดยไม่มีข้อมูลใด ๆ :

mysqldump -u user -p --no-data database > database_structure.sql

จากนั้นดัมพ์ฐานข้อมูลด้วยข้อมูลยกเว้นตารางที่ถูกแยกออกและอย่าดัมพ์โครงสร้าง:

mysqldump -u user -p --no-create-info \
    --ignore-table=database.table1 \
    --ignore-table=database.table2 database > database_data.sql

จากนั้นโหลดลงในฐานข้อมูลใหม่:

mysql -u user -p newdatabase < database_structure.sql
mysql -u user -p newdatabase < database_data.sql

1

คุณสามารถใช้mysqlpumpคำสั่งกับ

--exclude-tables=name

คำสั่ง มันระบุรายการของตารางที่คั่นด้วยเครื่องหมายจุลภาคเพื่อแยก

ไวยากรณ์ของ mysqlpump นั้นคล้ายคลึงกับ mysqldump มาก แต่ก็มีประสิทธิภาพมากกว่า ข้อมูลเพิ่มเติมเกี่ยวกับวิธีใช้ตัวเลือกแยกที่คุณสามารถอ่านได้ที่นี่: https://dev.mysql.com/doc/refman/5.7/th/mysqlpump.html#mysqlpump-filtering


0

ดัมพ์ฐานข้อมูลทั้งหมดด้วยตารางทั้งหมด แต่ข้ามบางตาราง

บน github: https://github.com/rubo77/mysql-backup.sh/blob/master/mysql-backup.sh

#!/bin/bash
# mysql-backup.sh

if [ -z "$1" ] ; then
  echo
  echo "ERROR: root password Parameter missing."
  exit
fi
DB_host=localhost
MYSQL_USER=root
MYSQL_PASS=$1
MYSQL_CONN="-u${MYSQL_USER} -p${MYSQL_PASS}"
#MYSQL_CONN=""

BACKUP_DIR=/backup/mysql/

mkdir $BACKUP_DIR -p

MYSQLPATH=/var/lib/mysql/

IGNORE="database1.table1, database1.table2, database2.table1,"

# strpos $1 $2 [$3]
# strpos haystack needle [optional offset of an input string]
strpos()
{
    local str=${1}
    local offset=${3}
    if [ -n "${offset}" ]; then
        str=`substr "${str}" ${offset}`
    else
        offset=0
    fi
    str=${str/${2}*/}
    if [ "${#str}" -eq "${#1}" ]; then
        return 0
    fi
    echo $((${#str}+${offset}))
}

cd $MYSQLPATH
for i in */; do
    if [ $i != 'performance_schema/' ] ; then 
    DB=`basename "$i"` 
    #echo "backup $DB->$BACKUP_DIR$DB.sql.lzo"
    mysqlcheck "$DB" $MYSQL_CONN --silent --auto-repair >/tmp/tmp_grep_mysql-backup
    grep -E -B1 "note|warning|support|auto_increment|required|locks" /tmp/tmp_grep_mysql-backup>/tmp/tmp_grep_mysql-backup_not
    grep -v "$(cat /tmp/tmp_grep_mysql-backup_not)" /tmp/tmp_grep_mysql-backup

    tbl_count=0
    for t in $(mysql -NBA -h $DB_host $MYSQL_CONN -D $DB -e 'show tables') 
    do
      found=$(strpos "$IGNORE" "$DB"."$t,")
      if [ "$found" == "" ] ; then 
        echo "DUMPING TABLE: $DB.$t"
        mysqldump -h $DB_host $MYSQL_CONN $DB $t --events --skip-lock-tables | lzop -3 -f -o $BACKUP_DIR/$DB.$t.sql.lzo
        tbl_count=$(( tbl_count + 1 ))
      fi
    done
    echo "$tbl_count tables dumped from database '$DB' into dir=$BACKUP_DIR"
    fi
done

ด้วยความช่วยเหลือเล็กน้อยจาก https://stackoverflow.com/a/17016410/1069083

มันใช้ lzop ซึ่งเร็วกว่ามากดู: http://pokecraft.first-world.info/wiki/Quick_Benchmark:_Gzip_vs_Bzip2_vs_LZMA_vs_XZ_vs_LZ4_vs_LZO


เอกสารที่คุณแบ่งปันบอกว่า gzip เร็วกว่า lzop
jrosell

0

ฉันชอบวิธีการของ Rubo77 ฉันไม่เคยเห็นมาก่อนที่ฉันจะแก้ไข Paul's อันนี้จะสำรองฐานข้อมูลเดียวยกเว้นตารางที่คุณไม่ต้องการ จากนั้นจะทำการ gzip และลบไฟล์ใด ๆ ที่มีอายุเกิน 8 วัน ฉันอาจจะใช้ 2 รุ่นนี้ทำเต็ม (ลบตารางบันทึก) วันละครั้งและอีกที่สำรองตารางสำคัญที่สุดที่เปลี่ยนมากที่สุดทุกชั่วโมงโดยใช้งาน cron คู่

#!/bin/sh
PASSWORD=XXXX
HOST=127.0.0.1
USER=root
DATABASE=MyFavoriteDB

now="$(date +'%d_%m_%Y_%H_%M')"
filename="${DATABASE}_db_backup_$now"
backupfolder="/opt/backups/mysql"
DB_FILE="$backupfolder/$filename"
logfile="$backupfolder/"backup_log_"$(date +'%Y_%m')".txt

EXCLUDED_TABLES=(
logs
)
IGNORED_TABLES_STRING=''
for TABLE in "${EXCLUDED_TABLES[@]}"
do :
   IGNORED_TABLES_STRING+=" --ignore-table=${DATABASE}.${TABLE}"
done

echo "Dump structure started at $(date +'%d-%m-%Y %H:%M:%S')" >> "$logfile"
mysqldump --host=${HOST} --user=${USER} --password=${PASSWORD} --single-transaction --no-data --routines ${DATABASE}  > ${DB_FILE} 
echo "Dump structure finished at $(date +'%d-%m-%Y %H:%M:%S')" >> "$logfile"
echo "Dump content"
mysqldump --host=${HOST} --user=${USER} --password=${PASSWORD} ${DATABASE} --no-create-info --skip-triggers ${IGNORED_TABLES_STRING} >> ${DB_FILE}
gzip ${DB_FILE}

find "$backupfolder" -name ${DATABASE}_db_backup_* -mtime +8 -exec rm {} \;
echo "old files deleted" >> "$logfile"
echo "operation finished at $(date +'%d-%m-%Y %H:%M:%S')" >> "$logfile"
echo "*****************" >> "$logfile"
exit 0

0

เพื่อความสมบูรณ์นี่คือสคริปต์ที่จริงอาจเป็นหนึ่งซับเพื่อรับการสำรองข้อมูลจากฐานข้อมูลยกเว้น (ไม่สนใจ) มุมมองทั้งหมด ชื่อ db ถือว่าเป็นพนักงาน:

ignore=$(mysql --login-path=root1 INFORMATION_SCHEMA \
    --skip-column-names --batch \
    -e "select 
          group_concat(
            concat('--ignore-table=', table_schema, '.', table_name) SEPARATOR ' '
          ) 
        from tables 
        where table_type = 'VIEW' and table_schema = 'employees'")

mysqldump --login-path=root1 --column-statistics=0 --no-data employees $ignore > "./backups/som_file.sql"   

คุณสามารถปรับปรุงตรรกะของแบบสอบถาม โดยทั่วไปแล้วการใช้group_concatและconcatคุณสามารถสร้างเกือบทุกคำสั่งสตริงหรือคำสั่งเชลล์

โดยการใช้ไซต์ของเรา หมายความว่าคุณได้อ่านและทำความเข้าใจนโยบายคุกกี้และนโยบายความเป็นส่วนตัวของเราแล้ว
Licensed under cc by-sa 3.0 with attribution required.