จะส่งรหัสผ่านไปยัง pg_dump ได้อย่างไร

ฉันกำลังพยายามสร้าง cronjob เพื่อสำรองฐานข้อมูลของฉันทุกคืนก่อนที่จะเกิดภัยพิบัติขึ้น ดูเหมือนว่าคำสั่งนี้จะตอบสนองความต้องการของฉัน:

0 3 * * * pg_dump dbname | gzip > ~/backup/db/$(date +%Y-%m-%d).psql.gz

ยกเว้นหลังจากทำงานนั้นฉันคาดว่าจะพิมพ์รหัสผ่าน ฉันไม่สามารถทำได้ถ้าฉันเรียกใช้จาก cron ฉันจะส่งผ่านโดยอัตโนมัติได้อย่างไร

สร้าง.pgpassไฟล์ในโฮมไดเรกทอรีของบัญชีที่pg_dumpจะใช้งาน ดู Postgresql เอกสารประกอบlibpq-pgpassสำหรับรายละเอียดของรูปแบบ (รวมถึงย่อหน้าสุดท้ายที่อธิบายถึงมันจะถูกละเว้นหากคุณไม่ได้ตั้งโหมดเป็น0600)

หรือคุณสามารถตั้งค่า crontab เพื่อเรียกใช้สคริปต์ ภายในสคริปต์นั้นคุณสามารถตั้งค่าตัวแปรสภาพแวดล้อมดังนี้: export PGPASSWORD="$put_here_the_password"

วิธีนี้ถ้าคุณมีหลายคำสั่งที่ต้องใช้รหัสผ่านคุณสามารถใส่ไว้ในสคริปต์ หากรหัสผ่านมีการเปลี่ยนแปลงคุณจะต้องเปลี่ยนรหัสผ่านในที่เดียวเท่านั้น (สคริปต์)

และฉันเห็นด้วยกับ Joshua การใช้pg_dump -Fcสร้างรูปแบบการส่งออกที่ยืดหยุ่นที่สุดและถูกบีบอัดแล้ว สำหรับข้อมูลเพิ่มเติมโปรดดูที่: เอกสาร pg_dump

เช่น

# dump the database in custom-format archive
pg_dump -Fc mydb > db.dump

# restore the database
pg_restore -d newdb db.dump

หากคุณต้องการที่จะทำมันในหนึ่งคำสั่ง:

PGPASSWORD="mypass" pg_dump mydb > mydb.dump

สำหรับสายการบินเดียวเช่นการย้ายฐานข้อมูลคุณสามารถใช้--dbnameตามด้วยสตริงการเชื่อมต่อ (รวมถึงรหัสผ่าน) ตามที่ระบุไว้ในคู่มือ pg_dump

ในสาระสำคัญ.

pg_dump --dbname=postgresql://username:password@127.0.0.1:5432/mydatabase

หมายเหตุ:ตรวจสอบให้แน่ใจว่าคุณใช้ตัวเลือก--dbnameแทนตัวย่อ-dและใช้คำนำหน้า URI ที่ถูกต้องหรือpostgresql://postgres://

แบบฟอร์ม URI ทั่วไปคือ:

postgresql://[user[:password]@][netloc][:port][/dbname][?param1=value1&...]

วิธีปฏิบัติที่ดีที่สุดในกรณีของคุณ (งานซ้ำใน cron) สิ่งนี้ไม่ควรทำเนื่องจากปัญหาด้านความปลอดภัย ถ้ามันไม่ได้สำหรับ.pgpassไฟล์ฉันจะบันทึกสตริงการเชื่อมต่อเป็นตัวแปรสภาพแวดล้อม

export MYDB=postgresql://username:password@127.0.0.1:5432/mydatabase

แล้วมีใน crontab ของคุณ

0 3 * * * pg_dump --dbname=$MYDB | gzip > ~/backup/db/$(date +%Y-%m-%d).psql.gz

$ PGPASSWORD="mypass" pg_dump -i -h localhost -p 5432 -U username -F c -b -v -f dumpfilename.dump databasename

ซับเดียวนี้ช่วยฉันในขณะที่สร้างดัมพ์ของฐานข้อมูลเดียว

PGPASSWORD="yourpassword" pg_dump -U postgres -h localhost mydb > mydb.pgsql

@Josue Alexander Ibarra คำตอบใช้ได้กับ centos 7 และรุ่น 9.5 หาก --dbname ไม่ผ่าน

pg_dump postgresql://username:password@127.0.0.1:5432/mydatabase 

โปรดทราบว่าใน windows pgpass.confไฟล์จะต้องอยู่ในโฟลเดอร์ต่อไปนี้:

%APPDATA%\postgresql\pgpass.conf

หากไม่มีpostgresqlโฟลเดอร์อยู่ใน%APPDATA%โฟลเดอร์ให้สร้างขึ้น

pgpass.confเนื้อหาของแฟ้มเป็นสิ่งที่ต้องการ:

localhost:5432:dbname:dbusername:dbpassword

ไชโย

แก้ไขให้ฉันถ้าฉันผิด แต่ถ้าผู้ใช้ระบบเหมือนกันกับผู้ใช้ฐานข้อมูล PostgreSQL จะไม่ถามรหัสผ่านซึ่งขึ้นอยู่กับระบบในการตรวจสอบสิทธิ์ นี่อาจเป็นเรื่องของการกำหนดค่า

ดังนั้นเมื่อผมอยากเจ้าของฐานข้อมูลpostgresไปยังฐานข้อมูลของเขาสำรองข้อมูลทุกคืนผมสามารถสร้าง crontab crontab -e -u postgresสำหรับมัน: แน่นอนว่าpostgresจะต้องได้รับอนุญาตให้ทำงาน cron; ดังนั้นจะต้องมีการระบุไว้ใน/etc/cron.allowหรือ/etc/cron.denyจะต้องว่างเปล่า

สำรองข้อมูลผ่าน ssh ด้วยรหัสผ่านโดยใช้ข้อมูลประจำตัว. mpg ชั่วคราวแล้วกดไปที่ S3:

#!/usr/bin/env bash
cd "$(dirname "$0")"

DB_HOST="*******.*********.us-west-2.rds.amazonaws.com"
DB_USER="*******"
SSH_HOST="my_user@host.my_domain.com"
BUCKET_PATH="bucket_name/backup"

if [ $# -ne 2 ]; then
    echo "Error: 2 arguments required"
    echo "Usage:"
    echo "  my-backup-script.sh <DB-name> <password>"
    echo "  <DB-name> = The name of the DB to backup"
    echo "  <password> = The DB password, which is also used for GPG encryption of the backup file"
    echo "Example:"
    echo "  my-backup-script.sh my_db my_password"
    exit 1
fi

DATABASE=$1
PASSWORD=$2

echo "set remote PG password .."
echo "$DB_HOST:5432:$DATABASE:$DB_USER:$PASSWORD" | ssh "$SSH_HOST" "cat > ~/.pgpass; chmod 0600 ~/.pgpass"
echo "backup over SSH and gzip the backup .."
ssh "$SSH_HOST" "pg_dump -U $DB_USER -h $DB_HOST -C --column-inserts $DATABASE" | gzip > ./tmp.gz
echo "unset remote PG password .."
echo "*********" | ssh "$SSH_HOST" "cat > ~/.pgpass"
echo "encrypt the backup .."
gpg --batch --passphrase "$PASSWORD" --cipher-algo AES256 --compression-algo BZIP2 -co "$DATABASE.sql.gz.gpg" ./tmp.gz

# Backing up to AWS obviously requires having your credentials to be set locally
# EC2 instances can use instance permissions to push files to S3
DATETIME=`date "+%Y%m%d-%H%M%S"`
aws s3 cp ./"$DATABASE.sql.gz.gpg" s3://"$BUCKET_PATH"/"$DATABASE"/db/"$DATETIME".sql.gz.gpg
# s3 is cheap, so don't worry about a little temporary duplication here
# "latest" is always good to have because it makes it easier for dev-ops to use
aws s3 cp ./"$DATABASE.sql.gz.gpg" s3://"$BUCKET_PATH"/"$DATABASE"/db/latest.sql.gz.gpg

echo "local clean-up .."
rm ./tmp.gz
rm "$DATABASE.sql.gz.gpg"

echo "-----------------------"
echo "To decrypt and extract:"
echo "-----------------------"
echo "gpg -d ./$DATABASE.sql.gz.gpg | gunzip > tmp.sql"
echo

เพียงแทนที่สองบรรทัดแรกของ config ด้วยสิ่งที่คุณต้องการ - อย่างชัดเจน สำหรับผู้ที่ไม่สนใจในส่วนสำรอง S3 ให้นำออก - อย่างชัดเจน

สคริปต์นี้จะลบข้อมูลรับรองใน.pgpassภายหลังเนื่องจากในบางสภาพแวดล้อมผู้ใช้ SSH เริ่มต้นสามารถ sudo โดยไม่ต้องใช้รหัสผ่านเช่นอินสแตนซ์ EC2 กับubuntuผู้ใช้ดังนั้นการใช้.pgpassกับบัญชีโฮสต์อื่นเพื่อรักษาความปลอดภัยข้อมูลรับรองเหล่านั้นอาจไม่มีจุดหมาย

ตามรายละเอียดในโพสต์บล็อกนี้มีสองวิธีที่จะไม่ให้รหัสผ่านกับยูทิลิตี้ PostgreSQL เช่นคำสั่ง "pg_dump": ใช้ไฟล์".pgpass"หรือใช้ตัวแปรสภาพแวดล้อม"PGPASSWORD"

อีกวิธีหนึ่งในการส่งรหัสผ่านคือการใช้การเปลี่ยนเส้นทางอินพุตเช่นการโทร

pg_dump [params] < [path to file containing password]

คุณสามารถส่งรหัสผ่านไปที่ pg_dump โดยตรงโดยใช้สิ่งต่อไปนี้:

pg_dump "host=localhost port=5432 dbname=mydb user=myuser password=mypass" > mydb_export.sql

วิธีที่ง่ายที่สุดในความคิดของฉันนี้: คุณแก้ไขไฟล์ config postgres หลักของคุณ: pg_hba.conf ที่นั่นคุณต้องเพิ่มบรรทัดต่อไปนี้:

host <you_db_name> <you_db_owner> 127.0.0.1/32 trust

และหลังจากนี้คุณต้องเริ่มต้นคุณ cron ดังนี้:

pg_dump -h 127.0.0.1 -U <you_db_user> <you_db_name> | gzip > /backup/db/$(date +%Y-%m-%d).psql.gz

และมันทำงานได้โดยไม่ต้องใช้รหัสผ่าน