ฉันใช้คำสั่ง scp shell เพื่อคัดลอกโฟลเดอร์ไฟล์ขนาดใหญ่
แต่ในบางครั้งฉันต้องฆ่าคำสั่งที่กำลังทำงานอยู่ (โดย Ctrl + C หรือ kill)
เพื่อความเข้าใจของฉัน scp คัดลอกไฟล์ตามลำดับดังนั้นควรมีไฟล์ที่คัดลอกเพียงบางส่วนเท่านั้น
คำสั่ง scp เดียวกันจะกลับมาทำงานต่อได้อย่างไรเพื่อไม่ให้เขียนทับไฟล์ที่คัดลอกสำเร็จและจัดการไฟล์ที่คัดลอกบางส่วนอย่างถูกต้อง
ปล. ฉันรู้ว่าฉันสามารถทำสิ่งประเภทนี้ใน rsync ได้ แต่ scp นั้นเร็วกว่าสำหรับฉันด้วยเหตุผลบางประการและฉันใช้มันแทน
ddใช้skipตัวแปรที่เหมาะสมได้ตลอดเวลาและไปที่ssh:)
Typically, rsync is configured to use ssh by defaultดังนั้น ... มันควรจะเร็วที่สุด (แม้ว่ามันจะแสดงรายการไดเรกทอรีก่อนซึ่งอาจทำให้การเริ่มต้นช้าลง)
คำตอบ:
คุณควรใช้rsyncมากกว่าssh
rsync -P -e ssh remoteuser@remotehost:/remote/path /local/path
ตัวเลือกที่สำคัญคือ-Pซึ่งเหมือนกับ--partial --progress
ตามค่าเริ่มต้น rsync จะลบไฟล์ที่ถ่ายโอนบางส่วนหากการถ่ายโอนถูกขัดจังหวะ ในบางสถานการณ์ควรเก็บไฟล์ที่ถ่ายโอนบางส่วนไว้ การใช้ตัวเลือก --partial บอกให้ rsync เก็บไฟล์บางส่วนไว้ซึ่งจะทำให้การถ่ายโอนไฟล์ที่เหลือในภายหลังเร็วขึ้นมาก
นอกจากนี้ยังสามารถใช้ตัวเลือกอื่น ๆ เช่น-a(สำหรับโหมดเก็บถาวร) และ-z(เพื่อเปิดใช้งานการบีบอัด)
-rด้วย ที่มา: lucasb.eyer.be/snips/rsync-skipping-directory.html
rsync -P -rsh remoteuser@remotehost:/remote/path /local/path
ทางเลือกสำหรับ rsync:
ใช้sftpกับตัวเลือก-r(ซ้ำคัดลอกไดเรกทอรีทั้งหมด) และตัวเลือก-aของsftp's get'คำสั่งดำเนินการต่อการโอนบางส่วนของไฟล์ที่มีอยู่.'
วิชาบังคับก่อน:คุณsftpดำเนินการมีอยู่แล้วgetกับ-aตัวเลือก
ตัวอย่าง:
คัดลอกไดเร็กทอรี/foo/barจากเซิร์ฟเวอร์ระยะไกลไปยังไดเร็กทอรีปัจจุบันของคุณ ไดเร็กทอรีbarจะถูกสร้างขึ้นในไดเร็กทอรีปัจจุบันของคุณ
echo "get -a /foo/bar" | sftp -r user@remote_server
echo "put -a foo/bar" | sftp -r server:/foo
ตั้งแต่ OpenSSH 6.3 คุณสามารถใช้regetคำสั่งในรูปแบบsftp.
มีไวยากรณ์เดียวกันกับgetยกเว้นว่าจะเริ่มการถ่ายโอนจากจุดสิ้นสุดของไฟล์ในเครื่องที่มีอยู่
echo "reget /file/path" | sftp -r user@server_name
ผลเดียวกันมี-aสลับไปที่getคำสั่งหรือบรรทัดคำสั่งทั่วโลก-aสวิทช์ของ `SFTP
ความเป็นไปได้อีกอย่างหนึ่งคือการพยายามกอบกู้ scp ที่คุณเริ่มต้นไปแล้วเมื่อมันหยุดนิ่ง
ctrl + z เป็นพื้นหลังและหยุดจากนั้น ssh ไปที่เซิร์ฟเวอร์รับและเข้าสู่ระบบจากนั้นออก ตอนนี้ fg กระบวนการ scp และดูการดำเนินการต่อจาก 'จนตรอก'!
เมื่อ rsync หยุดทำงานเช่นกันหลังจากผ่านไปสองสามวินาทีเมื่อเริ่มทำงานได้ดีฉันลงเอยด้วยโซลูชันกำลังดุร้ายต่อไปนี้เพื่อเริ่มและหยุดการเริ่มการดาวน์โหลดใหม่ทุกๆ 60 วินาที
cat run_me.sh
#!/bin/bash
while [ 1 ]
do
rsync --partial --progress --rsh=ssh user@host:/path/file.tgz file.tgz &
TASK_PID=$!
sleep 60
kill $TASK_PID
sleep 2
done
คุณสามารถใช้ประโยชน์จาก-rshและ-Pตัวเลือกของrsync. -Pมีไว้สำหรับการดาวน์โหลดบางส่วนและ-rshระบุว่าการโอนผ่าน ssh procotol
คำสั่งที่สมบูรณ์จะเป็น:
rsync -P -rsh remoteuser@remotehost:/remote/path /local/path
ฉันได้รับปัญหาเดียวกันเมื่อวานนี้โดยถ่ายโอนไฟล์ sql ขนาดใหญ่ผ่าน scp ฉันโชคดีด้วย wget --continue the_url
โพสต์บล็อกนั้นอธิบายได้ค่อนข้างดี http://www.cyberciti.biz/tips/wget-resume-broken-download.htmlโดยพื้นฐาน:
wget --continue url