ใช้ wget เพื่อดาวน์โหลดไดเรกทอรี FTP ทั้งหมดแบบวนซ้ำ

ฉันต้องการคัดลอกไฟล์และโฟลเดอร์ทั้งหมดจากโฮสต์หนึ่งไปยังอีกโฮสต์หนึ่ง ไฟล์บนโฮสต์เก่านั่งที่ / var / www / html และฉันมีสิทธิ์เข้าถึง FTP ไปยังเซิร์ฟเวอร์นั้นเท่านั้นและฉันไม่สามารถ TAR ไฟล์ทั้งหมดได้ การเชื่อมต่อปกติไปยังโฮสต์เก่าผ่าน FTP นำฉันไปที่โฟลเดอร์ / home / admin

ฉันพยายามเรียกใช้คำสั่งต่อไปนี้จากเซิร์ฟเวอร์ใหม่ของฉัน:

wget -r ftp://username:password@ip.of.old.host

แต่สิ่งที่ฉันได้รับคือไฟล์ index.html ที่สร้างขึ้น

ไวยากรณ์ที่ถูกต้องสำหรับการใช้ wget แบบซ้ำ ๆ บน FTP คืออะไร

ลอง-mสำหรับ--mirror

wget -m ftp://username:password@ip.of.old.host

คุณทำได้ถูกต้องคุณต้องตามท้าย * ในตอนท้าย:

wget -r ftp://username:password@1.2.3.4/dir/*

สำหรับเซิร์ฟเวอร์ที่ใช้ร่วมกันคุณสามารถใช้สิ่งนี้:

wget -r ftp://1.2.3.4/dir/* --ftp-user=username --ftp-password=password

เนื่องจากเซิร์ฟเวอร์ที่ใช้ร่วมกันส่วนใหญ่มีชื่อผู้ใช้ ftp-username เช่นชื่อผู้ใช้ @ hostname ดังนั้นคำสั่ง wget แรกไม่ทำงานและคำสั่งที่สองทำงานได้ดี

นอกจากนี้คุณยังสามารถใช้lftpในโหมดสคริปต์ได้ คำสั่งต่อไปนี้จะสะท้อนเนื้อหาของไดเรกทอรี FTP ระยะไกลที่กำหนดลงในไดเรกทอรีท้องถิ่นที่กำหนดและสามารถใส่ลงในงาน cron:

lftp -c 'open <hostname>; user <username> <password>; mirror -e <remote-src-path> <local-dest-path>; quit'

มันจัดการการเรียกซ้ำในไดเรกทอรีโดยอัตโนมัติและอนุญาตให้ระบุไดเรกทอรีเริ่มต้นระยะไกลจากแหล่งเพื่อดาวน์โหลดข้อมูล

คุณสามารถใช้ 'curlftpfs - ติดตั้งโฮสต์ ftp เป็นไดเรกทอรีท้องถิ่น' และเมื่อติดตั้งแล้วคุณสามารถใช้เครื่องมือไฟล์ปกติเช่น 'cp -r'

ตรวจสอบคำสั่ง wget ด้านล่างเพื่อดาวน์โหลดข้อมูลจาก FTP แบบเรียกซ้ำ

wget --user="<user-name>" --password="<password>" -r -np -nH --cut-dirs=1 --reject "index.html*" "<URL to download files>"

-r: สำหรับการดาวน์โหลดซ้ำ

-np: สำหรับผู้ปกครองไม่มีน้อยไปหามาก

-nH: ใช้สำหรับปิดการสร้างไดเรกทอรีที่มีชื่อเหมือนกับ URL เช่น abc.xyz.com

--cut-dirs: ใช้สำหรับละเว้นจำนวนไดเรกทอรีหลัก ค่าของตัวเลือกนี้จะแตกต่างกันสำหรับคำสั่งของคุณ

คุณสามารถตรวจสอบโดยดำเนินการคำสั่งดังกล่าว

ใช้ -m แทน -r เนื่องจากความลึกของการเรียกซ้ำ

http://www.editcorp.com/Personal/Lars_Appel/wget/wget_2.html#SEC11

ควรลองใช้:

wget -r ftp://ftp:ftp@ftp.sunet.se/tst/

ใช้:

wget -m ftp://192.168.0.1

และมันจะสะท้อนไฟล์และโฟลเดอร์ทั้งหมด

นั่นคือไวยากรณ์ที่ถูกต้อง ไม่แน่ใจว่าทำไมคุณไม่ได้รับผลลัพธ์ที่คาดหวัง

เช่นเคยมีมากกว่าหนึ่งวิธีที่จะทำ ลอง ncftp โดยเฉพาะอย่างยิ่ง ncftpget

ฉันสามารถเข้าใจได้ว่าคุณกำลังพยายามถ่ายโอนข้อมูลนี้ไปที่ cron หรืออะไร แต่ทำไมไม่เพียงแค่ ftp เข้าสู่เซิร์ฟเวอร์ด้วยไคลเอนต์ปกติของคุณและ mget *? นี่อาจเป็นเส้นทางที่นำไปสู่ความสำเร็จได้เร็วขึ้น

ดังที่ฉันได้กล่าวไว้ว่าการเข้าสู่ระบบผ่าน FTP จะนำฉันไปที่โฟลเดอร์ / home / admin และไฟล์ที่ฉันต้องการอยู่ใน / var / www / html

ฉันคิดว่ามันจะทำงานในกรณีของคุณ:

wget -r ftp://192.168.0.1/../../var/www/html

ฉันเจอ Windows hosting ด้วยชื่อผู้ใช้เป็น brinkster / ชื่อผู้ใช้ดังนั้น wget จะเกิดข้อผิดพลาดหากคุณใช้ไวยากรณ์:

wget -m ftp://brinkster/username:password@ip.of.the.host

หากต้องการผ่านสิ่งนี้ให้ใช้

wget -m ftp://brinkster%2Fusername:password@ip.of.old.host

ฉันต้องเผชิญกับสิ่งนี้ด้วย Windows hosting @ brinkster

wget --user username --password yourpassword ftp://example.com/ftpfiles/filename จะทำงานหรือคุณสามารถเพิ่ม * แทนการป้อนชื่อไฟล์: ทำให้ลองนึกถึงพอร์ตที่ไม่ถูกต้องในกรณีของคุณ