ฟรียูทิลิตี้ OS X เพื่อขูดเว็บไซต์หรือไม่

11

ฉันต้องการขูดหน้าเว็บและหน้าย่อยทั้งหมดของเว็บไซต์ (โดยการขูดฉันหมายถึงบันทึกเนื้อหาออนไลน์ทั้งหมดลงในไฟล์ HTML ในเครื่อง)

ยูทิลิตี้ที่ดีที่สุดในการรวบรวมข้อมูลทุกหน้าคืออะไร? เป็นการดีที่ฉันต้องการระบุจำนวนชั้นที่จะขูด

macos  software-recommendation  utilities  websites  html 
— Chirag Patel
แหล่งที่มา

คำตอบ:

19

คุณมีสองทางเลือก:

คุณสามารถใช้wgetยูทิลิตีบรรทัดคำสั่งดังนี้:

wget -rl 10

แทนที่10ด้วยจำนวนระดับที่คุณต้องการชดเชย

หรือคุณสามารถใช้SiteSucker แอปพลิเคชั่น GUI ที่ดาวน์โหลดเว็บไซต์ซ้ำ คุณยังสามารถระบุระยะเวลาที่จะทำการเรียกคืนด้วย SiteSucker

— มาร์ค Szymanski
แหล่งที่มา
1
SiteSucker นั้นยอดเยี่ยม
— neoneye
โดยการใช้ไซต์ของเรา หมายความว่าคุณได้อ่านและทำความเข้าใจนโยบายคุกกี้และนโยบายความเป็นส่วนตัวของเราแล้ว
Licensed under cc by-sa 3.0 with attribution required.