คำถามติดแท็ก large-data

ฉันกำลังโยกย้ายเซิร์ฟเวอร์จากสหรัฐอเมริกาไปยังสหราชอาณาจักรจากศูนย์ข้อมูลหนึ่งไปยังอีกแห่งหนึ่ง โฮสต์ของฉันบอกว่าฉันควรจะสามารถบรรลุ 11 เมกะไบต์ต่อวินาที ระบบปฏิบัติการคือ Windows Server 2008 ที่ปลายทั้งสอง ขนาดไฟล์เฉลี่ยของฉันอยู่ที่ประมาณ 100 MB และข้อมูลถูกแบ่งออกเป็นไดรฟ์ 2 TB ห้าตัว วิธีที่แนะนำในการโอนไฟล์เหล่านี้คืออะไร? FTP SMB Rsync / Robocopy อื่น ๆ ? ฉันไม่ได้ใส่ใจเรื่องความปลอดภัยมากนักเพราะเป็นไฟล์สาธารณะ แต่ฉันต้องการโซลูชันที่สามารถผลักดันอัตราการถ่ายโอนแบบเต็ม 11 MB / s เพื่อลดเวลาการถ่ายโอนทั้งหมด

96 file-transfer  large-data 

การขยายตัวของสัญลักษณ์แทนใน Bash รับประกันว่าจะเป็นไปตามลำดับตัวอักษรหรือไม่? ฉันถูกบังคับให้แยกไฟล์ขนาดใหญ่ออกเป็น 10 Mb ชิ้นเพื่อให้พวกเขาสามารถได้รับการยอมรับจากที่เก็บ Mercurial ของฉัน ดังนั้นฉันคิดว่าฉันสามารถใช้: split -b 10485760 Big.file BigFilePiece. แล้วแทนที่: cat BigFile | bigFileProcessor ฉันทำได้: cat BigFilePiece.* | bigFileProcessor ในสถานที่ อย่างไรก็ตามฉันไม่สามารถหาที่ใดก็ได้ที่รับประกันได้ว่าการขยายตัวของเครื่องหมายดอกจัน (หรือที่รู้จักว่าไวด์การ์ด, aka *) จะเป็นไปตามลำดับตัวอักษรเสมอ.aaมาก่อนหน้า.abนี้ นอกจากนี้ยังมีข้อบกพร่องในแผนของฉันบ้างไหม? ประสิทธิภาพในcatการรวมไฟล์เป็นอย่างไร?

53 bash  files  wildcard  large-data