การเรียกใช้สคริปต์ทุบตีหลาย ๆ ชุดและเรียกใช้พร้อมกันไม่ใช่เรียงตามลำดับ

สมมติว่าฉันมีสาม (หรือมากกว่า) สคริปต์ทุบตี: script1.sh, และscript2.sh script3.shผมอยากจะเรียกทั้งสามของสคริปต์เหล่านี้และเรียกพวกเขาในแบบคู่ขนาน วิธีหนึ่งในการทำเช่นนี้คือเพียงเรียกใช้คำสั่งต่อไปนี้

nohup bash script1.sh &
nohup bash script2.sh &
nohup bash script3.sh &

(โดยทั่วไปสคริปต์อาจใช้เวลาหลายชั่วโมงหรือหลายวันจึงจะเสร็จสิ้นดังนั้นฉันต้องการใช้nohupเพื่อให้สคริปต์ทำงานต่อไปแม้ว่าคอนโซลของฉันจะปิด)

แต่มีวิธีใดบ้างที่จะดำเนินการคำสั่งทั้งสามนี้ควบคู่กับการโทรครั้งเดียว ?

ฉันกำลังคิดอะไรบางอย่างเช่น

nohup bash script{1..3}.sh &

แต่นี้จะปรากฏในการดำเนินการscript1.sh, script2.shและscript3.shในลำดับที่ไม่ได้อยู่ในแบบคู่ขนาน

for((i=1;i<100;i++)); do nohup bash script${i}.sh & done

วิธีที่ดีกว่าที่จะใช้GNU ขนาน GNU Parallel นั้นง่ายและเราสามารถควบคุมจำนวนงานเพื่อให้ทำงานแบบขนานพร้อมกับควบคุมงานได้มากขึ้น

ในคำสั่งด้านล่างscript{1..3}.shได้รับการขยายและถูกส่งเป็นอาร์กิวเมนต์ไปbashในแบบคู่ขนาน ที่นี่-j0บ่งชี้ว่ามีงานมากที่ควรถูกเรียกใช้มากที่สุด โดยค่าเริ่มต้นparallelทำงานหนึ่งงานสำหรับหนึ่งซีพียูคอร์

$ parallel -j0 bash :::: <(ls script{1..3}.sh)

และคุณยังสามารถลองใช้

$ parallel -j0 bash ::: script{1..3}.sh

ในขณะที่ดำเนินการวิธีที่สองถ้าคุณได้รับข้อความแสดงข้อผิดพลาดใด ๆ ก็หมายความว่า--tollefตัวเลือกที่มีการตั้งค่า/etc/parallel/configและที่จะต้องถูกลบและทุกสิ่งจะทำงานได้ดี

คุณสามารถอ่านGNU Parallelsman page ได้ที่นี่เพื่อดูตัวเลือกที่สมบูรณ์ยิ่งขึ้น

และในกรณีที่หากคุณกำลังเรียกใช้งานจากเครื่องระยะไกลควรใช้งานscreenให้ดีขึ้นเพื่อไม่ให้เซสชันถูกปิดเนื่องจากปัญหาเครือข่าย nohupไม่จำเป็นต้องเป็นรุ่นล่าสุดของทุบตีเป็นที่มาพร้อมกับhuponexitเป็นoffและนี้จะป้องกันไม่ให้เปลือกปกครองจากการส่งHUPสัญญาณให้กับเด็กในช่วงทางออกของมัน ในกรณีที่ไม่ได้ทำการตั้งค่าไว้

$ shopt -u huponexit  

นอกจากนี้เรายังสามารถใช้xargsเพื่อเรียกใช้สคริปต์หลายตัวพร้อมกัน

$ ls script{1..5}.sh|xargs -n 1 -P 0 bash

ที่นี่แต่ละสคริปต์ถูกส่งผ่านไปยัง bash เป็นอาร์กิวเมนต์แยกกัน -P 0บ่งชี้ว่าจำนวนกระบวนการแบบขนานสามารถมากที่สุด job control feature (&)นอกจากนี้ยังมีความปลอดภัยมากขึ้นว่าการใช้ค่าเริ่มต้นทุบตี

โซลูชันบรรทัดเดียว:

$ nohup bash script1.sh & nohup bash script2.sh & nohup bash script3.sh &

ไม่ค่อยน่าสนใจเพียงใช้สคริปต์ wrapper:

$ cat script.sh
#!/usr/bin/env bash
script1.sh &
script2.sh &
script3.sh &
$ nohup script.sh &

หรือวนรอบพวกเขา:

for script in dir/*.sh
do
    nohup bash "$script" &
done

หากคุณกำลังมองหาการประหยัดการพิมพ์

eval "nohup bash "script{1..3}.sh" &"

หรือในความคิดที่สองอาจจะไม่

ชำระเงินเครื่องมือนี้: https://github.com/wagoodman/bashful

สมมติว่าคุณมีmytasks.yamlกับ

tasks:
    - name: A title for some tasks
      parallel-tasks:
        - cmd: ./script1.sh
        - cmd: ./script2.sh -x an-arg
        - cmd: ./script3.sh -y some-other-arg

และคุณเรียกใช้เช่น:

nohup bashful run mytasks.yaml

สคริปต์ของคุณจะทำงานพร้อมกับแถบความคืบหน้าในแนวตั้ง (+ eta หากคุณเคยใช้มาก่อนและเวลากำหนดไว้) คุณสามารถปรับแต่งจำนวนงานที่คุณต้องการเรียกใช้ในแบบคู่ขนานหากคุณเริ่มทำงานมากกว่าแค่ 3 งานที่นี่:

config:
    max-parallel-commands: 6
tasks:
    ...

คำเตือน: ฉันเป็นผู้เขียน

ฉันแนะนำโปรแกรมอรรถประโยชน์ที่ง่ายกว่ามากที่ฉันเพิ่งเขียน ปัจจุบันเรียกว่า par แต่จะเปลี่ยนชื่อเป็น parl หรือ pll ในไม่ช้ายังไม่ได้ตัดสินใจ

https://github.com/k-bx/par

API นั้นง่ายเหมือน:

par "script1.sh" "script2.sh" "script3.sh"

ใช้คู่ขนาน

parallelshell "echo 1" "echo 2" "echo 3"

https://github.com/keithamus/parallelshell