ดังที่คุณเห็นจากภาพที่แนบมาฉันมีคนงานสองสามคนที่ดูเหมือนจะติดอยู่ กระบวนการเหล่านี้ไม่ควรใช้เวลานานเกินสองสามวินาที
ฉันไม่แน่ใจว่าทำไมพวกเขาไม่ล้างหรือวิธีลบออกด้วยตนเอง
ฉันใช้ Heroku โดยใช้ Resque กับ Redis-to-Go และ HireFire เพื่อปรับขนาดคนงานโดยอัตโนมัติ
คำตอบ:
วิธีแก้ปัญหาเหล่านี้ไม่ได้ผลสำหรับฉันฉันจะยังคงเห็นสิ่งนี้ใน redis-web:
0 out of 10 Workers Working
ในที่สุดสิ่งนี้ได้ผลสำหรับฉันในการล้างคนงานทั้งหมด:
Resque.workers.each {|w| w.unregister_worker}
heroku restartดูเหมือนจะทำเคล็ดลับ ตอนนี้แสดงจำนวนคนงานที่ถูกต้อง
Resque.workers.each {|w| matches = w.id.match(/^[^:]*:([0-9]*):[^:]*$/); pid = matches[1]; w.unregister_worker unless w.worker_pids.include?(pid.to_s)}ซึ่งจะยกเลิกการลงทะเบียนเฉพาะคนงานเหล่านั้นที่ pids ไม่ได้เป็นส่วนหนึ่งของ pids ทำงานที่รู้จัก ฉันไม่รู้ว่ามันใช้ได้ในทุกสภาพแวดล้อมหรือเปล่า แต่มันใช้ได้ดีกับ ubuntu สิ่งนี้อาจใช้ได้เฉพาะเมื่อคนงานของคุณอยู่บนเครื่องเดียวกับที่คุณเรียกใช้รหัสนี้
unregister_workerหรือไม่ มีวิธีกำหนดสิ่งนี้หรือไม่?
ในคอนโซลของคุณ:
queue_name = "process_numbers"
Resque.redis.del "queue:#{queue_name}"
มิฉะนั้นคุณสามารถพยายามปลอมเป็นสิ่งที่ทำเพื่อลบออกโดย:
Resque::Worker.working.each {|w| w.done_working}
แก้ไข
ผู้คนจำนวนมากโหวตให้คำตอบนี้และฉันรู้สึกว่าสิ่งสำคัญคือผู้คนลองใช้วิธีแก้ปัญหาของ hagope ซึ่งยกเลิกการลงทะเบียนคนงานออกจากคิวในขณะที่รหัสด้านบนจะลบคิว หากคุณพอใจที่จะปลอมมันก็เจ๋ง
คุณอาจติดตั้ง resque gem ไว้เพื่อให้คุณสามารถเปิดคอนโซลและรับคนงานปัจจุบันได้
Resque.workers
ส่งคืนรายชื่อคนงาน
#=> [#<Worker infusion.local:40194-0:JAVA_DYNAMIC_QUEUES,index_migrator,converter,extractor>]
เลือกคนงานและprune_dead_workersตัวอย่างเช่นคนแรก
Resque.workers.first.prune_dead_workers
การเพิ่มคำตอบโดย hagope ฉันต้องการที่จะสามารถยกเลิกการลงทะเบียนเฉพาะคนงานที่ทำงานในช่วงเวลาหนึ่งเท่านั้น โค้ดด้านล่างจะยกเลิกการลงทะเบียนเฉพาะคนงานที่ทำงานเกิน 300 วินาที (5 นาที)
Resque.workers.each {|w| w.unregister_worker if w.processing['run_at'] && Time.now - w.processing['run_at'].to_time > 300}
ฉันมีคอลเลกชันของงาน Rake ที่เกี่ยวข้องกับ Resque อย่างต่อเนื่องซึ่งฉันได้เพิ่มสิ่งนี้ไว้ใน: https://gist.github.com/ewherrmann/8809350
รันคำสั่งนี้ทุกที่ที่คุณรันคำสั่งเพื่อเริ่มต้นเซิร์ฟเวอร์
$ ps -e -o pid,command | grep [r]esque
คุณควรเห็นสิ่งนี้:
92102 resque: Processing ProcessNumbers since 1253142769
จด PID (รหัสกระบวนการ) ในตัวอย่างของฉันคือ92102
จากนั้นคุณสามารถออกจากกระบวนการ 1 จาก 2 วิธี
ใช้อย่างสง่างาม QUIT 92102
บังคับใช้ TERM 92102
*ฉันไม่แน่ใจว่าไวยากรณ์เป็นอย่างใดอย่างหนึ่งQUIT 92102หรือQUIT -92102
โปรดแจ้งให้เราทราบหากคุณมีปัญหาใด ๆ
ฉันเพิ่งทำ:
% rails c production
irb(main):001:0>Resque.workers
มีรายชื่อคนงาน
irb(main):002:0>Resque.remove_worker(Resque.workers[n].id)
... โดยที่ n คือดัชนีฐานศูนย์ของผู้ปฏิบัติงานที่ไม่ต้องการ
ฉันมีปัญหาคล้ายกันที่ Redis บันทึก DB ลงในดิสก์ซึ่งรวมคนงานที่ไม่ถูกต้อง (ไม่ทำงาน) ทุกครั้งที่ Redis / resque เริ่มปรากฏขึ้น
แก้ไขปัญหานี้โดยใช้:
Resque::Worker.working.each {|w| w.done_working}
Resque.redis.save # Save the DB to disk without ANY workers
ตรวจสอบให้แน่ใจว่าคุณรีสตาร์ท Redis และพนักงาน Resque ของคุณแล้ว
นี่คือวิธีที่คุณสามารถกำจัดพวกมันออกจาก Redis ด้วยชื่อโฮสต์ สิ่งนี้เกิดขึ้นกับฉันเมื่อฉันเลิกใช้เซิร์ฟเวอร์และคนงานไม่ได้ออกอย่างสง่างาม
Resque.workers.each { |w| w.unregister_worker if w.id.start_with?(hostname) }
ฉันพบปัญหานี้และเริ่มดำเนินการตามคำแนะนำจำนวนมากที่นี่ แต่ผมค้นพบสาเหตุที่สร้างปัญหานี้คือการที่ผมได้ใช้อัญมณี Redis-RB 3.3.0 การดาวน์เกรดเป็น redis-rb 3.2.2 ป้องกันไม่ให้คนงานเหล่านี้ติดขัดตั้งแต่แรก
ฉันได้ล้างมันออกจาก redis-cli โดยตรง โชคดีที่ redistogo.com อนุญาตให้เข้าถึงจากสภาพแวดล้อมภายนอก heroku รับรหัสผู้ปฏิบัติงานที่เสียชีวิตจากรายการ ของฉันคือ
55ba6f3b-9287-4f81-987a-4e8ae7f51210:2
เรียกใช้คำสั่งนี้ใน redis โดยตรง
del "resque:worker:55ba6f3b-9287-4f81-987a-4e8ae7f51210:2:*"
คุณสามารถตรวจสอบ redis db เพื่อดูว่ามันทำอะไรอยู่เบื้องหลัง
redis xxx.redistogo.com> MONITOR
OK
1380274567.540613 "MONITOR"
1380274568.345198 "incrby" "resque:stat:processed" "1"
1380274568.346898 "incrby" "resque:stat:processed:c65c8e2b-555a-4a57-aaa6-477b27d6452d:2:*" "1"
1380274568.346920 "del" "resque:worker:c65c8e2b-555a-4a57-aaa6-477b27d6452d:2:*"
1380274568.348803 "smembers" "resque:queues"
บรรทัดสุดท้ายที่สองจะลบผู้ปฏิบัติงาน
เริ่มทำงานบนhttps://github.com/shaiguitar/resque_stuck_queue/เมื่อเร็ว ๆ นี้ ไม่ใช่วิธีแก้ปัญหาคนงานติด แต่เป็นการแก้ปัญหาการแขวน / ติดค้างดังนั้นฉันคิดว่ามันน่าจะเป็นประโยชน์สำหรับคนในกระทู้นี้ จาก README:
"หาก resque ไม่เรียกใช้งานภายในกรอบเวลาที่กำหนดมันจะทริกเกอร์ตัวจัดการที่กำหนดไว้ล่วงหน้าที่คุณเลือกคุณสามารถใช้สิ่งนี้เพื่อส่งอีเมลหน้าที่เพจเจอร์เพิ่มพนักงาน resque เพิ่มเติมรีสตาร์ท resque ส่ง txt .. ก็ตามที่เหมาะกับคุณ "
ถูกนำมาใช้ในการผลิตและทำงานได้ดีสำหรับฉันจนถึงตอนนี้
ฉันมีคนงานติดค้าง / ค้างที่นี่ด้วยหรือฉันควรจะพูดว่า 'งาน' เพราะจริงๆแล้วคนงานยังอยู่ที่นั่นและทำงานได้ดีจึงเป็นกระบวนการแยกที่ค้างอยู่
ฉันเลือกวิธีแก้ปัญหาที่โหดร้ายในการฆ่ากระบวนการแยก "การประมวลผล" ตั้งแต่เวลามากกว่า 5 นาทีผ่านสคริปต์ทุบตีจากนั้นคนงานก็วางไข่ในคิวถัดไปและทุกอย่างก็ดำเนินต่อไป
ดูสคริปต์ของฉันได้ที่นี่: https://gist.github.com/jobwat/5712437
หากคุณใช้ Resque เวอร์ชันที่ใหม่กว่าคุณจะต้องใช้คำสั่งต่อไปนี้เนื่องจาก API ภายในมีการเปลี่ยนแปลง ...
Resque::WorkerRegistry.working.each {|work| Resque::WorkerRegistry.remove(work.id)}
วิธีนี้จะหลีกเลี่ยงปัญหาตราบใดที่คุณมี resque เวอร์ชันใหม่กว่า 1.26.0:
resque: env QUEUE=foo TERM_CHILD=1 bundle exec rake resque:work
โปรดทราบว่าจะไม่ปล่อยให้งานที่กำลังดำเนินอยู่เสร็จสิ้น
หากคุณใช้ Docker คุณสามารถใช้คำสั่งนี้:
<id> คือรหัสผู้ปฏิบัติงาน
docker stop <id>
docker start <id>