คำถามติดแท็ก cluster

ก่อนอื่นฉันจะอธิบายสถานการณ์ของฉันให้คุณฟัง ฉันใช้งานเว็บไซต์ที่ได้รับความนิยมเป็นอย่างมากดังนั้นฉันจึงไม่สามารถลงทุนเงินจำนวนมหาศาลได้ ขณะนี้ฉันมีเซิร์ฟเวอร์เพียงเครื่องเดียวที่มี HAProxy อยู่ข้างหน้าส่งคำขอปกติไปยัง Apache และคำขอไฟล์คงที่ทั้งหมดไปยัง Lighttpd สิ่งนี้ทำงานได้ดีเพราะ Apache และ PHP ทุกคำขอได้รับการจัดการโดย Apache ในขณะที่ภาพทั้งหมดจะถูกส่งไปยัง Lighttpd ที่เร็วขึ้น (เว็บไซต์ส่วนใหญ่เป็นรูปภาพดังนั้นนี่จึงเป็นสิ่งสำคัญจริงๆ) คงจะดีหากไม่ต้องตั้งค่าโดเมนย่อยสำหรับแสดงภาพเพราะ URL สั้น ๆ ก็สำคัญเช่นกันดังนั้นเหตุผลของฉันในการใช้ HAProxy ฉันพบผู้ให้บริการโฮสต์ที่ให้แบนด์วิดท์ที่ไม่มีมิเตอร์ราคาถูกที่ฉันใช้อยู่ปัญหามาเมื่อฉันเริ่มผลักแบนด์วิดท์ให้มากที่สุดเท่าที่การ์ดเครือข่าย 100mbs สามารถจัดการได้ดังนั้นจึงต้องมีเซิร์ฟเวอร์ที่สอง ฉันได้คิดมากเป็นตัวเลือกของฉันแล้วฉันจะอธิบายให้คุณฟัง หวังว่าคุณสามารถให้ข้อมูลเชิงลึกเกี่ยวกับตัวเลือกที่ดีที่สุดสำหรับฉันหรืออาจมีตัวเลือกอื่นจากที่นั่นซึ่งฉันยังไม่ได้คิด ที่ต้องการ: แม้แต่การกระจายแบนด์วิดท์ก็เป็นสิ่งจำเป็น ฉันมีเซิร์ฟเวอร์ที่ทรงพลังพอสมควรดังนั้นการปรับขนาดไม่ใช่ตัวเลือก ฉันต้องขยายออกเพื่อให้ได้แบนด์วิดท์ที่มากขึ้น URL สั้น ๆ ฉันไม่ต้องการตั้งค่าโดเมนย่อยเช่น img.example.com เพื่อแสดงภาพของฉัน example.com/image.jpg คือตอนนี้เป็นอย่างไรและฉันต้องการให้อยู่อย่างไร แต่ถ้าไม่มีวิธีอื่นฉันก็เข้าใจ เซิร์ฟเวอร์ clostest ที่จัดการการร้องขอจะดีจริง ๆ แต่ไม่จำเป็นต้อง สิ่งที่ต้องจำไว้ HAProxy ถึง …

12 load-balancing  bandwidth  cluster  haproxy 

ฉันพบเครื่องมือซอฟต์แวร์การจัดการคลัสเตอร์ต่อไปนี้: pacemaker (clusterlabs.org) - ต้นฉบับโครงการ Heartbeat มุ่งเน้นไปที่ความพร้อมใช้งานสูงจะอยู่ในเวอร์ชั่นเดเบียนต่อไป openqrm (openqrm.com), - เว็บ gui - การใช้งานที่กว้างขึ้น, ไซต์ที่มีงานนำเสนอสำหรับทั้งคู่ HA รวมแบบเสมือนจริง: การจำลองเสมือนด้วย KVM, Pacemaker และ DRBD การจัดการเครื่องเสมือนด้วย openORM ดูเหมือนว่ามีการใช้เครื่องกระตุ้นหัวใจมากขึ้น ฉันมี 2 ฮาร์ดแวร์เซิร์ฟเวอร์สำหรับ VMs ที่ต่างกัน 12 รายการ ระบบ linux ที่ฉันจะใช้คือ debian lenny ตั้งค่าฉันต้องการใช้: drdb, heartbeart, kvm ฉันไม่มีประสบการณ์กับซอฟต์แวร์การจัดการคลัสเตอร์ ใครบ้างมีประสบการณ์กับเครื่องกระตุ้นหัวใจและ / หรือ openqrm บ้างไหม? ใช้งานที่ไหนง่ายกว่ากัน มีผู้สมัครคนอื่น ๆ …

12 linux  cluster  kvm-virtualization  high-availability 

ปิด. คำถามนี้เป็นคำถามปิดหัวข้อ ไม่ยอมรับคำตอบในขณะนี้ ต้องการปรับปรุงคำถามนี้หรือไม่ อัปเดตคำถามเพื่อให้เป็นหัวข้อสำหรับข้อบกพร่องของเซิร์ฟเวอร์ ปิดให้บริการใน2 ปีที่ผ่านมา ตอนนี้ฉันมี 10 เซิร์ฟเวอร์สำหรับ hpc ซึ่งเน้นการใช้พลังงาน ผู้ใช้ของฉันต้องเริ่มกระบวนการหลายอย่างโดยใช้ qmake ผู้ใช้จะใช้งานกับอูบุนตู 9.10 และซอฟต์แวร์จากแหล่งเก็บข้อมูลนั้นสามารถใช้งานได้จริง ฉันใช้งาน Ubuntu 9.10 กับเซิร์ฟเวอร์ทั้ง 10 ตัว (pxe stones) แล้ว ตอนนี้เราทำงานกับ parallel-ssh และ cluster-ssh ซึ่งอนุญาตให้เปิดกระบวนการเดียวกันให้กับเซิร์ฟเวอร์ทั้งหมด ด้วยเครื่องมือนี้เครื่องมือนี้เซิร์ฟเวอร์ยังคงเป็นอิสระ แต่ด้วยซอฟต์แวร์เดียวกันและคำสั่งที่เปิดตัวเหมือนกัน ตอนนี้เราต้องการไปยังขั้นตอนถัดไปและดูเซิร์ฟเวอร์ทั้งหมดเป็นเซิร์ฟเวอร์เดียวที่มีทรัพยากรทั้งหมดจากเซิร์ฟเวอร์อื่น ๆ 9 เหมือนทรัพยากรของมัน ความแตกต่างจะมีนัยสำคัญในเวลาที่จะดำเนินการและเวลาในการออกแบบคำสั่งเพื่อเปิด คำแนะนำเกี่ยวกับซอฟต์แวร์ที่จะใช้จะมีประโยชน์มาก? ขอบคุณ

12 linux  cluster  gridengine 

ตามที่เป็นอยู่ในปัจจุบันคำถามนี้ไม่เหมาะสำหรับรูปแบบคำถาม & คำตอบของเรา เราคาดหวังว่าคำตอบจะได้รับการสนับสนุนจากข้อเท็จจริงการอ้างอิงหรือความเชี่ยวชาญ แต่คำถามนี้อาจเรียกร้องให้มีการอภิปรายโต้แย้งโต้แย้งหรือการอภิปรายเพิ่มเติม หากคุณรู้สึกว่าคำถามนี้สามารถปรับปรุงและเปิดใหม่ได้โปรดไปที่ศูนย์ช่วยเหลือเพื่อขอคำแนะนำ ปิดให้บริการใน8 ปีที่ผ่านมา ล็อคแล้ว คำถามและคำตอบของคำถามนี้ถูกล็อคเนื่องจากคำถามอยู่นอกหัวข้อ แต่มีความสำคัญทางประวัติศาสตร์ ขณะนี้ไม่ยอมรับคำตอบหรือการโต้ตอบใหม่ ฉันค้นหาและรวบรวมลิงก์สำหรับพวกเขาจำนวนมาก แต่เครื่องมือเหล่านี้จำนวนมากไม่มีกรณีการใช้งานหรือเอกสารประกอบการสาธิตเพียงพอที่จะประเมินมูลค่าที่อาจเกิดขึ้นได้โดยไม่ต้องติดตั้งและทดลองใช้งาน ฉันหวังว่าผู้คนที่นี่จะมีประสบการณ์กับพวกเขาบางคนและสามารถให้ข้อเสนอแนะเกี่ยวกับวิธีการติดตั้งและใช้งานได้ง่าย กรณีการใช้งานส่วนตัวของฉันคือกลุ่มเครื่องสองสามอย่างที่มักใช้ในคอนเสิร์ตเพื่อทำงานเกี่ยวกับงานที่แจกจ่าย เครื่องไม่ได้เป็นคลัสเตอร์จริง (เช่น beowulf) และความต้องการหลักของฉันคือช่วยในการกำหนดค่าและการจัดการเครื่อง หากยูทิลิตี้ให้ความสามารถในการแยกชิ้นงานออกเป็นชิ้น ๆ และกระจายชิ้นส่วนเหล่านั้นนั่นเป็นเรื่องที่น่าสนใจ แต่ฉันต้องใช้เคสตัวแรกก่อน นี่คือรายการของโครงการที่ฉันพบว่าฟรีและโอเพนซอร์ส: pdsh clusterssh pssh clusterit fanout omnitty taktuk จาน DSH pydsh ฉันอยากได้ยินความคิดของคุณ!

11 linux  shell  cluster 

ในเอกสารประกอบ mongoDB สำหรับสถาปัตยกรรมคลัสเตอร์การผลิตฉันอ่านว่าจำนวนขั้นต่ำของเซิร์ฟเวอร์สำหรับคลัสเตอร์ mongoDB ที่ใช้งานจริงคือ 7: เป็นไปได้หรือไม่ที่จะแบ่งปันเราเตอร์, กำหนดค่าเซิร์ฟเวอร์และชิ้นส่วนบนเซิร์ฟเวอร์เดียวกัน (มีทั้งหมด 3 เซิร์ฟเวอร์แต่ละตัวด้วยเราเตอร์, บริการกำหนดค่าและบริการที่แตก)

11 cluster  mongodb 

ปิด. คำถามนี้เป็นคำถามปิดหัวข้อ ไม่ยอมรับคำตอบในขณะนี้ ต้องการปรับปรุงคำถามนี้หรือไม่ อัปเดตคำถามเพื่อให้เป็นหัวข้อสำหรับข้อบกพร่องของเซิร์ฟเวอร์ ปิดให้บริการใน4 ปีที่แล้ว มีทางเลือกอื่นสำหรับ Clusterssh, pssh ฯลฯ เพื่อจัดการเซิร์ฟเวอร์ที่ใช้ ssh หลายตัวผ่านทางอินเทอร์เฟซเดียวหรือไม่? จุดอ่อนข้อหนึ่งของ Clusterssh คือเซิร์ฟเวอร์ของฉันใช้การพิสูจน์ตัวตนจากคีย์ด้วย passhprase เพื่อเข้าสู่ระบบและไม่มีวิธีการเข้าสู่เซิร์ฟเวอร์โดยใช้ไพรเวตคีย์ มีทางเลือกใดบ้างที่รองรับการตรวจสอบสิทธิ์ด้วยปุ่มส่วนตัว?

11 linux  ssh  cluster  remote-access 

คำเตือน: โพสต์นี้ค่อนข้างยาวเพราะฉันพยายามให้ข้อมูลการกำหนดค่าที่เกี่ยวข้องทั้งหมด สถานะและปัญหา: ฉันยอมรับคลัสเตอร์ gpu และฉันต้องการใช้ slurm สำหรับการจัดการงาน โชคไม่ดีที่ฉันไม่สามารถร้องขอ GPU ได้โดยใช้ปลั๊กอินทรัพยากรทั่วไปที่เกี่ยวข้องของ slurm หมายเหตุ: test.sh เป็นสคริปต์ขนาดเล็กที่พิมพ์ตัวแปรสภาพแวดล้อม CUDA_VISIBLE_DEVICES การรันงานด้วย--gres=gpu:1ไม่สมบูรณ์ แสดงsrun -n1 --gres=gpu:1 test.shผลลัพธ์ในข้อผิดพลาดต่อไปนี้: srun: error: Unable to allocate resources: Requested node configuration is not available เข้าสู่ระบบ: gres: gpu state for job 83 gres_cnt:4 node_cnt:0 type:(null) _pick_best_nodes: job 83 never runnable _slurm_rpc_allocate_resources: Requested …

10 cluster  hpc  job-scheduler 

ต่อไปนี้เป็นลิงค์ของ DIY 6-Node Hadoop Cluster ของฉันโดยใช้ i3 Machines อะไรคือวิธีที่ดีที่สุดในการปกป้องการออกแบบของฉันจากฝุ่นและให้การถ่ายเทความร้อนที่ดีกว่า สิ่งที่ฉันควรใช้เพื่อครอบคลุมสี่ด้านของชั้นวางของฉันเพื่อป้องกันฝุ่น

9 hardware  cluster  hadoop  physical-environment 

ตามที่เป็นอยู่ในปัจจุบันคำถามนี้ไม่เหมาะสำหรับรูปแบบคำถาม & คำตอบของเรา เราคาดหวังคำตอบที่จะได้รับการสนับสนุนจากข้อเท็จจริงการอ้างอิงหรือความเชี่ยวชาญ แต่คำถามนี้มีแนวโน้มที่จะเรียกร้องการอภิปรายการโต้แย้งการหยั่งเสียงหรือการอภิปรายเพิ่มเติม หากคุณรู้สึกว่าคำถามนี้สามารถปรับปรุงและเปิดใหม่ได้โปรดไปที่ศูนย์ช่วยเหลือเพื่อขอคำแนะนำ ปิดให้บริการใน7 ปีที่ผ่านมา ฉันเป็นผู้ดูแลระบบในบ้านซอฟต์แวร์ขนาดเล็ก ฉันจะจำลองเซิร์ฟเวอร์ของเรา เหตุผลหลักในการทำเช่นนี้คือให้เวลาสูงสุดที่เป็นไปได้ แต่อาจเพิ่มการใช้ทรัพยากร เรามีเซิร์ฟเวอร์สองเครื่อง ในหนึ่งเรามีการพัฒนา VMs น้อยและยังใช้เป็นเซิร์ฟเวอร์การสร้าง (Jenkins Master แต่ยังสร้างผู้บริหาร) ในวันที่ 2 เราได้รับบริการที่สำคัญบางอย่าง (ที่เก็บรหัส, ตัวติดตามปัญหา) ฉันต้องการใช้เครื่องเหล่านั้นเพื่อสร้างสองโหนดคลัสเตอร์และสร้าง VM สำหรับแต่ละบริการ ฉันต้องการใช้ DRBD เพื่อให้สามารถย้ายเครื่องจักรระหว่างโหนดได้ หลังจากการวิจัยผู้สมัครของฉันคือ Proxmox และ Ganeti สิ่งใดจะดีกว่าในสถานการณ์ของฉัน ฉันชอบความเรียบง่ายของ Proxmox (โดยเฉพาะความเรียบง่ายในการติดตั้ง) แต่อาจมีเหตุผลที่ถูกต้องสำหรับการใช้ Ganeti?

9 virtualization  high-availability  cluster  ganeti  proxmox 

ในสภาพแวดล้อมของเราเราเราทั้ง Nginx และ HA Proxy ในกลุ่มที่แตกต่างกัน มีข้อดีของการใช้อย่างใดอย่างหนึ่งมากกว่าที่อื่น ๆ ? หรือวิธีที่ดีที่สุดในการปรับสมดุลโหลดคลัสเตอร์เซิร์ฟเวอร์ LAMP พื้นฐานคืออะไร

9 nginx  load-balancing  lamp  cluster  haproxy 

เป็นไปได้หรือไม่ที่จะสร้างคลัสเตอร์ล้มเหลว 3 โหนด Windows Server 2008 R2 ที่ไม่มี SAN เป้าหมายของเราคือการสร้าง MSMQ แบบกลุ่มโดยไม่มีจุดล้มเหลวใด ๆ ตามหลักการแล้วข้อความที่เก็บไว้จะยังคงอยู่บนโหนดทั้งหมดของคลัสเตอร์เพื่อที่ว่าหากมีโหนดใด ๆ ที่ออฟไลน์คลัสเตอร์สามารถดำเนินการต่อและบำรุงรักษาองค์ประชุมได้ หรือมีวิธีอื่นที่ดีกว่าในการสร้าง MSMQ ที่มีความพร้อมใช้งานสูง (ข้อมูลที่ไม่เกี่ยวข้องเพิ่มเติมน่าจะเป็นไปได้มากขึ้น) คลัสเตอร์นี้จะทำหน้าที่เป็น "ผู้จำหน่าย" NServiceBus และเก็บข้อความ "รอดำเนินการ" ทั้งหมดในระบบของเรา มันจะเป็นฮับที่การรับส่งข้อความทั้งหมดผ่านไป แก้ไข:เพื่อชี้แจงฉันสนใจเป็นพิเศษในการจัดเก็บคิว MSMQ ที่จำลองแบบบนโหนดเอง ฉันจะใช้ FileShare หรือ Node Majority quorum เพื่อจัดการ quorum ของคลัสเตอร์

5 cluster  failover  windows-cluster  msmq 

ฉันยังใหม่ต่อการพัฒนาและออกแบบเว็บไซต์ (ฉันย้ายจากการก่อสร้างที่มีคำตอบใหญ่กว่า) และฉันพยายามสร้างสถาปัตยกรรม AWS ที่ปรับขนาดได้สำหรับไซต์ Wordpress ที่อาศัยอยู่ในระดับฟรี แต่จะเพิ่มขึ้นตามความต้องการ . มีวิธีแก้ปัญหาอินสแตนซ์ EC2 เดียวที่ให้เว็บเซิร์ฟเวอร์ของฉันทำการปรับขนาดอัตโนมัติและการโคลนเพื่อให้การเปลี่ยนแปลงแพร่กระจายไปทั่วทั้งชั้นโดยไม่จำเป็นต้องอัพเดตแต่ละอินสแตนซ์ด้วยตนเอง? การค้นหาของฉันทำให้ฉันสนใจในโซลูชันซอฟต์แวร์ที่เป็นไปได้ของ nginx และ heartbeat หรือ corosync แต่ฉันไม่รู้ว่าจะใช้งานที่ไหนในราคาถูก แก้ไข : ตอนนี้กำลังมองหา rsync และ incron แต่การมีอินสแตนซ์ของเซิร์ฟเวอร์ทั้งหมดจะทำให้เกิดการเปลี่ยนแปลงทำให้วงวนไม่สิ้นสุดในการเปลี่ยนแปลงหรือไม่

amazon-ec2  web-server  amazon-web-services  cluster  scalability