ฉันจะสร้างคลัสเตอร์ได้อย่างไร

มีบทความไม่กี่เรื่องที่ลอยอยู่บนโลกออนไลน์ในช่วงไม่กี่ปีที่ผ่านมาเกี่ยวกับการสร้างคลัสเตอร์คอมพิวเตอร์ที่บ้าน - ตัวอย่างเช่นที่นี่

Pi ทำให้ฉันเป็นเวทีที่ดีสำหรับการสร้าง / ทดสอบสิ่งนี้เนื่องจากราคาถูก ควรคำแนะนำ "ทั่วไป" เช่นการถ่ายโอนนี้ไปยัง Pi ค่อนข้างง่ายหรือมีสิ่งใดเป็นพิเศษที่ฉันควรทราบเมื่อพยายามทำโครงการดังกล่าว

ฉันแนะนำให้ดูที่Dispy - โมดูลการคำนวณแบบหลามแบบกระจาย

ในการรันโปรแกรมบน Raspberry Pi จำนวนหนึ่ง (โหนด) จากพีซี (เซิร์ฟเวอร์ - สมมติว่า IP คือ192.168.0.100):

• ติดตั้งระบบปฏิบัติการในแต่ละ RasPi

• แนบ RasPi แต่ละอันเข้ากับเครือข่ายของคุณ ค้นหา IP (ถ้าเป็นไดนามิก) หรือตั้งค่า IP แบบคงที่
  (สมมติว่าคุณมีสามโหนดและ IP ของพวกเขา192.168.0.50-52)

• ตั้งค่า Python (หากยังไม่ได้ติดตั้งdispy) จากนั้นรันdispynode.py -i 192.168.0.100บน RasPi แต่ละรายการ สิ่งนี้จะบอก dispynode เพื่อรับข้อมูลงานจากเซิร์ฟเวอร์

• บนพีซี (เซิร์ฟเวอร์), ติดตั้งdispyแล้วเรียกใช้รหัสหลามต่อไปนี้:

#!/usr/bin/env python
import dispy
cluster = dispy.JobCluster('/some/program', nodes=['192.168.0.50', '192.168.0.51', '192.168.0.52'])

นอกจากนี้คุณยังสามารถแทนที่/some/programด้วยฟังก์ชั่หลาม - computeเช่น

คุณยังสามารถรวมการพึ่งพาเช่นวัตถุหลามโมดูลและไฟล์ (ซึ่งdispyจะถ่ายโอนไปยังแต่ละโหนด) โดยการเพิ่มdepends=[ClassA, moduleB, 'file1']

คุณควรตระหนักถึงงานที่ทำไปแล้ว - แม้กระทั่งชื่อของกลุ่มของกล่อง RasPi Embedded Linux วิกิพีเดียกล่าวว่าบรัมเบิ้ลที่ถูกกำหนดให้เป็น " คลัสเตอร์วูล์ฟของอุปกรณ์ Raspberry Pi" ราสเบอร์รี่ Pi Homebrewมีจำนวนของการโพสต์ เกี่ยวกับ หนามและดู ยังมูลนิธิฟอรั่มของตัวเอง 's

ผู้ชายบางคนที่เซาแธมป์ตัน Uni ได้ใส่กันคลัสเตอร์และการเขียนภาพรวมรายละเอียดของการทำงานของพวกเขาที่http://www.southampton.ac.uk/~sjc/raspberrypi/

มันเป็นไปได้อย่างสมบูรณ์ แต่ปัญหาที่ใหญ่ที่สุดคือความสามารถในการบรรลุ มันเป็นความคิดที่ฉันจะไม่เพียง แต่คิดว่าทำงานได้ แต่มีประโยชน์อย่างที่คุณสามารถไปกับความคิดของการคำนวณแบบขนานแบบพกพา เท่าที่เฉพาะเจาะจงภาษาการเขียนโปรแกรมเช่น FORTRAN และ C ++ จะทำได้ดีที่สุด

ดูที่beowulf.orgสำหรับข้อมูลเพิ่มเติมเกี่ยวกับการคำนวณคลัสเตอร์

นี่คือการตอบกลับไปที่โพสต์ของกุยโดการ์เซียเกี่ยวกับ 'แจกจ่าย' - ฉันไม่สามารถหาวิธีตอบโพสต์ของเขา

เมื่อโปรแกรม ('/ bin / ls') แจกจ่ายด้วย 'แจกจ่าย' สำหรับการดำเนินการแบบขนานจากนั้นโปรแกรมบนเครื่องไคลเอนต์จะถูกถ่ายโอนไปยังแต่ละโหนด (ถึง '/ tmp') นี่คือเพื่อให้ผู้ใช้โปรแกรมที่พัฒนาบนเครื่องไคลเอนต์ถูกถ่ายโอนโดยไม่ต้องมี NFS หรือไดเร็คทอรี่ที่ใช้ร่วมกัน สิ่งนี้ใช้ได้กับโปรแกรมไบนารีเฉพาะเมื่อโหนดและสถาปัตยกรรมไคลเอนต์เข้ากันได้ ในกรณีของคุณฉันเดาว่าสถาปัตยกรรมไคลเอนต์นั้นแตกต่างจากโหนดระยะไกลและโหนดไม่สามารถดำเนินการถ่ายโอนไบนารี '/ bin / ls' จากไคลเอนต์ หากคุณต้องการรัน / bin / ls บนแต่ละโหนดมันอาจจะง่ายกว่าที่จะเขียนฟังก์ชั่น Python หรือโปรแกรมเพื่อพิมพ์ไดเรกทอรี (เช่นใช้ os.listdir) และแจกจ่ายมันแทนการปฏิบัติการแบบไบนารี

นอกจากนี้ยังมีhttp://pi.interworx.comหากคุณต้องการแผงควบคุมที่มีคุณสมบัติครบถ้วน พวกเขามีคำแนะนำในหน้านี้เกี่ยวกับวิธีการทำซ้ำ แต่คุณจะต้องอดทนเพราะโดเมนย่อยนั้นทำงานจากคลัสเตอร์ Rasberry Pi นี่คือภาพในกรณีที่มันลงไป:

http://www.facebook.com/photo.php?fbid=596262440393836&set=a.244167858936631.60071.170159826337435&type=1