ความเร็ว“ ดี” สำหรับ iSCSI และ NFS บนอีเธอร์เน็ต 1GB เป็นเท่าไร

ฉันมีกล่อง OpenSolaris ที่แชร์ระบบไฟล์ ZFS สองระบบ หนึ่งคือการเชื่อมต่อ NFS ไปยังกล่อง CentOS ที่รันเซิร์ฟเวอร์ VMware (อิมเมจของดิสก์ถูกเก็บใน ZFS) อีกอันคือการเชื่อมต่อ iSCSI กับเซิร์ฟเวอร์ Windows 2008 ที่มีการจัดรูปแบบ NTFS ที่ด้านบนของ ZFS การเชื่อมต่อทั้งสองโดยตรงผ่าน gig-E (ไม่มีสวิตช์)

ฉันใช้มินนินเพื่อตรวจสอบกล่อง แต่ฉันไม่แน่ใจว่าฉันควรคาดหวังว่าจะเป็นตัวเลขประเภทใด ใครช่วยให้ฉันได้ตัวเลขพื้นฐานเพื่อเปรียบเทียบกับหรือให้คำแนะนำใด ๆ ในการเริ่มจูน?

นี่คือสถิติ NFS ที่ฉันเห็นฉันจะโพสต์ iSCSI เมื่อฉันแก้ไข munin ในกล่อง solaris: P

เราได้ผลักดันให้ Sun X4100 เขียนบน GigE และ iSCSI ที่ถูกผูกมัดไปยัง Sun X4500 เป็น 280MB / s

มีจำนวนมากที่สามารถปรับแต่งสแต็ก TCP บน Solaris เพื่อช่วยสิ่งต่าง ๆ นี่คือการปรับแต่งสต็อกของฉัน (นำมาจากคอลเล็กชั่นเอกสารไวท์ซัน):

$ cat /etc/rc3.d/S99ndd
#!/bin/bash

NDD=/usr/sbin/ndd

$NDD -set /dev/tcp tcp_xmit_hiwat 1048576
$NDD -set /dev/tcp tcp_recv_hiwat 8388608
$NDD -set /dev/tcp tcp_max_buf 8388608
$NDD -set /dev/udp udp_xmit_hiwat 1048576
$NDD -set /dev/udp udp_recv_hiwat 8388608
$NDD -set /dev/udp udp_max_buf 8388608
$NDD -set /dev/tcp tcp_conn_req_max_q 65536
$NDD -set /dev/tcp tcp_conn_req_max_q0 65536
$NDD -set /dev/tcp tcp_fin_wait_2_flush_interval 67500

นอกจากนี้หากคุณกำลังมองหาเครื่อง OpenSolaris ของคุณก็กำลังเปลี่ยนช่วงเวลา fsflush การปรับขัดจังหวะ "เวทมนต์" และการปิดการใช้งานซอฟต์ริง ผนวกต่อไปนี้เพื่อ / etc / ระบบ (จำเป็นต้องรีบูต):

* "fsflush" tuning
set tune_t_fsflushr = 5
set autoup = 300
* Disable the Automatic Interrupt Adjustment
set dld:dld_opt = 2
* Disable "soft rings"
set ip:ip_squeue_fanout = 0
set ip:ip_soft_rings_cnt = 0

ฉันควรทำเช่นนี้กับ Solaris 10 - ไม่ใช่ OpenSolaris - แต่ฉันคิดว่า tunables น่าจะเหมาะกับคุณเหมือนกัน

ฉันเป็นแฟนตัวยงของ Filebench ที่เล่นด้วยตัวเลือกการปรับแต่งและทำการทดสอบปริมาณงาน

• FileBench บน SolarisInternals Wiki
• FileBench บน SourceForge

(เพิ่งเปลี่ยนชื่อ) OpenSolaris 2009.06 มีลักษณะที่น่าตื่นเต้นในโลกของ iSCSI และ ZFS

หวังว่านี่จะช่วยได้บ้าง!

ฉันได้รับประมาณ 90 MB / วินาทีไปยัง EMC AX150i ของฉันบน iSCSI บนอีเธอร์เน็ต 1GB

สำหรับ dd หรือ bonnie ++ (ความเร็วดิบการเขียนเชิงเส้น) เพียงครั้งเดียวคุณควรเข้าใกล้ความเร็วของสายไฟ

แต่คอขวดของคุณจะเป็นอาร์เรย์ของดิสก์เมื่อคุณเริ่มรับการโหลด IO แบบสุ่มของ VM จำนวนมากไปมากกว่าการขนส่ง

นอกจากนี้หากคุณไม่มีแคชการเขียนสำรองแบตเตอรี่ที่มี RAM จำนวนมากประสิทธิภาพของคุณจะ crater ทันทีที่คุณเริ่มรับการเขียนจำนวนมากเมื่อมี IO อื่น ๆ เกิดขึ้น

ฉันสามารถผลักดันข้อมูลผ่าน iSCSI ไปยังประมาณ 200 Mbit / วินาทีผ่านลิงค์ 1GB แต่ฉันมีดิสก์ RAID 6 14 โฮสต์โดย EMC CX4-240 ซึ่งไม่ค่อยมีอะไรมากในการใช้แคชในเวลานั้น

คอขวดที่ใหญ่ที่สุดอาจเป็นจำนวนแคชควบคุมและความเร็วของดิสก์ (สำหรับเมื่อแคชเต็ม)

ฉันได้รับประมาณ 80 MB / S ไปยังเซิร์ฟเวอร์ windows ของฉันผ่าน ISCSI บนอีเทอร์เน็ต 1G เป้าหมาย: KernSafe iStorage Server http://www.kernsafe.com/Product.aspx?id=5 ผู้ริเริ่ม: Microsoft Initiator www.microsoft.com/downloads/details.aspx?familyid=12cb3c1a-15d6-4585-b385-befd1319f825&displaylang=th en

Hardisk: ATA 7200

สำหรับพวกเราที่ใกล้ชิดกับกึ่งท้ายของสิ่งต่าง ๆ (มากกว่ามืออาชีพ) ฉันได้รับ 150MB อย่างต่อเนื่องและสม่ำเสมออ่าน 120MB เขียนจากเซิร์ฟเวอร์ W2012 dual 1gb nic ร่วมมือผ่าน draytek จัดการสวิตช์ไปยัง blackarmorsnas ผ่านทองแดง RJ45 โอนไฟล์ 20GB เดี่ยว ไม่มีการดำเนินการอื่นที่คล้ายคลึงกันระหว่างการทดสอบ เพื่อให้บรรลุถึงสิ่งนี้ฉันใช้จัมโบ้เฟรม 9k, rx & tx flow, นั่นคือการปรับแต่งไดรเวอร์ตามปกติทั้งหมด, แต่ไม่มีการปรับแต่งอื่นนอกจากการเปิดใช้งานและการเพิ่มเฟรมจัมโบ้ให้สูงสุด