ปัญหาประสิทธิภาพการทำงานกับเว็บไซต์ / ร้านค้าขนาด 1k to 10k

ฉันพยายามหาวิธีปรับปรุงประสิทธิภาพของวีโอไอพีเมื่อจำนวนเว็บไซต์ / ร้านค้าเกิน 1k และเป้าหมายของฉันอยู่ที่ประมาณ 10k นี่คือคำถาม คำแนะนำใด ๆ / ช่วยเหลือยินดีต้อนรับอย่างมาก!

1. การเพิ่มเว็บไซต์ / ร้านค้าใหม่ช้า
   ฉันแสดงความคิดเห็น $ this-> cleanModelCache () ใน _afterSave () ใน Mage_Core_Model_Abstract และสถานการณ์ดูดีขึ้น แต่เริ่มช้าลงด้วยจำนวนเว็บไซต์ / ร้านค้าที่เพิ่มขึ้น และฉันไม่รู้ว่าสิ่งนี้จะส่งผลกระทบต่อระบบทั้งหมดในอนาคต

2. การเรียก API ช้าลง
   หนึ่งในกระบวนการหลักคือการสั่งซื้อ โมเดลที่กำหนดเองของฉันเกี่ยวข้องกับมันโดยการประมวลผลข้อมูลบางส่วนและใช้โมเดลการขาย / เสนอราคาและโมเดลการขาย / service_quote กระบวนการเริ่มต้นด้วย Oauth ทั้ง Oauth และการสั่งซื้อจะใช้เวลานานขึ้นเมื่อจำนวนเว็บไซต์ / ร้านค้าโตขึ้นและปริมาณการใช้หน่วยความจำดูใหญ่ขึ้น สิ่งนี้เกี่ยวข้องกับ Mage ในการโหลด config xml หรือไม่และข้อเท็จจริงที่ว่าข้อมูลการกำหนดค่ามีขนาดใหญ่ขึ้นด้วยจำนวนเว็บไซต์ที่เพิ่มขึ้นหรือไม่

3. การเปิดตัว n98-magerun dev: คอนโซลใช้เวลานาน ไม่ทราบสาเหตุของมัน

4. การบันทึกการกำหนดค่าจากแผงผู้ดูแลระบบใช้เวลานานกว่า ไม่รู้จะปรับปรุงมันอย่างไร

เป็นไปได้หรือไม่ที่จะสร้างวิธีที่วีโอไอพีสร้างและโหลดข้อมูลการกำหนดค่าเพื่อลดการใช้หน่วยความจำ นี่เป็นปัจจัยหนึ่งที่ทำให้เกิดปัญหาด้านประสิทธิภาพสำหรับสถานการณ์ของฉันหรือไม่

อินสแตนซ์ Magento ปัจจุบัน: Version = Magento EE 1.14.2.4;
กำหนดค่าแคช ปิดแคชอื่น ๆ
ใช้ Mysql 5.6 และ MongoDB (สำหรับ catalog_category_entity, catalog_product_entity, core_website);
จำนวนเว็บไซต์ = จำนวนร้านค้า = จำนวนการดู = 1024;
จำนวนผลิตภัณฑ์ = 4501;

ขอบคุณทุกคนล่วงหน้า!

หนึ่งในเหตุผลที่ทำให้ช้าคือเนื่องจากการกำหนดค่าสำหรับแต่ละร้านซ้ำจาก / config / เว็บไซต์และ / config / global และรหัสสำหรับการทำที่ไม่ได้มีประสิทธิภาพอย่างน้อย การเปลี่ยนแปลงการตั้งค่าใด ๆ อาจทำให้เกิด 10 นาทีหลายนาทีหากไม่ใช่ชั่วโมงของประสิทธิภาพที่ลดลงและปริมาณงาน การทำให้มีประสิทธิภาพมากขึ้นโดยทั่วไปจะหมายถึงว่า Ben Marks จะมาตามคุณ ... และไม่ใช่ในทางที่ดี

หากคุณกำลังจะไปตามเส้นทางนี้วิธีที่ง่ายที่สุดคือการติดตั้ง Magento 10k และมีนายหน้าบางประเภทที่มอบหมายการร้องขอไปยังเว็บไซต์ที่เหมาะสม แม้ว่ามันจะแน่นอนขึ้นอยู่กับกรณีการใช้งานจริงของคุณ

[เพิ่ม]

ขึ้นอยู่กับกรณีการใช้งานที่คุณอาจจะสามารถใช้หมวดหมู่เป็นร้านค้าหลอก ในทางเทคนิคแล้วคุณสามารถใช้เค้าโครง XML เพื่อเปลี่ยนชุดรูปแบบต่อการจัดเก็บ แต่คุณจะพบข้อ จำกัด ในการชำระเงิน ร้านค้าทั้งหมดจะต้องแชร์การชำระเงิน

ไม่ว่าจะด้วยวิธีใดร้านค้า 10k Magento ก็สามารถทำได้โดยที่ไม่สามารถทำได้ แต่มันจะเป็นถนนที่ยากลำบากไม่ว่าเส้นทางไหนที่คุณเลือก

คุณสามารถลองแฮ็คหลักและเปิดใช้งานการแยกแคชเว็บไซต์ คุณสามารถลองแฮ็คฐานข้อมูลและจัดเก็บข้อมูลการกำหนดค่าในหน่วยความจำ คุณสามารถลองแทนที่แคชการกำหนดค่าด้วยสิ่งที่ฉลาดกว่า - พูดการแคชข้อมูลจากไฟล์ xml [ซึ่งเป็นแบบคงที่และนำไปใช้กับเว็บไซต์และร้านค้าทั้งหมด] ในขณะที่ดึงข้อมูลการแทนที่แบบไดนามิก

ฉันเป็นคนที่แต่งตัวประหลาดเซิร์ฟเวอร์ดังนั้นฉันจะไปกับฐานข้อมูล โดยเฉพาะอย่างยิ่งเนื่องจากเป็นเรื่องเล็กน้อยที่จะทำ

หากคุณสามารถควบคุมเซิร์ฟเวอร์ฐานข้อมูลของคุณได้: เปลี่ยนชื่อตาราง core_config_data เป็น core_config_data_offline สร้างตาราง core_config_data ใหม่โดยใช้ MEMORY storage engine http://dev.mysql.com/doc/refman/5.7/en/memory-storage-engine.html คัดลอกข้อมูลทั้งหมดจาก core_config_data_offline ไปยัง core_config_data

ตั้งค่างาน cron เพื่อตรวจสอบว่ามี core_config_data อยู่หรือไม่หากคัดลอกข้อมูลทั้งหมดจากที่นั่นไปยัง core_config_data_offline หากไม่มีให้สร้างและคัดลอกทุกอย่างจาก core_config_data_offline ไปยัง core_config_data

ปิดแคชการกำหนดค่า เมื่อเปิดใช้งานแคชการกำหนดค่าคุณจะได้รับการเพิ่มประสิทธิภาพสำหรับข้อมูลการกำหนดค่าครั้งแรกเท่านั้นที่อ่านจากฐานข้อมูล - หลังจากนั้นข้อมูลนั้นอยู่ในแคชและคุณประสบ บนข้อเสียไฟล์ xml จะไม่ถูกแคชอีกต่อไปดังนั้นคุณแลกเปลี่ยนประสิทธิภาพการทำงานของข้อมูลการกำหนดค่าขนาดใหญ่ที่ไม่ได้จัดประเภทเพื่อประสิทธิภาพในการแยกวิเคราะห์ไฟล์ xml จำนวนมาก

คุณอาจต้องการทดสอบด้วยการเปลี่ยนไฟล์ Mage / Core / Model / Config.php และเปิดใช้งานแคชแต่ละเว็บไซต์ โดยค่าเริ่มต้นข้อมูลการกำหนดค่าเฉพาะของแต่ละร้านจะถูกแคชแยกกัน ข้อมูลการกำหนดค่าเว็บไซต์ทั้งหมดถูกแคชไว้ในวัตถุเดียว

โปรดทราบว่านี่เป็นเพียงการแทนที่การกำหนดค่า [การตั้งค่าผู้ดูแลระบบ] ดังนั้นหากคุณทำการเปลี่ยนแปลงการกำหนดค่าทั้งหมดที่ระดับร้านค้าของคุณตั้งค่าไว้แล้ว หากคุณใช้ "สืบทอดจากเว็บไซต์" และทำการเปลี่ยนแปลงการกำหนดค่าเฉพาะของร้านค้าส่วนใหญ่ที่ระดับไซต์ - แคชจะมีทุกเว็บไซต์ คุณสามารถแยกมันออกได้ดีกว่ามาก ป้องกัน $ _cacheSections = array ('admin' => 0, 'adminhtml' => 0, 'crontab' => 0, 'ติดตั้ง' => 0, 'stores' => 1, 'เว็บไซต์' => 0);

ถึง

protected $_cacheSections = array(
    'admin'     => 0,
    'adminhtml' => 0,
    'crontab'   => 0,
    'install'   => 0,
    'stores'    => 1,
    'websites'  => 1
);