ฉันมีแอพพลิเคชั่นที่พัฒนาขึ้นโดยใช้รูปแบบ MVC และฉันต้องการทำดัชนีตอนนี้หลาย ๆ โมเดลซึ่งหมายความว่าแต่ละรุ่นมีโครงสร้างข้อมูลที่แตกต่างกัน
ควรใช้ดัชนี mutliple ดีกว่าสำหรับแต่ละรุ่นหรือมีประเภทภายในดัชนีเดียวกันสำหรับแต่ละรุ่นหรือไม่ ทั้งสองวิธีจะต้องใช้คำค้นหาอื่นที่ฉันคิด ฉันเพิ่งเริ่มสิ่งนี้
มีความแตกต่างระหว่างทั้งสองแนวคิดในด้านประสิทธิภาพหรือไม่หากชุดข้อมูลมีขนาดเล็กหรือใหญ่?
ฉันจะทดสอบคำถามที่ 2 ด้วยตนเองถ้ามีใครแนะนำข้อมูลตัวอย่างที่ดีให้ฉันเพื่อจุดประสงค์นั้น
คำตอบ:
มีความหมายที่แตกต่างกันสำหรับทั้งสองวิธี
สมมติว่าคุณกำลังใช้การตั้งค่าเริ่มต้นของ Elasticsearch การมี 1 ดัชนีสำหรับแต่ละรุ่นจะเพิ่มจำนวนเศษของคุณอย่างมีนัยสำคัญเนื่องจาก 1 ดัชนีจะใช้ 5 ชิ้นส่วน 5 รุ่นข้อมูลจะใช้ 25 ชิ้นส่วน ในขณะที่มีวัตถุ 5 ชนิดใน 1 ดัชนีจะยังคงใช้ 5 ชิ้น
ผลกระทบของการมีตัวแบบข้อมูลแต่ละตัวเป็นดัชนี:
ผลกระทบสำหรับการมีโมเดลข้อมูลแต่ละชนิดเป็นชนิดวัตถุภายในดัชนี:
หากคุณถามว่าข้อมูลอะไรมากเกินไปเทียบกับข้อมูลขนาดเล็ก? โดยทั่วไปแล้วจะขึ้นอยู่กับความเร็วโปรเซสเซอร์และ RAM ของฮาร์ดแวร์จำนวนข้อมูลที่คุณจัดเก็บภายในแต่ละตัวแปรในการแมปสำหรับ Elasticsearch และข้อกำหนดการสืบค้นของคุณ การใช้หลายแง่มุมในข้อความค้นหาของคุณจะทำให้เวลาตอบสนองของคุณช้าลงอย่างมาก ไม่มีคำตอบที่ตรงไปตรงมาสำหรับเรื่องนี้และคุณจะต้องทำการวัดประสิทธิภาพตามความต้องการของคุณ
By default elasticsearch rejects search requests that would query more than 1000 shards. The reason is that such large numbers of shards make the job of the coordinating node very CPU and memory intensive. It is usually a better idea to organize data in such a way that there are fewer larger shards. In case you would like to bypass this limit, which is discouraged, you can update the action.search.shard_count.limit cluster setting to a greater value."
แม้ว่าคำตอบของโจนาธานจะถูกต้องในเวลานั้นโลกได้ก้าวไปข้างหน้าและตอนนี้ดูเหมือนว่าคนที่อยู่เบื้องหลัง ElasticSearch มีแผนระยะยาวที่จะให้การสนับสนุนหลายประเภท:
ดังนั้นสำหรับโครงการใหม่การใช้เพียงชนิดเดียวต่อดัชนีจะทำให้การปรับรุ่นในที่สุดเป็น ElasticSearch 6.x ง่ายขึ้น
คำตอบของโจนาธานนั้นเยี่ยมมาก ฉันจะเพิ่มจุดอื่น ๆ เพื่อพิจารณา:
ทั้งคำตอบข้างต้นนั้นยอดเยี่ยมมาก!
ฉันกำลังเพิ่มตัวอย่างหลายประเภทในดัชนี สมมติว่าคุณกำลังพัฒนาแอพเพื่อค้นหาหนังสือในห้องสมุด มีคำถามสองสามข้อที่จะถามเจ้าของห้องสมุด
คำถาม:
คุณวางแผนที่จะจัดเก็บหนังสือกี่เล่ม
คุณจะเก็บหนังสือประเภทไหนในห้องสมุด?
คุณจะค้นหาหนังสืออย่างไร
คำตอบ:
ฉันวางแผนที่จะเก็บหนังสือ 50 k - เป็น 70 k หนังสือ (โดยประมาณ)
ฉันจะมีหนังสือเกี่ยวกับเทคโนโลยี 15 k -20 k (วิทยาศาสตร์คอมพิวเตอร์วิศวกรรมเครื่องกลวิศวกรรมเคมีและอื่น ๆ ) หนังสือประวัติศาสตร์ 15 พันเล่มหนังสือวิทยาศาสตร์การแพทย์ 10 พันเล่ม หนังสือเกี่ยวกับภาษา 10 k (อังกฤษ, สเปนและอื่น ๆ )
ค้นหาตามชื่อผู้แต่งชื่อผู้แต่งปีที่พิมพ์ชื่อผู้จัดพิมพ์ (สิ่งนี้ทำให้คุณมีความคิดเกี่ยวกับข้อมูลที่คุณควรเก็บไว้ในดัชนี)
จากคำตอบข้างต้นเราสามารถพูดได้ว่าสคีมาในดัชนีของเราควรมีลักษณะเช่นนี้
// นี่ไม่ใช่การแม็พที่แน่นอนเพียงเพื่อเป็นตัวอย่าง
"yearOfPublish":{
"type": "integer"
},
"author":{
"type": "object",
"properties": {
"firstName":{
"type": "string"
},
"lastName":{
"type": "string"
}
}
},
"publisherName":{
"type": "string"
}
}
เพื่อให้บรรลุตามข้างต้นเราสามารถสร้างดัชนีหนึ่งชื่อ Books และสามารถมีหลายประเภท
ดัชนี: หนังสือ
ประเภท: วิทยาศาสตร์ศิลปะ
(หรือคุณสามารถสร้างหลายประเภทเช่นเทคโนโลยีวิทยาศาสตร์การแพทย์ประวัติศาสตร์ภาษาหากคุณมีหนังสือมากขึ้น)
สิ่งสำคัญที่ควรทราบที่นี่คือสคีมาจะคล้ายกัน แต่ข้อมูลไม่เหมือนกัน และที่สำคัญอื่น ๆ คือข้อมูลทั้งหมดที่คุณจัดเก็บ
หวังว่าข้างต้นช่วยเมื่อไปสำหรับประเภทที่แตกต่างกันในดัชนีถ้าคุณมีสคีที่แตกต่างกันคุณควรพิจารณาดัชนีที่แตกต่างกัน ดัชนีขนาดเล็กสำหรับข้อมูลน้อยลง ดัชนีใหญ่สำหรับข้อมูลขนาดใหญ่ :-)