“ ความหลากหลาย” หมายถึงอะไร?

การใช้ "ความแปรปรวน" หมายถึงการเพิ่มประสิทธิภาพเสมอผ่านการอนุมานแบบผันแปรหรือไม่?

ตัวอย่าง:

• "ตัวเข้ารหัสอัตโนมัติแบบแปรผัน"
• "วิธีเบย์แบบแปรผัน"
• "กลุ่มการเปลี่ยนรูปแบบแปรปรวน"

มันหมายถึงการใช้การอนุมานแบบผันแปร (อย่างน้อยสำหรับสองคนแรก)

กล่าวโดยสรุปคือวิธีการประมาณความน่าจะเป็นสูงสุดเมื่อความหนาแน่นของความน่าจะเป็นมีความซับซ้อน (และ MLE นั้นยาก)

ใช้ Evidence Lower Bound (ELBO) เป็นพร็อกซีเพื่อ ML:

$log(p(x)) \geq \mathbb{E}_q[log(p, Z)] - \mathbb{E}_q[log(q(Z))]$

$q$$Z$

$q$

มีบทช่วยสอนที่ดีเกี่ยวกับการอนุมานแบบแปรผัน โดย David Blei ที่คุณสามารถตรวจสอบได้หากคุณต้องการคำอธิบายที่เป็นรูปธรรมมากขึ้น

แก้ไข:

$KL(q, p)$