ฉันพยายามที่จะทำให้หัวของฉันรอบต่อไปนี้เป็นข้อพิสูจน์ว่าเกาส์มีเอนโทรปีสูงสุด
ขั้นตอนที่ติดดาวทำให้รู้สึกอย่างไร ความแปรปรวนร่วมที่เฉพาะเจาะจงจะแก้ไขช่วงเวลาที่สองเท่านั้น เกิดอะไรขึ้นกับช่วงเวลาที่สามสี่และห้า?
ฉันพยายามที่จะทำให้หัวของฉันรอบต่อไปนี้เป็นข้อพิสูจน์ว่าเกาส์มีเอนโทรปีสูงสุด
ขั้นตอนที่ติดดาวทำให้รู้สึกอย่างไร ความแปรปรวนร่วมที่เฉพาะเจาะจงจะแก้ไขช่วงเวลาที่สองเท่านั้น เกิดอะไรขึ้นกับช่วงเวลาที่สามสี่และห้า?
คำตอบ:
ขั้นตอนติดดาวที่ถูกต้องเพราะ (ก)และมีข้อที่ศูนย์เดียวกันและช่วงเวลาที่สองและ (ข)เป็นฟังก์ชั่นพหุนามของส่วนประกอบของมีแง่มีทั้งหมดองศาหรือ2q log ( p ) x 0 2
คุณจำเป็นต้องรู้เพียงสองสิ่งเกี่ยวกับการแจกแจงปกติหลายตัวแปรที่มีค่าเฉลี่ยศูนย์:
x = ( x 1 , x 2 , … , x n ) C p i jบันทึก( p ( x ) ) = C + n ∑ i , j = 1 p i jเป็นฟังก์ชันกำลังสองของโดยไม่มีเงื่อนไขเชิงเส้น มีค่าคงที่และที่
(แน่นอนว่าและสามารถเขียนได้ในรูปของแต่รายละเอียดนี้ไม่สำคัญ)p i j Σ
แจกช่วงเวลาที่สอง นั่นคือ
เราอาจใช้ข้อมูลนี้เพื่อหาส่วนประกอบที่สำคัญ:
มันแบ่งเป็นผลรวมของสองส่วน:
เพราะทั้งและเป็นฟังก์ชันความหนาแน่นของความน่าจะเป็น
เพราะแต่ละอินทิกรัลอยู่ทางขวามือ ด้านและมีค่าเดียวกัน (กับปัญญา ) นี่คือสิ่งที่คำพูด "ให้ผลในช่วงเวลาเดียวกันของรูปกำลังสอง" มีวัตถุประสงค์เพื่อพูด
ผลลัพธ์จะตามมาทันที: เนื่องจากเราสรุป นั่น∫ Q ( x ) เข้าสู่ระบบ( P ( x ) ) d x = ∫ P ( x ) เข้าสู่ระบบ( P ( x ) ) d x