ความแตกต่างระหว่างอัตลักษณ์และเครื่องเขียนคืออะไร?


41

ฉันมีปัญหาในการแยกแยะระหว่างแนวคิดทั้งสองนี้ นี่คือความเข้าใจของฉันจนถึงตอนนี้

กระบวนการคงที่เป็นกระบวนการสโตแคสติกซึ่งคุณสมบัติทางสถิติไม่เปลี่ยนแปลงตามเวลา สำหรับกระบวนการคงที่ที่เข้มงวดซึ่งหมายความว่าการกระจายความน่าจะเป็นร่วมนั้นคงที่ สำหรับกระบวนการหยุดนิ่งที่กว้างซึ่งหมายความว่าช่วงเวลาที่ 1 และ 2 นั้นคงที่

กระบวนการ ergodic เป็นกระบวนการที่คุณสมบัติทางสถิติของมันเช่นความแปรปรวนสามารถอนุมานได้จากตัวอย่างที่มีความยาวเพียงพอ ตัวอย่างค่าเฉลี่ยตัวอย่างมาบรรจบกับค่าเฉลี่ยจริงของสัญญาณถ้าคุณเฉลี่ยนานพอ

สำหรับฉันตอนนี้ดูเหมือนว่าสัญญาณจะต้องหยุดนิ่งเพื่อให้เป็นไปตามหลักสรีรศาสตร์

  • และสัญญาณประเภทใดบ้างที่คงที่ แต่ไม่เหมาะกับการใช้งาน?
  • หากสัญญาณมีความแปรปรวนเท่ากันตลอดเวลาตัวอย่างเช่นความแปรปรวนแบบเวลาเฉลี่ยจะไม่แปรเป็นค่าที่แท้จริงได้อย่างไร
  • ดังนั้นอะไรคือความแตกต่างที่แท้จริงระหว่างแนวคิดทั้งสองนี้
  • คุณสามารถยกตัวอย่างของกระบวนการที่ไม่หยุดยั้งโดยไม่ต้อง ergodic หรือ ergodic โดยไม่หยุดนิ่งได้หรือไม่?

คุณอาจต้องการดูคำตอบสำหรับคำถามที่เกี่ยวข้อง
Dilip Sarwate

การบรรยายครั้งนี้สะกดว่าเป็นอัตลักษณ์ที่เป็นส่วนย่อยของเครื่องเขียน ฉันไม่เข้าใจว่ากระบวนการเกี่ยวกับความผิดพลาดของเครื่องเขียนอยู่ใน Wikipedia อย่างไร มันหมายความว่ามีกระบวนการเกี่ยวกับอัตลักษณ์ที่ไม่หยุดนิ่งหรือไม่?
Val

@Val ฉันจะไม่ปกป้องสิ่งที่ Wikipedia พูด แต่จะชี้ให้เห็นว่าส่วนสุดท้ายของคำตอบของฉันด้านล่างมีตัวอย่างของกระบวนการ WSS ที่ไม่หยุดนิ่งและยังเป็นไปตามหลักสรีรศาสตร์
Dilip Sarwate

คำตอบ:


33

กระบวนการสุ่มคือชุดของตัวแปรสุ่มหนึ่งครั้งสำหรับแต่ละครั้งในการพิจารณา โดยทั่วไปแล้วนี่อาจเป็นเวลาต่อเนื่อง ( ) หรือเวลาที่ไม่ต่อเนื่อง (จำนวนเต็มทั้งหมดหรือเวลาทั้งหมดคงที่โดยที่คือช่วงเวลาตัวอย่าง) <t<nnTT

  • Stationarity หมายถึงการแจกแจงของตัวแปรสุ่ม โดยเฉพาะในขั้นตอนการเขียนทุกตัวแปรสุ่มมีฟังก์ชั่นการกระจายเดียวกันและอื่น ๆ โดยทั่วไปสำหรับทุกจำนวนเต็มบวกและจังหวะเวลาที่ร่วมการกระจายของตัวแปรสุ่มเป็นเช่นเดียวกับการจัดจำหน่ายร่วมกันของtau) นั่นคือถ้าเราเปลี่ยนเวลาทั้งหมดโดยรายละเอียดทางสถิติของกระบวนการจะไม่เปลี่ยนแปลงเลย: กระบวนการจะหยุดนิ่งnnt1,t2,,tn n X ( T 1 ) , X ( T 2 ) , , X ( T n ) X ( T 1 + τ ) , X ( เสื้อ2 + τ ) , , X ( t n + τ ) τnX(t1),X(t2),,X(tn)X(t1+τ),X(t2+τ),,X(tn+τ)τ.
  • ในทางตรงข้ามความผิดพลาดทางพันธุกรรมไม่ได้ดูที่คุณสมบัติทางสถิติของตัวแปรสุ่ม แต่ที่เส้นทางตัวอย่างคือสิ่งที่คุณสังเกตเห็นทางร่างกาย อ้างอิงกลับไปที่ตัวแปรสุ่มจำได้ว่าตัวแปรสุ่มเป็นการแมปจากพื้นที่ตัวอย่างไปยังจำนวนจริง ผลลัพธ์แต่ละรายการจะถูกจับคู่กับจำนวนจริงและโดยทั่วไปตัวแปรสุ่มที่แตกต่างกันจะจับคู่ผลลัพธ์ที่ได้กับตัวเลขที่แตกต่างกัน ดังนั้นลองจินตนาการว่ามีบางสิ่งที่สูงกว่าที่ได้ทำการทดลองซึ่งส่งผลให้เกิดผลลัพธ์ในพื้นที่ตัวอย่างและผลลัพธ์นี้ได้ถูกแมปไปยังหมายเลขจริง (โดยทั่วไปแตกต่างกัน) โดยตัวแปรสุ่มทั้งหมดในกระบวนการ: โดยเฉพาะการสุ่ม ตัวแปรมีการแมปωX(t)ωไปเป็นจำนวนจริงเราจะแสดงเป็น(t) หมายเลขการยกย่องให้เป็นรูปแบบของคลื่นที่เป็นตัวอย่างเส้นทางที่สอดคล้องกับและผลลัพธ์ที่แตกต่างกันจะทำให้เรามีเส้นทางที่แตกต่างกันตัวอย่าง Ergodicity แล้วเกี่ยวข้องกับคุณสมบัติของเส้นทางตัวอย่างและคุณสมบัติเหล่านี้เกี่ยวข้องกับคุณสมบัติของตัวแปรสุ่มซึ่งประกอบด้วยกระบวนการสุ่มx(t)x ( t ) ω x(t)ω

ตอนนี้สำหรับเส้นทางตัวอย่างจากกระบวนการคงที่เราสามารถคำนวณเวลาเฉลี่ย แต่เกี่ยวข้องกับความหมายของกระบวนการสุ่มอย่างไร (หมายเหตุว่ามันไม่ได้เรื่องที่ค่าของที่เราใช้ทั้งหมดตัวแปรสุ่มมีการกระจายเดียวกันและเพื่อให้มีค่าเฉลี่ยเท่ากัน (ถ้ามีค่าเฉลี่ยอยู่)) ตามที่ OP บอกค่าเฉลี่ยหรือส่วนประกอบ DC ของเส้นทางตัวอย่างจะแปรเป็นค่าเฉลี่ยของกระบวนการหากเส้นทางตัวอย่างนั้นถูกสังเกตได้นานพอหากกระบวนการนั้นเป็นอัตลักษณ์x(t)ˉ x = 1

x¯=12TTTx(t)dt
x¯μ=E[X(t)]tและเครื่องเขียน ฯลฯ นั่นคือ ergodicity คือสิ่งที่ทำให้เราสามารถเชื่อมต่อผลลัพธ์ของการคำนวณและยืนยันว่า เท่ากับ กระบวนการที่มีความเท่าเทียมกันกล่าวกันว่ามีความหมายถึงอัตลักษณ์และกระบวนการหมายถึงอัตลักษณ์ถ้าฟังก์ชัน autocovariance ของมันมีคุณสมบัติ:
limTx¯=limT12TTTx(t)dt
μ = E [ X ( T ) ] = - ยูเอฟเอ็กซ์ ( U )
μ=E[X(t)]=ufX(u)du.
C X ( τ ) lim T 1CX(τ)
limT12TTTCX(τ)dτ=0.

ดังนั้นกระบวนการที่ไม่หยุดนิ่งทั้งหมดจึงจำเป็นต้องมีความหมายตามหลักสรีรศาสตร์ แต่ก็มีรูปแบบอื่น ๆของการยศาสตร์เช่นกัน ตัวอย่างเช่นสำหรับกระบวนการautocovariance-ergodicฟังก์ชัน autocovariance ของส่วน จำกัด (พูดสำหรับของตัวอย่างเส้นทางลู่เข้าสู่ฟังก์ชันของกระบวนการ ในฐานะที่เป็นคำสั่งแบบครอบคลุมว่ากระบวนการนั้นเป็นไปตามหลักสรีรศาสตร์อาจหมายถึงรูปแบบต่าง ๆ หรืออาจหมายถึงรูปแบบที่เฉพาะเจาะจงหนึ่งไม่สามารถบอกได้t(T,T)x(t)CX(τ)T

เป็นตัวอย่างของความแตกต่างระหว่างทั้งสองแนวคิดที่สมมติว่าสำหรับทุกภายใต้การพิจารณา นี่คือเป็นตัวแปรสุ่ม นี่เป็นกระบวนการที่อยู่กับที่: แต่ละมีการแจกแจงแบบเดียวกัน (กล่าวคือการกระจายของ ), ค่าเฉลี่ยเดียวกัน , ความแปรปรวนเดียวกันและอื่น ๆ ; แต่ละและมีการแจกแจงข้อต่อที่เหมือนกัน แต่กระบวนการนี้ไม่ได้ อัตลักษณ์เนื่องจากเส้นทางแต่ละตัวอย่างเป็นค่าคงที่ โดยเฉพาะถ้าการทดลองของการทดสอบ (ตามที่ดำเนินการโดยคุณหรือโดยความเป็นเลิศ) จะส่งผลให้X(t)=YtYX(t)YE[X(t)]=E[Y]X(t1)X(t2)Yมีค่าจากนั้นเส้นทางตัวอย่างของกระบวนการสุ่มที่สอดคล้องกับผลการทดลองนี้มีค่าสำหรับทุกและค่า DC ของเส้นทางตัวอย่างคือไม่ใช่ไม่ว่าคุณจะสังเกตเส้นทางตัวอย่าง (น่าเบื่อ) นานแค่ไหนก็ตาม ในจักรวาลคู่ขนาน, การพิจารณาคดีจะส่งผลให้และเส้นทางตัวอย่างในจักรวาลที่จะมีค่าสำหรับทุกเสื้อมันไม่ใช่เรื่องง่ายที่จะเขียนข้อกำหนดทางคณิตศาสตร์เพื่อยกเว้นเรื่องไร้สาระเช่นนั้นออกจากคลาสของกระบวนการที่อยู่กับที่และนี่คือตัวอย่างที่น้อยที่สุดของกระบวนการสุ่มแบบคงที่ซึ่งไม่ใช่อัตลักษณ์ααtαE[X(t)]=E[Y]Y=ββt

จะมีกระบวนการสุ่มที่ไม่หยุดนิ่ง แต่เป็นอัตลักษณ์หรือไม่? ดีN0ไม่ถ้ามีอัตลักษณ์ที่เราหมายถึงอัตลักษณ์ในทุกวิถีทางหนึ่งที่เป็นไปได้สามารถคิด: ยกตัวอย่างเช่นถ้าเราวัดส่วนของเวลาในระหว่างที่มีส่วนยาวของเส้นทางตัวอย่างมีค่าที่มากที่สุด , นี่เป็นค่าประมาณที่ดีของ , ค่าของ (สามัญ) CDFของที่หากกระบวนการเป็น asumeed to เป็นอัตลักษณ์ด้วยความเคารพต่อฟังก์ชั่นการกระจาย แต่เราสามารถมีกระบวนการสุ่มได้x(t)αP(X(t)α)=FX(α)FXX(t)αไม่หยุดนิ่ง แต่ก็มีความหมาย -พลังงานและautocovariance -พลังงาน - ตัวอย่างเช่นพิจารณากระบวนการ โดยที่ใช้ค่าที่มีโอกาสเท่ากันสี่ค่าและ 2 โปรดทราบว่าแต่ละเป็นตัวแปรสุ่มแบบแยกซึ่งโดยทั่วไปแล้วจะใช้ค่าที่น่าจะเป็นสี่และ , มันง่ายที่จะเห็นว่าโดยทั่วไปและ{X(t):X(t)=cos(t+Θ),<t<}Θ0,π/2,π3π/2X(t)cos(t),cos(t+π/2)=sin(t),cos(t+π)=cos(t)cos(t+3π/2)=sin(t)X(t)X(s)มีการแจกแจงที่แตกต่างกันและดังนั้นกระบวนการไม่ได้อยู่ที่อันดับที่หนึ่งนิ่ง ในทางตรงกันข้าม สำหรับทุกๆในขณะที่ ในระยะสั้นกระบวนการมีค่าเฉลี่ยเป็นศูนย์และฟังก์ชั่น autocorrelation (และ autocovariance) ขึ้นอยู่กับความแตกต่างของเวลาเท่านั้นดังนั้นกระบวนการจึงเป็น

E[X(t)]=14cos(t)+14(sin(t))+14(cos(t))+14sin(t)=0
t
E[X(t)X(s)]=14[cos(t)cos(s)+(cos(t))(cos(s))+sin(t)sin(s)+(sin(t))(sin(s))]=12[cos(t)cos(s)+sin(t)sin(s)]=12cos(ts).
tsความรู้สึกไวนิ่ง แต่มันไม่ได้อยู่กับคำสั่งแรกและไม่สามารถหยุดอยู่กับคำสั่งที่สูงขึ้นได้เช่นกัน ตอนนี้เมื่อทำการทดลองและรู้ค่าของเราจะได้ฟังก์ชั่นตัวอย่างซึ่งจะต้องเป็นหนึ่งในและซึ่งมีค่า DCซึ่งเท่ากับและฟังก์ชั่น autocorrelation คือเช่นเดียวกับและดังนั้นกระบวนการนี้จึงมีความหมายถึงอัตลักษณ์และอัตชีวประวัติ - อัตลักษณ์แม้ว่าจะไม่ได้อยู่กับที่เลย ในการปิดฉันสังเกตว่ากระบวนการไม่ได้เป็นไปตามหลักสรีรศาสตร์ด้วยความเคารพต่อฟังก์ชั่นการกระจายΘ±cos(t)±sin(t)0012cos(τ)RX(τ)นั่นคือมันไม่สามารถพูดได้ว่าเป็นอัตลักษณ์ในทุกด้าน


1
ฉันไม่เข้าใจตัวอย่าง หากคุณบอกว่า Y เป็นค่าคงที่ดังนั้นเส้นทางใด ๆ ของ x (t) คือค่าคงที่ ค่าเฉลี่ยของค่าคงตัวคือตัวเองดังนั้น E [X (t)] = E [Y] = Y. เว้นแต่ฉันจะพลาดบางสิ่งบางอย่าง
Royi

ฉันเพิ่มสองสามคำเพื่ออธิบายความหมาย เป็นตัวแปรสุ่มไม่ใช่ค่าคงที่ ความคุ้มค่าในการทดลองการทดลองใด ๆ ที่ไม่จำเป็นต้องเป็นเช่นเดียวกับ[Y] YE[Y]
Dilip Sarwate

1
ถ้าสัญญาณเป็นอัตลักษณ์หมายถึงเวลาเฉลี่ยมาบรรจบกับค่าเฉลี่ยทั้งมวล แต่ต่าง ๆมีความหมายที่ต่างกันเพราะกระบวนการไม่คงที่คำจำกัดความของค่าเฉลี่ยทั้งมวลที่เวลาเฉลี่ยมาบรรจบกันคือเท่าใด X
Dilip Sarwate

1
@ Matt ในการแก้ปัญหาของหนังสือ "ระบบการสื่อสาร" simon haykin เขียนว่า "สำหรับกระบวนการสุ่มที่จะต้องมีการปรับตัวเพื่อให้เป็นอัตลักษณ์"
Roney Island

1
@ ColinHicks ใช่นั่นเป็นคำสะกดผิดที่ฉันจะแก้ไขในไม่ช้า ขอขอบคุณที่แจ้งให้ทราบ
Dilip Sarwate

6

ขอให้เราพิจารณากระบวนการสุ่มสมมุติที่ฟังก์ชันตัวอย่างเป็นค่า DC และแตกต่างจากกัน:

X 1 (t) = constant = ค่าเฉลี่ยของ X 1 (t)

X 2 (t) = constant = ค่าเฉลี่ยของ X 2 (t)

ค่าเฉลี่ยชั่วคราวของและคงที่ แต่ไม่เท่ากัน ถ้ากระบวนการของฉันคือเครื่องเขียนและเท่ากันและ RVs (ดูคำตอบของ Dilip)X 2 ( t ) X ( t 1 ) X ( t 2 )X1(t)X2(t)X(t1)X(t2)

ดังนั้นค่าเฉลี่ยของจึงคงที่X(t)

ค่าเฉลี่ยของวงดนตรีนี้ไม่เท่ากับค่าเฉลี่ยชั่วคราวของและ (พวกมันเองไม่เท่ากัน) สิ่งนี้สามารถเรียกได้ว่าเป็นเครื่องเขียน แต่ไม่ใช่กระบวนการที่เกี่ยวกับอัตลักษณ์X 2 ( t )X1(t)X2(t)

ในทางตรงกันข้ามโดยที่คือ RV นั้นเป็นอัตลักษณ์θX(t)=Acos(ωt+θ)θ


2

ฉันหวังว่าวิดีโอนี้(จากสถาบันเทคโนโลยีแห่งฟลอริดาชื่อ "ความกว้างกว้างคืออะไร staionary ความเข้มงวดสัญญาณ ergodic" โดยดร. Ivica Kostanic ในชั้นเรียนทฤษฎีการสื่อสารของเขา) จาก 16:55 สามารถล้างข้อสงสัยของคุณ


ยินดีต้อนรับสู่ DSP.SE! ฉันอยากจะแนะนำให้คุณเพิ่มชื่อและคำอธิบายบางอย่างในวิดีโอในกรณีที่มันถูกลบบางวันและลิงค์ไม่ถูกต้อง ขอขอบคุณ.
lennon310

1

กระบวนการ ergodic เป็นกระบวนการที่คุณสามารถทดแทนค่าเฉลี่ย ergodic สำหรับค่าเฉลี่ยชั่วคราว

ค่าเฉลี่ยความแปรปรวนและอื่น ๆ ... ถูกกำหนดโดยทำตามกระบวนการเมื่อเวลาผ่านไปและค่าเฉลี่ย ฯลฯ ... ตัวอย่างเช่นหากคุณต้องการทราบค่าเฉลี่ยของขนาดของฉันคุณจะต้องเฉลี่ยจากตอนที่ฉันเกิด ถึงเมื่อฉันตาย เห็นได้ชัดว่าตัวอย่างในภายหลังไม่ใช่กระบวนการคงที่

ค่าเฉลี่ยเชิงอัตลักษณ์จะเท่ากับถ้าแทนที่จะติดตามขนาดของฉันไปตามเวลาคุณจะหยุดเวลาและเอาค่าเฉลี่ยไปเป็นตัวอย่างของมนุษย์แต่ละคนที่แตกต่างกัน ไม่มีเหตุผลสำหรับสองวิธีนี้ที่จะเหมือนกันดังนั้นกระบวนการขนาดของฉันจึงไม่เป็นไปตามหลักสรีรศาสตร์

นี่เป็นตัวอย่างที่ไม่ดี แต่มันสำคัญมากถ้าคุณพิจารณากรณีของก๊าซที่สมดุล ยกตัวอย่างเช่นความเร็วเฉลี่ยกำลังสอง (หมายถึงช่วงเวลา) แต่มักคำนวณโดยใช้ค่าเฉลี่ยทั้งมวล : ค่าเฉลี่ยของความเร็วจตุรัสของโมเลกุลทั้งหมดของ ก๊าซในทันทีทีV2tV2¯V2t

ส่วนใหญ่ทฤษฎีบทอุณหพลศาสตร์ต้องใช้ แต่มันเป็นเรื่องง่ายมากขึ้นในการคำนวณและการใช้ขวา> สมมติฐานด้านอัตลักษณ์เป็นสมมติฐานที่ระบุว่ามันถูกต้องที่จะทดแทนสิ่งหนึ่ง กระบวนการ ergodic เป็นกระบวนการที่สมมติฐานเกี่ยวกับอัตลักษณ์เป็นจริงV2V2¯V2

สมมติฐานเกี่ยวกับอัตลักษณ์เป็นเท็จในกรณีทั่วไป


1
ฉันไม่เข้าใจคำตอบนี้ กระบวนการของขนาดของ Jolow นั้นไม่คงที่หรือไม่เป็นไปตามหลักสรีรศาสตร์ในขณะที่ OP กำลังสงสัยว่าจะมีกระบวนการคงที่ที่ไม่ได้เป็นอัตลักษณ์ คำตอบส่วนใหญ่แล้วโดยทั่วไปสมมติฐานเกี่ยวกับอัตลักษณ์เป็นเท็จและเป็นความจริงในระดับสากลว่าค่าเฉลี่ยตัวอย่างแตกต่างจากค่าเฉลี่ยของวงดนตรีเพียงแค่คุ้นเคยกับมันและอยู่กับมัน
Dilip Sarwate

@DilipSarwate: หลังจากอ่านอีกครั้งมันเป็นคำตอบที่ไม่ดีที่ไม่ตอบคำถามและฉันกำลังพิจารณาที่จะลบมัน ฉันกำลังนึกถึงการบรรยายอุณหพลศาสตร์ของฉันในขณะที่คำถามเกี่ยวกับสถิติมากขึ้น ...
Jean-Yves

@DilipSarwate ขนาดของ Jolow คืออะไร?
Roney Island

1
@MichaelCorleone ฉันจำไม่ได้ว่าการอ้างอิงถึง Jolow หมายถึงอะไร ฉันเดาได้ว่า Jean-Yves โพสต์คำตอบของเขาภายใต้ Nom-de-plume Jolow และฉันใช้ชื่อนั้นในคำตอบของฉันและเขาได้ตัดสินใจใช้ Jean-Yves เป็นชื่อผู้ใช้ของเขาบน stackexchange การเปลี่ยนชื่อดังกล่าวสะท้อนให้เห็นถึงสิ่งที่ปรากฏบนหน้าจอ แต่ไม่ได้บันทึกเป็นการแก้ไขคำตอบ
Dilip Sarwate

@DilipSarwate: คุณพูดถูก โจโลวเป็นเพียงชื่อเล่นของฉัน
Jean-Yves

1

สำหรับตัวอย่างของกรณีตรงข้าม (เช่นกระบวนการสุ่มที่เป็นอัตลักษณ์ แต่ไม่หยุดนิ่ง) ให้พิจารณากระบวนการเสียงสีขาวที่เป็นแอมพลิจูดปรับโดยคลื่นสี่เหลี่ยมที่กำหนดขึ้น เวลาเฉลี่ยของทุกฟังก์ชั่นตัวอย่างเท่ากับศูนย์เช่นเดียวกับค่าเฉลี่ยของวงดนตรีตลอดเวลา ดังนั้นกระบวนการจึงเป็นไปตามหลักสรีรศาสตร์ อย่างไรก็ตามความแปรปรวนของฟังก์ชั่นตัวอย่างใด ๆ แสดงการพึ่งพาคลื่นสี่เหลี่ยมตรงตามเวลาดังนั้นกระบวนการจึงไม่หยุดนิ่ง

ตัวอย่างนี้เป็นลักษณะเฉพาะของเครื่องเขียนแบบไวด์สกรีน แต่เราสามารถสร้างตัวอย่างที่เกี่ยวข้องซึ่งยังคงเป็นอัตลักษณ์ แต่ไม่สามารถนิ่งได้


0

ขณะที่ฉันดูต่ำกว่าตัวอย่างด้านล่างแสดงให้เห็นถึงกระบวนการเกี่ยวกับอัตลักษณ์และการหยุดนิ่ง

 X1 X2 X3  | mean var ...
 1  2  3   | 2    1
 2  3  1   | 2
 3  1  2   | 2
 ----------

หมายถึง 2 2 2 var 1

เพราะค่าเฉลี่ยและความแปรปรวนของทุกคอลัมน์คงที่ตลอดเวลาและค่าเฉลี่ยและความแปรปรวนของทุกแถวคงที่ตลอดเวลา

โดยการใช้ไซต์ของเรา หมายความว่าคุณได้อ่านและทำความเข้าใจนโยบายคุกกี้และนโยบายความเป็นส่วนตัวของเราแล้ว
Licensed under cc by-sa 3.0 with attribution required.