Nếu là IID, thì hãy tính , trong đó


14

Câu hỏi

Nếu là IID, thì hãy tính , trong đó .X 1 , , X n ~ N ( μ , 1 ) X1,,XnN(μ,1)E ( X 1 | T )E(X1T) T = Σ i X iT=iXi


Cố gắng : Vui lòng kiểm tra nếu dưới đây là chính xác.

Giả sử, chúng tôi lấy tổng của những kỳ vọng có điều kiện sao cho, Có nghĩa là mỗi kể từ là IID.Σ i E ( X i |T ) =E ( Σ i X i |T ) =T.

iE(XiT)=E(iXiT)=T.
E(XiT)=TnE(XiT)=Tn X1,...,XnX1,,Xn

Do đó, . Nó có đúng không?E ( X 1 | T ) = TnE(X1T)=Tn


2
Các không có điều kiện trên nhưng có phân phối chung có thể trao đổi. Đây là những gì ngụ ý rằng các kỳ vọng có điều kiện của họ đều bằng nhau (với T / n ). X iXi T TT / nT/n
Jarle Tufto

@JarleTufto: Ý của bạn là "phân phối chung có thể trao đổi" là gì? Phân phối chung của X iXiTT ?
học

2
Điều đó có nghĩa là phân phối chung của giống như phân phối của (và tất cả các hoán vị khác). Xem en.wikipedia.org/wiki/Exchangizable_random_variables . Hoặc xem câu trả lời của @ whuber! X 1 , X 2 , X 3 X1,X2,X3X 2 , X 3 , X 1X2,X3,X1
Jarle Tufto

2
Đáng chú ý là câu trả lời độc lập với phân phối . X 1 , ... , X nX1,,Xn
StubbornAtom

Câu trả lời:


11

Ý tưởng này đúng - nhưng có một câu hỏi thể hiện nó chặt chẽ hơn một chút. Do đó tôi sẽ tập trung vào ký hiệu và phơi bày bản chất của ý tưởng.


Hãy bắt đầu với ý tưởng về khả năng trao đổi:

Một biến ngẫu nhiên X = ( X 1 , X 2 , ... , X n )X=(X1,X2,,Xn)trao đổi khi các bản phân phối của các biến hoán vị X σ = ( X σ ( 1 ) , X σ ( 2 ) , ... , X σ ( n ) )Xσ=(Xσ(1),Xσ(2),,Xσ(n)) đều như nhau cho tất cả các hoán vị có thể σσ .

Rõ ràng iid ngụ ý trao đổi.

Là một vấn đề về ký hiệu, hãy viết cho thành phần của và đểX σ i = X σ ( i )Xσi=Xσ(i) i thứ ithX σ XσT σ = n Σ i = 1 X σ i = n Σ i = 1 X i = T .

Tσ=i=1nXσi=i=1nXi=T.

Đặt là bất kỳ chỉ mục nào và đặt là bất kỳ hoán vị nào của các chỉ số gửi đến (Một như vậy tồn tại bởi vì người ta luôn có thể trao đổi và ) Khả năng trao đổi của ngụ ýj jσ σ1 1j = σ ( 1 ) . j=σ(1).σ σ1 1j . j.XX

E[X1T]=E[Xσ1Tσ]=E[XjT],

E[X1T]=E[Xσ1Tσ]=E[XjT],

bởi vì (trong bất đẳng thức đầu tiên) chúng ta chỉ thay thế bằng vectơ phân phối giống hệtĐây là mấu chốt của vấn đề.XXXσ.Xσ.

hậu quả là

T=E[TT]=E[ni=1XiT]=ni=1E[XiT]=ni=1E[X1T]=nE[X1T],

T=E[TT]=E[i=1nXiT]=i=1nE[XiT]=i=1nE[X1T]=nE[X1T],

từ đâu

E[X1T]=1nT.

E[X1T]=1nT.


4

Đây không phải là bằng chứng (và +1 cho câu trả lời của @ whuber), nhưng đó là một cách hình học để xây dựng một số trực giác về lý do tại sao là một câu trả lời hợp lý.E(X1|T)=T/nE(X1|T)=T/n

Đặt và nên . Sau đó, chúng tôi sẽ điều chỉnh sự kiện rằng đối với một số , vì vậy điều này giống như vẽ các Gaussian đa biến được hỗ trợ trên nhưng chỉ nhìn vào những cái cuối cùng trong affine không gian . Sau đó, chúng tôi muốn biết trung bình của tọa độ của các điểm hạ cánh trong không gian affine này (đừng bận tâm rằng đó là tập hợp con số 0).X=(X1,,Xn)TX=(X1,,Xn)T1=(1,,1)T1=(1,,1)TT=1TXT=1TX1TX=t1TX=ttRtRRnRn{xRn:1Tx=t}{xRn:1Tx=t}x1x1

Chúng ta biết vì vậy chúng ta đã có một Gaussian hình cầu có vectơ trung bình không đổi và vectơ trung bình nằm trên cùng một đường thẳng với vectơ bình thường của siêu phẳng .XN(μ1,I)

XN(μ1,I)
μ1μ1xT1=0xT1=0

Điều này cho chúng ta một tình huống như hình dưới đây: enter image description here

Ý tưởng chính: đầu tiên hãy tưởng tượng mật độ trên không gian con affine . Mật độ của đối xứng quanh vì . Mật độ cũng sẽ đối xứng trên vì cũng đối xứng trên cùng một đường và điểm xung quanh nó đối xứng là giao điểm của các đường và . Điều này xảy ra với .Ht:={x:xT1=t}Ht:={x:xT1=t}XXx1=x2x1=x2E(X)span 1E(X)span 1HtHtHtHtx1+x2=tx1+x2=tx1=x2x1=x2x=(t/2,t/2)x=(t/2,t/2)

Để hình ảnh chúng ta có thể tưởng tượng việc lấy mẫu lặp đi lặp lại, và sau đó bất cứ khi nào chúng ta nhận được một điểm trong chúng ta chỉ lấy tọa độ và lưu nó. Từ tính đối xứng của mật độ trên , phân bố tọa độ cũng sẽ đối xứng và nó sẽ có cùng điểm trung tâm là . Giá trị trung bình của phân bố đối xứng là điểm trung tâm của đối xứng nên điều này có nghĩa là và rằng vì và có thể được loại bỏ mà không ảnh hưởng bất cứ điều gìE(X1|T)E(X1|T)HtHtx1x1HtHtx1x1t/2t/2E(X1|T)=T/2E(X1|T)=T/2E(X1|T)=E(X2|T)E(X1|T)=E(X2|T)X1X1X2X2

Ở các chiều cao hơn, điều này trở nên khó (hoặc không thể) để hình dung chính xác, nhưng ý tưởng tương tự cũng được áp dụng: chúng ta có một Gaussian hình cầu với trung bình trong khoảng , và chúng ta đang nhìn vào một không gian con affine vuông góc với nó . Điểm cân bằng của phân phối trên không gian con vẫn sẽ là giao điểm của và nằm ở và mật độ vẫn đối xứng nên điểm cân bằng này lại là giá trị trung bình.11span 1span 1{x:xT1=t}{x:xT1=t}x=(t/n,,t/n)x=(t/n,,t/n)

Một lần nữa, đó không phải là một bằng chứng, nhưng tôi nghĩ rằng nó đưa ra một ý tưởng đúng đắn về lý do tại sao bạn mong đợi hành vi này ngay từ đầu.


Ngoài ra, như một số người như @StubbornAtom đã lưu ý, điều này thực sự không yêu cầu phải là Gaussian. Trong 2-D, lưu ý rằng nếu có thể trao đổi thì (nói chung hơn, ) vì vậy phải đối xứng với dòng . Chúng tôi cũng có vì vậy mọi thứ tôi đã nói liên quan đến "ý tưởng chính" trong bức ảnh đầu tiên vẫn giữ chính xác. Đây là một ví dụ trong đó là iid từ mô hình hỗn hợp Gaussian. Tất cả các dòng có cùng ý nghĩa như trước.XXXXf(x1,x2)=f(x2,x1)f(x1,x2)=f(x2,x1)f(x)=f(xσ)f(x)=f(xσ)ffx1=x2x1=x2E(X)span 1E(X)span 1XiXi

enter image description here


1

Tôi nghĩ rằng câu trả lời của bạn là đúng, mặc dù tôi không hoàn toàn chắc chắn về dòng kẻ giết người trong bằng chứng của bạn, về nó là sự thật "bởi vì chúng là iid". Một cách dài dòng hơn cho cùng một giải pháp như sau:

Hãy suy nghĩ về ý nghĩa của . Bạn biết rằng bạn có một mẫu với N số đọc và ý nghĩa của chúng là T. Điều này thực sự có nghĩa là gì, bây giờ, phân phối cơ bản mà chúng được lấy mẫu không còn quan trọng nữa (bạn sẽ không nhận ra bạn đã sử dụng thực tế. lấy mẫu từ một Gaussian trong bằng chứng của bạn).E(xi|T)E(xi|T)

E(xi|T)E(xi|T) là câu trả lời cho câu hỏi, nếu bạn lấy mẫu từ mẫu của mình, với sự thay thế nhiều lần, mức trung bình bạn thu được là bao nhiêu. Đây là tổng trên tất cả các giá trị có thể, nhân với xác suất của chúng hoặc bằng T.Ni=11NxiNi=11Nxi


1
Lưu ý rằng không thể là iid, vì họ thường bị hạn chế để tổng hợp để . Nếu bạn biết trong số họ, bạn cũng biết . xi|Txi|TTTn1n1nthnth
jbowman

vâng, nhưng tôi đã làm một cái gì đó tinh tế hơn, tôi đã nói nếu bạn lấy mẫu nhiều lần với sự thay thế, mỗi mẫu sẽ là một mẫu iid từ một phân phối rời rạc.
gazza89

Lấy làm tiếc! Đặt sai bình luận, đáng lẽ phải đến OP. Nó có nghĩa liên quan đến câu lệnh "Có nghĩa là mỗi kể từ là IID." E(XiT)=TnE(XiT)=TnX1,,XnX1,,Xn
jbowman
Khi sử dụng trang web của chúng tôi, bạn xác nhận rằng bạn đã đọc và hiểu Chính sách cookieChính sách bảo mật của chúng tôi.
Licensed under cc by-sa 3.0 with attribution required.