Tôi xem xét các mô hình tuyến tính sau: .y=Xβ+ϵ
Vectơ của phần dư được ước tính bởi
ϵ^=y−Xβ^=(I−X(X′X)−1X′)y=Qy=Q(Xβ+ϵ)=Qϵ
nơi .Q=I−X(X′X)−1X′
Quan sát rằng (dấu vết là bất biến theo hoán vị tuần hoàn) và Q ′ = Q = Q 2 . Do đó, giá trị riêng của Q là 0 và 1 (một số chi tiết bên dưới). Do đó, tồn tại một ma trận đơn vị V sao cho ( ma trận có thể chéo bởi ma trận đơn vị khi và chỉ khi chúng bình thường. )tr(Q)=n−pQ′=Q=Q2Q01V
V′QV=Δ=diag(1,…,1n−p times,0,…,0p times)
K=V′ϵ^
ϵ^∼N(0,σ2Q)K∼N(0,σ2Δ)Kn−p+1=…=Kn=0
∥K∥2σ2=∥K⋆∥2σ2∼χ2n−p
với .K⋆=(K1,…,Kn−p)′
Hơn nữa, vì là một ma trận đơn nhất, chúng ta cũng cóV
∥ϵ^∥2=∥K∥2=∥K⋆∥2
Như vậy
RSSσ2∼χ2n−p
Cuối cùng, quan sát rằng kết quả này ngụ ý rằng
E(RSSn−p)=σ2
Q2−Q=0Qz2−zQ01tr(Q)=n−p1n−pp