Tại sao một chuỗi Markov hữu hạn, không thể thay đổi và có chu kỳ với ma trận ngẫu nhiên P có phân phối giới hạn đồng nhất?


8

Định lý là "Nếu một ma trận chuyển tiếp cho chuỗi Markov không thể thay đổi được với không gian trạng thái đặc biệt S là ngẫu nhiên, thì phép đo bất biến (duy nhất) của nó là đồng nhất trên S."

Nếu Chuỗi Markov có ma trận chuyển tiếp ngẫu nhiên gấp đôi, tôi đọc rằng xác suất giới hạn của nó tạo nên phân phối đồng đều, nhưng tôi không hiểu tại sao.

Tôi đã cố gắng đưa ra và xác định một bằng chứng dễ hiểu cho việc này. Nhưng các bằng chứng tôi tìm thấy tất cả bóng bẩy về các chi tiết tôi không hiểu, như mệnh đề 15,5 ở đây (tại sao nó chỉ hoạt động khi sử dụng các vectơ [1, ... 1]?) Ai đó có thể chỉ cho tôi (hoặc viết) thêm không bằng chứng đơn giản / chi tiết?

(Mặc dù không phải là một phần của bất cứ điều gì tôi sẽ tham gia ở trường, nhưng đó là một phần của khóa học tôi đang tham gia vì vậy tôi đoán tôi sẽ gắn thẻ nó với bài tập về nhà trong cả hai trường hợp.)


Perron-Frobenius.
hồng y

1
@cardinal Tại sao không làm cho nó một câu trả lời với một chút công phu?
Michael R. Chernick

1
Bạn đang thiếu các điều kiện cần thiết mà Chuỗi Markov là không thể sửa chữa và không định kỳ. Chúng có thể được kết hợp với điều kiện là đối với một số , mọi mục nhập của đều dương. Có rất nhiều, vì vậy nói tất cả là ít nhất . Bạn có thể ràng buộc tốc độ hội tụ theo . P n c cnPncc
Douglas Zare

Bạn nói đúng, Douglas. Bây giờ tôi đã sao chép đề xuất trong nguyên văn PDF được liên kết để tránh bất kỳ sự nhầm lẫn nào. Cảm ơn.
Christian Neverdal

Câu trả lời:


4

Giả sử chúng ta có chuỗi Markov không thể thay đổi và chuỗi Markov định kỳ, với các trạng thái , , với ma trận chuyển tiếp ngẫu nhiên gấp đôi (nghĩa là với mọi ). Khi đó phân phối giới hạn là .m j j = 0 , 1 , ... , M Σ M i = 0 P i , j = 1 j π j = 1M+1mjj= =0,1,Giáo dục,MΣTôi= =0MPTôi,j= =1jπj= =1M+1

Bằng chứng

Đầu tiên lưu ý rằng là giải pháp duy nhất cho và .π j = M i = 0 π i P i , jM i = 0 π i = 1πjπj= =ΣTôi= =0MπTôiPTôi,jΣTôi= =0MπTôi= =1

Hãy thử . Điều này mang lại cho (vì ma trận gấp đôi ngẫu nhiên). Do đó là một giải pháp cho tập phương trình đầu tiên và để biến nó thành một giải pháp cho chuẩn hóa thứ hai bằng cách chia cho .πTôi= =1πj= =ΣTôi= =0MπTôiPTôi,j= =ΣTôi= =0MPTôi,j= =1πTôi= =1M+1

Theo tính duy nhất, .πj= =1M+1


Điều này không trả lời câu hỏi của OP. OP không giả định định kỳ. Bằng chứng được liên kết bởi OP không trả lời câu hỏi, mặc dù. Lý do tại sao vectơ hoạt động là theo định nghĩa, là thước đo bất biến nếu . Vì các cột của đều tổng thành một, . Vì vậy, vectơ của những người là một biện pháp bất biến. ννP= =νP[1,,1]P= =[1,,1]
Ceph
Khi sử dụng trang web của chúng tôi, bạn xác nhận rằng bạn đã đọc và hiểu Chính sách cookieChính sách bảo mật của chúng tôi.
Licensed under cc by-sa 3.0 with attribution required.