Đặt số bóng trắng ban đầu là và bóng đen là . Câu hỏi mô tả chuỗi Markov có trạng thái được lập chỉ mục bằng số lượng bóng đen có thể Xác suất chuyển tiếp làb i ∈ { 0 , 1 , 2 , ... , b } .wbi∈{0,1,2,…,b}.
pw(i,i)=ww+i,pw(i,i−1)=iw+i.
Đầu tiên mô tả vẽ một quả bóng trắng, trong trường hợp không thay đổi, và lần thứ hai mô tả vẽ một quả bóng đen, trong trường hợp đó giảm đi .i 1ii1
Từ giờ trở đi, chúng ta hãy bỏ chỉ mục rõ ràng " ", lấy giá trị này là cố định trong suốt. Các giá trị riêng của ma trận chuyển tiếp làPwP
e = ( ww + b - tôi, i = 0 , 1 , Hoài , b )
tương ứng với ma trận được cung cấp bởiQ
qij=(−1)i+j+b(j+w)(bj)wj−b(b−ji)(b−i+w)b−j−1
mà nghịch đảo là
(q−1)ij=wb−i(jb−i)(b−j+w)i−b(bb−i).
Đó là,
P=Q Diagonal(e) Q−1.
Do đó, phân phối sau khi chuyển ra khỏi trạng thái được cho bởi vectơ xác suấtbnb
pn=(0,0,…,0,1)Pn=(0,0,…,0,1)Q Diagonal(en) Q−1.
Đó là, các cơ hội có bóng đen còn lại sau khi thu hút đượcnin
pni=∑j=0bqnjenj(q−1)ji.
Ví dụ: bắt đầu với bất kỳ số lượng bóng trắng và bóng đen, phân phối xác suất sau khi rút ra làn ≥ 1b=2n≥1
Pr(i=2)Pr(i=1)Pr(i=0)=pn2=pn1=pn0=wn(2+w)n=2wn−1(1+w)n−1−2wn−1(1+w)(2+w)n=1−2wn−1(1+w)n−1+wn−1(2+w)n−1.
Các đường cong trong hình này theo dõi xác suất của các trạng thái (màu xanh), (màu đỏ) và (vàng) là một hàm của số lần rút khi ; đó là, chiếc bình bắt đầu với hai quả bóng đen và năm quả bóng trắng.i = 1 i = 2 n w = 5i=0i=1i=2nw=5
Trạng thái (hết bóng đen) là trạng thái hấp thụ : trong giới hạn khi phát triển không bị ràng buộc, xác suất của trạng thái này đạt đến sự thống nhất (nhưng không bao giờ đạt được chính xác).ni=0n