Tôi đang đọc về MCMC thích ứng (xem, ví dụ, Chương 4 của Sổ tay của Markov Chain Monte Carlo , biên tập Brooks và cộng sự, 2011; và cả Andrieu & Thoms, 2008 ).
Kết quả chính của Roberts và Rosenthal (2007) là nếu sơ đồ thích ứng thỏa mãn điều kiện thích nghi biến mất (cộng với một số kỹ thuật khác), MCMC thích nghi là bất kỳ phương án nào. Ví dụ, có thể dễ dàng thu được sự thích ứng bằng cách điều chỉnh toán tử chuyển tiếp ở lần lặp với xác suất , với .
Kết quả này là (một posteriori) trực quan, không có triệu chứng. Vì lượng thích ứng có xu hướng bằng không, cuối cùng nó sẽ không gây rối với tính linh hoạt. Mối quan tâm của tôi là những gì xảy ra với thời gian hữu hạn .
Làm thế nào để chúng ta biết rằng sự thích ứng không gây rối với tính linh hoạt tại một thời điểm hữu hạn nhất định và một bộ lấy mẫu đang lấy mẫu từ phân phối chính xác? Nếu nó có ý nghĩa gì cả, một người nên làm bao nhiêu để đảm bảo rằng việc thích ứng sớm không làm sai lệch chuỗi?
Các học viên trong lĩnh vực tin tưởng MCMC thích ứng? Lý do tôi hỏi là vì tôi đã thấy nhiều phương pháp gần đây cố gắng xây dựng sự thích ứng theo các cách khác, phức tạp hơn được biết là tôn trọng tính linh hoạt, chẳng hạn như phương pháp tái sinh hoặc đồng bộ (nghĩa là hợp pháp khi chọn chuyển đổi toán tử phụ thuộc vào trạng thái của các chuỗi song song khác). Ngoài ra, việc thích ứng chỉ được thực hiện trong quá trình burn-in, chẳng hạn như trong Stan , nhưng không phải trong thời gian chạy. Tất cả những nỗ lực này gợi ý cho tôi rằng MCMC thích ứng theo Roberts và Rosenthal (sẽ cực kỳ đơn giản để thực hiện) không được coi là đáng tin cậy; nhưng có lẽ có những lý do khác
Điều gì về việc triển khai cụ thể, chẳng hạn như đô thị thích nghi ( Haario et al. 2001 )?
Tài liệu tham khảo
- Rosenthal, JS (2011). Phân phối đề xuất tối ưu và MCMC thích ứng. Cẩm nang của Markov Chain Monte Carlo , 93-112.
- Andrieu, C., & Thoms, J. (2008) . Hướng dẫn về MCMC thích ứng. Thống kê và tính toán , 18 (4), 343-373.
- Roberts, GO, & Rosenthal, JS (2007) . Khớp nối và tính linh hoạt của các thuật toán Monte Carlo chuỗi thích ứng. Tạp chí xác suất áp dụng , 458-475.
- Haario, H., Saksman, E., & Tamminen, J. (2001) . Một thuật toán đô thị thích nghi. Bernoulli , 223-242.