Tại sao không hồi quy mạnh mẽ mọi lúc?


12

Ví dụ về trang này cho thấy hồi quy đơn giản bị ảnh hưởng rõ rệt bởi các ngoại lệ và điều này có thể khắc phục bằng các kỹ thuật hồi quy mạnh: http://www.alastairsanderson.com/R/tutorials/robust-regression-in-R/ . Tôi tin rằng lmrob và ltsReg là các kỹ thuật hồi quy mạnh mẽ khác.

Tại sao người ta không nên thực hiện hồi quy mạnh (như rlm hoặc rq) mỗi lần thay vì thực hiện hồi quy đơn giản (lm)? Có bất kỳ nhược điểm của các kỹ thuật hồi quy mạnh mẽ này? Cảm ơn sự sáng suốt của bạn.


2
Điều này có thể hữu ích.
liên hợp chiến

Câu trả lời:


6

Các định lý Gauss-Markov :

Trong một mô hình tuyến tính có lỗi hình cầu (trong đó bao gồm giả định không có ngoại lệ, thông qua phương sai lỗi hữu hạn), OLS có hiệu quả trong một lớp các công cụ ước lượng không thiên vị tuyến tính - có các điều kiện (hạn chế, chắc chắn) theo đó " bạn không thể làm tốt hơn OLS ".


Vì vậy, nếu không có ngoại lệ, hồi quy tuyến tính sẽ là tốt nhất. Nhưng nếu có, hoặc nếu các giả định khác đang bị vi phạm, thì chỉ có một người nên thực hiện hồi quy mạnh mẽ. Đúng không?
rnso

2
Nếu có ngoại lệ, các kỹ thuật khác tốt hơn, vâng. Tôi sẽ không đi đến kết luận rằng "nếu các giả định khác đang bị vi phạm, thì [...] người ta nên thực hiện hồi quy mạnh mẽ" - đó không phải là cách chữa trị cho tất cả các vi phạm. Fx, khi các lỗi tương quan với các biến hồi quy và bạn sau các hiệu ứng nhân quả, các kỹ thuật biến công cụ được yêu cầu.
Christoph Hanck
Khi sử dụng trang web của chúng tôi, bạn xác nhận rằng bạn đã đọc và hiểu Chính sách cookieChính sách bảo mật của chúng tôi.
Licensed under cc by-sa 3.0 with attribution required.