Có thể áp dụng quy trình MLE thông thường cho phân phối tam giác không?
Chắc chắn rồi! Mặc dù có một số điểm kỳ lạ để giải quyết, nhưng có thể tính toán MLE trong trường hợp này.
Tuy nhiên, nếu theo 'thủ tục thông thường', bạn có nghĩa là 'lấy đạo hàm của khả năng ghi nhật ký và đặt nó bằng 0', thì có thể không.
Bản chất chính xác của sự cản trở MLE ở đây là gì (nếu thực sự có một)?
Bạn đã thử vẽ khả năng?
-
Theo dõi sau khi làm rõ câu hỏi:
Câu hỏi về việc vẽ khả năng không phải là bình luận nhàn rỗi, mà là trung tâm của vấn đề.
MLE sẽ liên quan đến việc lấy đạo hàm
Không. MLE liên quan đến việc tìm argmax của hàm. Điều đó chỉ liên quan đến việc tìm các số không của một công cụ phái sinh trong một số điều kiện nhất định ... không giữ ở đây. Tốt nhất, nếu bạn quản lý để làm điều đó, bạn sẽ xác định được một vài cực tiểu địa phương .
Như câu hỏi trước đây của tôi đề xuất, hãy nhìn vào khả năng.
Đây là một mẫu, gồm 10 quan sát từ phân bố tam giác trên (0,1):y
0.5067705 0.2345473 0.4121822 0.3780912 0.3085981 0.3867052 0.4177924
0.5009028 0.8420312 0.2588613
Đây là các hàm khả năng và khả năng đăng nhập cho trên dữ liệu đó:
c
Các đường màu xám đánh dấu các giá trị dữ liệu (có lẽ tôi đã tạo một mẫu mới để phân tách các giá trị tốt hơn). Các chấm đen đánh dấu khả năng / khả năng đăng nhập của các giá trị đó.
Đây là một phóng to gần tối đa khả năng, để xem chi tiết hơn:
Như bạn có thể thấy từ khả năng, tại nhiều thống kê đơn hàng, hàm khả năng có các 'góc' sắc nét - những điểm mà đạo hàm không tồn tại (điều này không có gì ngạc nhiên - pdf gốc có một góc và chúng ta đang lấy sản phẩm của pdf). Điều này (có cusps tại thống kê đơn hàng) là trường hợp phân phối tam giác và tối đa luôn xảy ra tại một trong các thống kê đơn hàng. .
Như nó xảy ra trong mẫu của tôi, tối đa xảy ra như thống kê thứ tư, 0,3780912
Vì vậy, để tìm MLE của trên (0,1), chỉ cần tìm khả năng ở mỗi lần quan sát. Người có khả năng lớn nhất là MLE của .cc
Một tài liệu tham khảo hữu ích là chương 1 của " Beyond Beta " của Johan van Dorp và Samuel Kotz. Khi điều đó xảy ra, Chương 1 là một chương 'mẫu' miễn phí cho cuốn sách - bạn có thể tải xuống tại đây .
Có một bài báo nhỏ đáng yêu của Eddie Oliver về vấn đề này với sự phân bố hình tam giác, tôi nghĩ ở American Statistician (về cơ bản là cùng một điểm; tôi nghĩ rằng đó là trong Góc của Giáo viên). Nếu tôi có thể quản lý để xác định vị trí, tôi sẽ cung cấp nó làm tài liệu tham khảo.
Chỉnh sửa: đây là:
EH Oliver (1972), Sự kỳ quặc tối đa,
Nhà thống kê người Mỹ , Tập 26, Số 3, Tháng 6, p43-44
( liên kết nhà xuất bản )
Nếu bạn có thể dễ dàng nắm bắt nó, nó đáng để xem, nhưng chương Dorp và Kotz bao gồm hầu hết các vấn đề có liên quan vì vậy nó không quan trọng.
Bằng cách theo dõi câu hỏi trong các bình luận - ngay cả khi bạn có thể tìm ra cách nào đó để 'làm dịu' các góc, bạn vẫn phải đối phó với thực tế là bạn có thể nhận được nhiều cực đại cục bộ:
Tuy nhiên, có thể tìm thấy các công cụ ước tính có các thuộc tính rất tốt (tốt hơn phương pháp của các khoảnh khắc), mà bạn có thể viết ra một cách dễ dàng. Nhưng ML trên tam giác trên (0,1) là một vài dòng mã.
Nếu đó là vấn đề về số lượng dữ liệu khổng lồ, điều đó cũng có thể được xử lý, nhưng tôi sẽ là một câu hỏi khác. Ví dụ, không phải mọi điểm dữ liệu đều có thể là tối đa, làm giảm công việc và có một số khoản tiết kiệm khác có thể được thực hiện.