Câu hỏi được gắn thẻ «lasso»

Đối với nghiên cứu hiện tại của tôi, tôi đang sử dụng phương pháp Lasso thông qua gói glmnet trong R trên biến phụ thuộc nhị thức. Trong glmnet, lambda tối ưu được tìm thấy thông qua xác nhận chéo và các mô hình kết quả có thể được so …

12 cross-validation  lasso  glmnet  deviance  lars 

Theo tài liệu tham khảo Quyển 1 , Quyển 2 và giấy . Nó đã được đề cập rằng có một sự tương đương giữa hồi quy chính quy (Ridge, LASSO và Elastic Net) và các công thức ràng buộc của chúng. Tôi cũng đã xem xét Xác thực chéo …

11 regression  optimization  lasso  ridge-regression  elastic-net 

Tôi đang chạy mô hình hồi quy cả với Lasso và Ridge (để dự đoán một biến kết quả rời rạc từ 0-5). Trước khi chạy mô hình, tôi sử dụng SelectKBestphương pháp scikit-learnđể giảm bộ tính năng từ 250 xuống 25 . Nếu không có lựa chọn tính năng …

11 regression  predictive-models  feature-selection  lasso  ridge-regression 

Tôi đang cố gắng thực hiện lựa chọn mô hình trên một số dự đoán ứng viên bằng LASSO với kết quả liên tục. Mục tiêu là chọn mô hình tối ưu với hiệu suất dự đoán tốt nhất, thường có thể được thực hiện bằng xác thực chéo K-Fold …

11 cross-validation  survey  lasso  glmnet 

Tôi đã có một ý tưởng về ưu và nhược điểm của hồi quy sườn và LASSO. Đối với LASSO, thời hạn phạt L1 sẽ mang lại một vectơ hệ số thưa thớt, có thể được xem như một phương pháp lựa chọn tính năng. Tuy nhiên, có một số …

11 feature-selection  lasso  regularization  ridge-regression  elastic-net 

Tôi đang nghiên cứu LASSO (toán tử co ngót và lựa chọn tối thiểu tuyệt đối) vào lúc này. Tôi thấy rằng giá trị tối ưu cho tham số chính quy có thể được chọn bằng xác nhận chéo. Tôi cũng thấy trong hồi quy sườn và nhiều phương pháp …

11 lasso  regularization  shrinkage 

Tôi đang cố gắng thực hiện hồi quy Lasso, có dạng sau: Thu nhỏ trong( Y - X w ) ' ( Y - X w ) + λwww(Y−Xw)′(Y−Xw)+λ|w|1(Y−Xw)′(Y−Xw)+λ|w|1(Y - Xw)'(Y - Xw) + \lambda \;|w|_1 Đưa ra một , tôi được khuyên nên tìm tối ưu với sự trợ …

11 regression  lasso  quadratic-form 

Tôi muốn sửa thủ công một hệ số nhất định, giả sử , sau đó khớp hệ số với tất cả các yếu tố dự đoán khác, trong khi vẫn giữ trong mô hình.β 1 = 1.0β1= 1,0β1=1.0\beta_1=1.0β1= 1,0β1=1.0\beta_1=1.0 Làm thế nào tôi có thể đạt được điều này bằng …

11 r  multiple-regression  lasso  glmnet  constrained-regression 

Sau khi đọc Chương 3 về các yếu tố của học thống kê (Hastie, Tibshrani & Friedman), tôi tự hỏi liệu có thể thực hiện các phương pháp thu nhỏ nổi tiếng được trích dẫn trên tiêu đề của câu hỏi này với cấu trúc hiệp phương sai, nghĩa là …

11 lasso  ridge-regression 

Khi tôi xác định lambda của mình thông qua xác nhận chéo, tất cả các hệ số trở thành số không. Nhưng tôi có một số gợi ý từ các tài liệu rằng một số dự đoán chắc chắn sẽ ảnh hưởng đến kết quả. Có phải rác rưởi là …

11 lasso 

Đã đóng cửa. Câu hỏi này không đúng chủ đề . Nó hiện không chấp nhận câu trả lời. Bạn muốn cải thiện câu hỏi này? Cập nhật câu hỏi để nó thuộc chủ đề cho Xác thực chéo. Đóng cửa năm ngoái . Những triển khai nguồn mở nào …

11 regression  lasso  regularization 

Tôi đang cố gắng tóm tắt những gì tôi hiểu từ trước đến nay trong phân tích đa biến bị phạt với các tập dữ liệu chiều cao và tôi vẫn đấu tranh để có được một định nghĩa đúng đắn về sự trừng phạt mềm so với Lasso (hoặc …

11 multivariate-analysis  lasso  feature-selection  genetics 

Nếu , có thể‖ β * ‖ 2 tăng khiλtăng?β*= a r gm i nβ∥ y- Xβ∥22+ λ ∥ β∥1β∗=argminβ‖y−Xβ‖22+λ‖β‖1\beta^*=\mathrm{arg\,min}_{\beta} \|y-X\beta\|^2_2+\lambda\|\beta\|_1∥ β*∥2‖β∗‖2\|\beta^*\|_2λλ\lambda Tôi nghĩ rằng điều này là có thể. Mặc dù không tăng khi λ tăng (tôi bằng chứng ), ‖ β * ‖ 2 có thể tăng. Hình …

11 lasso 

Hiểu biết của tôi về hồi quy LASSO là các hệ số hồi quy được chọn để giải quyết vấn đề tối thiểu hóa: minβ∥y−Xβ∥22 s.t.∥β∥1≤tminβ‖y−Xβ‖22 s.t.‖β‖1≤t\min_\beta \|y - X \beta\|_2^2 \ \\s.t. \|\beta\|_1 \leq t Trong thực tế, điều này được thực hiện bằng cách sử dụng hệ số …

10 optimization  lasso  regularization  lagrange-multipliers 

Trong một số câu trả lời tôi đã thấy người dùng CrossValidated đề nghị OP tìm các bài báo sớm về Lasso, Ridge và Elastic Net. Đối với hậu thế, các tác phẩm tinh xảo trên Lasso, Ridge và Elastic Net là gì?

10 references  lasso  regularization  ridge-regression  elastic-net