Câu hỏi được gắn thẻ «regularization»

Những ưu và nhược điểm của việc sử dụng LARS [1] so với sử dụng gốc tọa độ để phù hợp với hồi quy tuyến tính chính quy L1? Tôi chủ yếu quan tâm đến các khía cạnh hiệu suất (vấn đề của tôi có xu hướng có Nhàng trăm …

13 regression  lasso  regularization  regression  references  lasso  regularization  elastic-net  r  distributions  aggregation  clustering  algorithms  regression  correlation  modeling  distributions  time-series  standard-deviation  goodness-of-fit  hypothesis-testing  statistical-significance  sample  binary-data  estimation  random-variable  interpolation  distributions  probability  chi-squared  predictor  outliers  regression  modeling  interaction 

Tôi đã đọc rằng lasso nhóm được sử dụng để lựa chọn biến và độ thưa thớt trong một nhóm các biến. Tôi muốn biết trực giác đằng sau yêu sách này. Tại sao nhóm Lasso lại thích Lasso hơn? Tại sao đường dẫn giải pháp lasso nhóm không piecewise …

13 regression  feature-selection  lasso  regularization 

Tôi muốn so sánh các mô hình được lựa chọn với sườn, lasso và lưới đàn hồi. Hình dưới đây cho thấy các đường dẫn hệ số bằng cả 3 phương pháp: sườn (Hình A, alpha = 0), lasso (Hình B; alpha = 1) và lưới đàn hồi (Hình C; …

13 r  multiple-regression  modeling  regularization 

Tôi đang sử dụng gói 'lars' trong R với mã sau: > library(lars) > set.seed(3) > n <- 1000 > x1 <- rnorm(n) > x2 <- x1+rnorm(n)*0.5 > x3 <- rnorm(n) > x4 <- rnorm(n) > x5 <- rexp(n) > y <- 5*x1 + 4*x2 + 2*x3 + 7*x4 + …

13 correlation  feature-selection  lasso  regularization  ridge-regression 

Tôi đang nghe những từ này ngày càng nhiều hơn khi tôi học máy học. Trong thực tế, một số người đã giành được huy chương Trường làm việc về tính thường xuyên của phương trình. Vì vậy, tôi đoán đây là một thuật ngữ mang chính nó từ vật …

12 machine-learning  self-study  terminology  regularization  definition 

Theo hướng dẫn này về học tập sâu , phân rã trọng lượng (chính quy) thường không được áp dụng cho các điều khoản thiên vị b tại sao? Ý nghĩa (trực giác) đằng sau nó là gì?

12 machine-learning  neural-networks  bias  regularization 

Bất cứ ai cũng có thể chỉ cho tôi theo hướng của một thuật toán trực tuyến (đệ quy) cho Tikhonov Chính quy hóa (bình phương tối thiểu hóa bình thường)? Trong một môi trường trực tuyến, tôi sẽ tính toán sử dụng bộ dữ liệu ban đầu của tôi, …

12 regression  machine-learning  least-squares  regularization  online 

Tôi muốn đặt ra câu hỏi này trong hai phần. Cả hai đều xử lý một mô hình tuyến tính tổng quát, nhưng các giao dịch đầu tiên liên quan đến lựa chọn mô hình và các giao dịch khác với chính quy hóa. Bối cảnh: Tôi sử dụng các …

12 regression  model-selection  regularization 

Có bất kỳ giấy tờ hay sách tốt nào liên quan đến việc sử dụng gốc tọa độ cho L1 (lasso) và / hoặc chính quy hóa mạng đàn hồi cho các vấn đề hồi quy tuyến tính không?

12 regression  references  lasso  regularization  elastic-net 

Trong cảm biến nén, có một định lý đảm bảo rằng có một giải pháp thưa thớt duy nhất c (Xem phụ lục để biết thêm chi tiết).cargmin∥c∥1subject to y=Xcargmin‖c‖1subject to y=Xc\text{argmin} \Vert c \Vert_1\\ \text{subject to } y = Xc ccc Có một định lý tương tự cho Lasso? …

12 regression  self-study  feature-selection  lasso  regularization 

Tôi đang tìm tài liệu về hồi quy sườn âm . Nói tóm lại, đó là một khái quát của hồi quy sườn tuyến tính bằng cách sử dụng âm trong công thức ước tính:Trường hợp tích cực có một lý thuyết hay: như một hàm mất mát, như một …

12 regression  regularization  ridge-regression 

Dưới đây là một mẫu mã máy ảnh sử dụng nó: from keras.constraints import max_norm model.add(Convolution2D(32, 3, 3, input_shape=(3, 32, 32), border_mode='same', activation='relu', kernel_constraint=max_norm(3)))

12 neural-networks  regularization  conv-neural-network  optimization 

Để ngăn chặn overfitting người dân thêm một thuật ngữ chính quy (tỉ lệ với tổng bình phương của các thông số của mô hình) với một tham số quy tắc λλ\lambda đến chức năng chi phí của hồi quy tuyến tính. Là tham số này λλ\lambda giống như một …

12 regression  optimization  regularization 

Bài đăng này theo sau bài này: Tại sao ước tính sườn núi trở nên tốt hơn OLS bằng cách thêm một hằng số vào đường chéo? Đây là câu hỏi của tôi: Theo như tôi biết, chính quy hóa sườn núi sử dụng -norm (khoảng cách euclide). Nhưng tại …

12 lasso  regularization  ridge-regression 

Gần đây tôi đã nhìn thấy rất nhiều bài báo về các biểu diễn thưa thớt và hầu hết trong số họ sử dụng định mức và thực hiện một số giảm thiểu. Câu hỏi của tôi là, định mức hỗn hợp và định mức hỗn hợp gì? Và làm …

12 machine-learning  regularization  sparse