Thống kê và dữ liệu lớn

Gần đây tôi đã tham gia một vài cuộc nói chuyện thống kê về Lasso (chính quy hóa) và một điểm tiếp tục được đưa ra là chúng tôi không thực sự hiểu tại sao Lasso hoạt động hoặc tại sao nó hoạt động tốt như vậy. Tôi tự hỏi …

10 machine-learning  lasso  regularization 

Bất kỳ hàm liên tục nào trên [a, b], trong đó a và b là các số thực, có thể được xấp xỉ hoặc tùy ý gần với hàm (trong một số định mức) bởi các Quy trình Gaussian (Hồi quy)?

10 gaussian-process  approximation 

Tôi đang cố gắng sử dụng hồi quy RF để đưa ra dự đoán về hiệu suất của nhà máy giấy. Tôi có dữ liệu từng phút cho các đầu vào (tốc độ và lượng bột gỗ đi vào, v.v.) cũng như hiệu suất của máy (giấy được sản xuất, …

10 time-series  forecasting  cross-validation  random-forest  autoregressive 

Khi thảo luận về tỷ lệ thành tích nhiệm vụ, có cách nào để chỉ ra rằng 0 trong số 20 lần thử là "tệ hơn" so với 0 trên 10 lần thử không?

10 probability  sampling 

Tôi đang theo hướng dẫn của mnist Tensorflow ( https://github.com/tensorflow/tensorflow/blob/master/tensorflow/examples/tutorials/mnist/mnist_softmax.py ). Hướng dẫn sử dụng tf.train.Optimizer.minimize(cụ thể tf.train.GradientDescentOptimizer). Tôi không thấy bất kỳ đối số nào được thông qua ở bất cứ đâu để xác định độ dốc. Là dòng chảy sử dụng phân biệt số theo mặc định? Có …

10 python  optimization  tensorflow 

Tôi thấy ký hiệu này cho bình phương tối thiểu thông thường ở đây . minw∥Xw−y∥22minw‖Xw−y‖22 \min_w \left\| Xw - y \right\|^2_2 Tôi chưa bao giờ nhìn thấy các thanh đôi và 2 ở phía dưới. Các biểu tượng này có ý nghĩa gì? Họ có thuật ngữ cụ thể …

10 regression  least-squares  linear-model  linear-algebra  notation 

Trong khóa học máy của Andrew Ng, anh sử dụng công thức này: ∇Atr(ABATC)=CAB+CTABT∇Atr(ABATC)=CAB+CTABT\nabla_A tr(ABA^TC) = CAB + C^TAB^T và anh ta làm một bằng chứng nhanh chóng được hiển thị dưới đây: ∇Atr(ABATC)=∇Atr(f(A)ATC)=∇∘tr(f(∘)ATC)+∇∘tr(f(A)∘TC)=(ATC)Tf′(∘)+(∇∘Ttr(f(A)∘TC)T=CTABT+(∇∘Ttr(∘T)Cf(A))T=CTABT+((Cf(A))T)T=CTABT+CAB∇Atr(ABATC)=∇Atr(f(A)ATC)=∇∘tr(f(∘)ATC)+∇∘tr(f(A)∘TC)=(ATC)Tf′(∘)+(∇∘Ttr(f(A)∘TC)T=CTABT+(∇∘Ttr(∘T)Cf(A))T=CTABT+((Cf(A))T)T=CTABT+CAB\nabla_A tr(ABA^TC) \\ = \nabla_A tr(f(A)A^TC) \\ = \nabla_{\circ} tr(f(\circ)A^TC) + \nabla_{\circ}tr(f(A)\circ^T C)\\ =(A^TC)^Tf'(\circ) + (\nabla_{\circ^T}tr(f(A)\circ^T C)^T …

10 machine-learning  matrix  derivative 

Tôi lập trình và làm phát triển dựa trên thử nghiệm. Sau khi tôi thực hiện thay đổi mã, tôi chạy thử nghiệm. Đôi khi họ thành công và đôi khi họ thất bại. Trước khi tôi chạy thử nghiệm, tôi ghi lại một số từ 0,01 đến 0,99 để …

10 forecasting  decision-theory  calibration  scoring-rules 

Tôi đang làm việc trên một mạng chập để nhận dạng hình ảnh và tôi đã tự hỏi liệu tôi có thể nhập hình ảnh có kích thước khác nhau không (mặc dù không hoàn toàn khác nhau). Về dự án này: https://github.com/harvardnlp/im2markup Họ nói: and group images of similar …

10 neural-networks  conv-neural-network  computer-vision 

Sau một số cuộc thảo luận (bên dưới), bây giờ tôi có một bức tranh rõ ràng hơn về một câu hỏi tập trung, vì vậy đây là một câu hỏi được sửa đổi, mặc dù một số ý kiến ​​có thể dường như không liên quan đến câu hỏi …

10 hypothesis-testing  t-test  paired-data  wilcoxon-signed-rank  sign-test 

Nói rằng chúng tôi có một danh sách các mặt hàng [a, b, c, ... x, y, z, ...] Tôi đang tìm kiếm một gia đình phân phối với sự hỗ trợ trong danh sách trên được điều chỉnh bởi một số tham số alpha để: Với alpha = 0, …

10 distributions  sampling  discrete-data 

Có phải nó chỉ là sự tổng hợp của các điểm dữ liệu? Hay đó là sự thể hiện các điểm dữ liệu cho các yếu tố khác nhau trong một định dạng bảng được sắp xếp với các giá trị của các biến khác nhau? Nó khác với dữ …

10 dataset  terminology  definition 

Tôi đang cố gắng tính toán các dự đoán hiệu ứng ngẫu nhiên từ mô hình hỗn hợp tuyến tính bằng tay và sử dụng ký hiệu được cung cấp bởi Wood trong Mô hình phụ gia tổng quát: giới thiệu với R (pg 294 / pg 307 của pdf), …

10 mixed-model  lme4-nlme 

Tôi quan tâm đến tương tác xử lý-covariate trong bối cảnh các thí nghiệm / thử nghiệm ngẫu nhiên có kiểm soát, với một nhiệm vụ điều trị chỉ số nhị phân .TTT Tùy thuộc vào phương pháp / nguồn cụ thể, tôi đã thấy cả và T = { …

10 binary-data  categorical-encoding 

[Một câu hỏi tương tự đã được hỏi ở đây mà không có câu trả lời] Tôi đã phù hợp với mô hình hồi quy logistic với chính quy L1 (hồi quy logistic Lasso) và tôi muốn kiểm tra các hệ số phù hợp cho mức độ quan trọng và …

10 logistic  statistical-significance  regression-coefficients  lasso