Thống kê và dữ liệu lớn

Tôi đã đọc những cuốn sách phổ biến nhất trong học thống kê 1- Các yếu tố của học thống kê. 2- Giới thiệu về học thống kê . Cả hai đều đề cập rằng hồi quy sườn có hai công thức tương đương nhau. Có một bằng chứng toán …

15 regression  lasso  regularization  ridge-regression  lagrange-multipliers 

Câu hỏi này tham khảo bài viết của Galit Shmueli "Để giải thích hoặc dự đoán" . Cụ thể, trong phần 1.5, "Giải thích và Dự đoán là khác nhau", Giáo sư Shmueli viết: Trong mô hình giải thích, trọng tâm là giảm thiểu sai lệch để có được biểu …

15 predictive-models  inference  bias  unbiased-estimator  explanatory-models 

Tôi chưa tìm thấy câu trả lời thỏa đáng cho vấn đề này từ google . Tất nhiên nếu dữ liệu tôi có là hàng triệu thì học sâu là cách. Và tôi đã đọc rằng khi tôi không có dữ liệu lớn thì có lẽ tốt hơn là sử …

15 regression  machine-learning  classification  neural-networks  deep-learning 

Câu hỏi: Sự khác biệt và điểm tương đồng chính giữa việc sử dụng các lỗi tiêu chuẩn Newey-West (1987) và Hansen-Hodrick (1980) là gì? Trong những tình huống này nên được ưu tiên hơn những tình huống khác? Ghi chú: Tôi biết làm thế nào mỗi thủ tục điều …

15 regression  autocorrelation  heteroscedasticity  robust-standard-error  neweywest 

Tôi đang cố gắng học cách sử dụng Mạng thần kinh. Tôi đã đọc hướng dẫn này . Sau khi lắp Mạng thần kinh trên Chuỗi thời gian bằng cách sử dụng giá trị tại để dự đoán giá trị tại t + 1 , tác giả có được biểu …

15 time-series  neural-networks  predictive-models  deep-learning  prediction 

Câu hỏi Nó phụ thuộc vào việc cây nông hay sâu? Hoặc chúng ta có thể nói điều này không phân biệt độ sâu / cấp độ của cây? Tại sao độ lệch thấp & phương sai cao? Hãy giải thích bằng trực giác và toán học

15 machine-learning  variance  covariance  cart  bias 

Khi chạy ANOVA, chúng tôi được cho biết rằng phải có một số giả định nhất định về thử nghiệm để áp dụng cho dữ liệu. Tôi không bao giờ hiểu lý do là tại sao các giả định sau đây là cần thiết để thử nghiệm hoạt động: Phương …

15 hypothesis-testing  anova  assumptions 

Tôi đang tìm hiểu về splines từ cuốn sách "Các yếu tố của khai thác dữ liệu thống kê, suy luận và dự đoán" của Hastie et al. Tôi tìm thấy ở trang 145 rằng các khối vuông tự nhiên là tuyến tính vượt ra ngoài các nút thắt biên. …

15 regression  degrees-of-freedom  splines  constraint  cubic 

Giá trị mong đợi của phân phối f(x)f(x)f(x) là giá trị trung bình, đó là giá trị trung bình có trọng số E[x]=∫+∞−∞xf(x)dxE[x]=∫−∞+∞xf(x)dxE[x]=\int_{-\infty}^{+\infty} x \, \, f(x) dx Giá trị rất có thể là chế độ, đó là giá trị có thể xảy ra nhất. Tuy nhiên, chúng ta có …

15 probability  distributions  chi-squared  expected-value  mode 

Tại thời điểm nào chúng ta bắt đầu phân loại các mạng thần kinh đa lớp thành các mạng thần kinh sâu hoặc đặt nó theo một cách khác 'Số lớp tối thiểu trong một mạng lưới thần kinh sâu là gì?'

15 machine-learning  neural-networks  deep-learning  terminology 

Trong hồi quy tuyến tính (mất bình phương), sử dụng ma trận, chúng ta có một ký hiệu rất súc tích cho mục tiêu minimize ∥Ax−b∥2minimize ‖Ax−b‖2\text{minimize}~~ \|Ax-b\|^2 Trong đó AAA là ma trận dữ liệu, xxx là các hệ số và bbb là đáp ứng. Có một ký hiệu …

15 regression  logistic  linear-model  notation 

Tôi đang cố gắng để hiểu sự khác biệt cơ bản giữa hồi quy từng bước và hồi quy ngược trong R bằng cách sử dụng chức năng bước. Để hồi quy từng bước tôi đã sử dụng lệnh sau step(lm(mpg~wt+drat+disp+qsec,data=mtcars),direction="both") Tôi đã nhận được đầu ra dưới đây cho …

15 r  regression 

Một giả định cơ bản của việc sử dụng các mô hình hồi quy để suy luận là "tất cả các dự đoán có liên quan" đã được đưa vào phương trình dự đoán. Lý do là việc không bao gồm một yếu tố trong thế giới thực quan trọng …

15 regression  assumptions  bias  predictor  confounding 

Trong chương 9 của cuốn sách Nhận dạng mẫu và học máy, có phần này về mô hình hỗn hợp Gaussian: Thành thật mà nói tôi không thực sự hiểu tại sao điều này sẽ tạo ra một điểm kỳ dị. bất cứ ai có thể giải thích điều này …

15 gaussian-mixture 

Tôi đang cố gắng sao chép kết quả từ sklearnthư viện hồi quy logistic bằng glmnetgói trong R. Từ tài liệusklearn hồi quy logistic , nó đang cố gắng giảm thiểu hàm chi phí theo hình phạt l2 min w , c 1minw,c12wTw+C∑i=1Nlog(exp(−yi(XTiw+c))+1)minw,c12wTw+C∑i=1Nlog⁡(exp⁡(−yi(XiTw+c))+1)\min_{w,c} \frac12 w^Tw + C\sum_{i=1}^N \log(\exp(-y_i(X_i^Tw+c)) + 1) …

15 r  logistic  python  scikit-learn  glmnet