Thống kê và dữ liệu lớn

Điều này có phần liên quan đến câu hỏi trước đây của tôi ở đây: Một ví dụ về nguyên tắc khả năng * thực sự * quan trọng? Rõ ràng, Deborah Mayo đã xuất bản một bài báo trong Khoa học thống kê bác bỏ bằng chứng của Birnbaum …

27 mathematical-statistics  likelihood-principle 

Khi tôi sử dụng GAM, nó mang lại cho tôi DF còn lại là (dòng cuối cùng trong mã). Điều đó nghĩa là gì? Vượt ra ngoài ví dụ về GAM, nói chung, số bậc tự do có thể là một số không nguyên?26.626.626.6 > library(gam) > summary(gam(mpg~lo(wt),data=mtcars)) Call: gam(formula …

27 r  degrees-of-freedom  gam  machine-learning  pca  lasso  probability  self-study  bootstrap  expected-value  regression  machine-learning  linear-model  probability  simulation  random-generation  machine-learning  distributions  svm  libsvm  classification  pca  multivariate-analysis  feature-selection  archaeology  r  regression  dataset  simulation  r  regression  time-series  forecasting  predictive-models  r  mean  sem  lavaan  machine-learning  regularization  regression  conv-neural-network  convolution  classification  deep-learning  conv-neural-network  regression  categorical-data  econometrics  r  confirmatory-factor  scale-invariance  self-study  unbiased-estimator  mse  regression  residuals  sampling  random-variable  sample  probability  random-variable  convergence  r  survival  weibull  references  autocorrelation  hypothesis-testing  distributions  correlation  regression  statistical-significance  regression-coefficients  univariate  categorical-data  chi-squared  regression  machine-learning  multiple-regression  categorical-data  linear-model  pca  factor-analysis  factor-rotation  classification  scikit-learn  logistic  p-value  regression  panel-data  multilevel-analysis  variance  bootstrap  bias  probability  r  distributions  interquartile  time-series  hypothesis-testing  normal-distribution  normality-assumption  kurtosis  arima  panel-data  stata  clustered-standard-errors  machine-learning  optimization  lasso  multivariate-analysis  ancova  machine-learning  cross-validation 

Giấy ròng đàn hồi ban đầu Zou & Hastie (2005) Chính quy hóa và lựa chọn biến qua lưới đàn hồi giới thiệu hàm mất mạng đàn hồi cho hồi quy tuyến tính (ở đây tôi giả sử tất cả các biến được tập trung và chia tỷ lệ thành …

27 regression  regularization  glmnet  elastic-net  shrinkage 

Khi tôi giới thiệu các khái niệm cho các sinh viên của mình, tôi thường thấy vui khi nói cho họ biết thuật ngữ này bắt nguồn từ đâu ("hồi quy", chẳng hạn, là một thuật ngữ có nguồn gốc thú vị). Tôi chưa thể tìm ra lịch sử / …

27 terminology  regularization  history  tikhonov-regularization 

Trên các sản phẩm thuốc lá người ta thường có thể thấy thống kê rằng chín trong số mười bệnh ung thư phổi là do hút thuốc nhưng con số này có chính xác không? Tôi hoài nghi về chỉ số này vì hai lý do. Thứ nhất , nếu …

27 epidemiology  population-attributable-fraction 

Đối với các mô hình thống kê và học máy, có nhiều mức độ dễ hiểu: 1) toàn bộ thuật toán, 2) các phần của thuật toán nói chung 3) các phần của thuật toán trên các đầu vào cụ thể và ba cấp độ này được chia thành hai …

27 neural-networks  deep-learning  interpretation 

Chúng tôi biết rằng một số chức năng khách quan dễ dàng tối ưu hóa hơn và một số khó khăn. Và có nhiều hàm mất mà chúng ta muốn sử dụng nhưng khó sử dụng, ví dụ mất 0-1. Vì vậy, chúng tôi tìm thấy một số chức năng …

27 machine-learning  classification  optimization  loss-functions 

Giống hệt ý nghĩa, rằng nó sẽ tạo ra kết quả giống hệt nhau cho một sự tương đồng giữa bảng xếp hạng một vector u và một tập hợp các vectơ V . Tôi có một mô hình không gian vectơ có thước đo khoảng cách (khoảng cách euclide, …

27 normalization  natural-language  euclidean  cosine-distance  cosine-similarity 

Từ cuốn sách của David Salsburg Người phụ nữ nếm trà : Mặc dù người đọc có thể không tin nó, phong cách văn học đóng một vai trò quan trọng trong nghiên cứu toán học. Một số nhà văn toán học dường như không thể tạo ra các bài …

27 references  communication 

Tôi đã quan sát thấy rằng, trung bình, giá trị tuyệt đối của hệ số tương quan Pearson là một hằng số gần với bất kỳ cặp đi bộ ngẫu nhiên độc lập nào, bất kể chiều dài đi bộ.0.560.42 Ai đó có thể giải thích hiện tượng này? Tôi …

27 time-series  correlation  stationarity  random-walk 

Một câu nói thú cưng của nhiều nhà thống kê là "Tương quan không ngụ ý nhân quả". Điều này chắc chắn là đúng, nhưng một điều mà DOES dường như ngụ ý ở đây là mối tương quan có rất ít hoặc không có giá trị. Điều này có …

27 correlation  predictive-models  causality 

Tôi thường đọc về một chức năng 'rất phi tuyến tính'. Theo hiểu biết của tôi, có "tuyến tính" và "phi tuyến tính", vậy điều này 'rất cao' là gì? Có một sự khác biệt chính thức từ phi tuyến tính? Nó được định nghĩa như thế nào?

27 terminology  nonlinear  mathematical-statistics 

Đây là câu hỏi đầu tiên của tôi về Cross xác thực ở đây, vì vậy xin vui lòng giúp tôi ngay cả khi nó có vẻ tầm thường :-) Trước hết, câu hỏi có thể là kết quả của sự khác biệt ngôn ngữ hoặc có lẽ tôi có …

27 variance  descriptive-statistics  definition 

Khi tôi lần đầu tiên bắt đầu học thống kê, các quy trình như kiểm tra t, ANOVA, hồi quy chi bình phương và hồi quy tuyến tính mỗi lần xuất hiện là những sinh vật rất khác nhau. Nhưng bây giờ tôi nhận ra các thủ tục này từng …

27 definition 

Tôi có một ma trận gồm 336x256 số dấu phẩy động (336 bộ gen vi khuẩn (cột) x 256 tần số tetranucleotide được chuẩn hóa (hàng), ví dụ: mỗi cột thêm tối đa 1). Tôi nhận được kết quả tốt khi tôi chạy phân tích của mình bằng phân tích …

27 r  pca  tsne