Thống kê và dữ liệu lớn

Tôi có một mô hình dự đoán được thử nghiệm với bốn phương pháp như bạn có thể thấy trong hình boxplot bên dưới. Thuộc tính mà mô hình dự đoán nằm trong khoảng 0-8. Bạn có thể nhận thấy rằng có một ngoại lệ giới hạn trên và ba …

15 regression  machine-learning  multiple-regression  predictive-models  outliers 

Tôi biết PCA thông thường không theo mô hình xác suất cho dữ liệu quan sát. Vậy sự khác biệt cơ bản giữa PCA và PPCA là gì? Trong mô hình biến tiềm ẩn PPCA chứa ví dụ các biến quan sát , biến tiềm ẩn (biến không quan sát …

15 pca 

Trong quá trình đào tạo một bộ phân loại nhị phân mạng thần kinh đơn giản, tôi nhận được giá trị tổn thất cao, sử dụng entropy chéo. Mặc dù vậy, giá trị của độ chính xác trên bộ xác nhận giữ khá tốt. Nó có một số ý nghĩa? …

15 neural-networks  accuracy 

Giả sử bạn phù hợp với hồi quy tuyến tính / logistic , với mục đích ước tính không thiên vị của . Bạn đang rất tự tin rằng cả hai và là tương đối rất tích cực đối với tiếng ồn trong ước tính của họ.g(y)=a0+a1⋅x1+a2⋅x2g(y)=a0+a1⋅x1+a2⋅x2g(y) = a_0 + …

15 regression  regression-coefficients  unbiased-estimator  ratio 

Trong nhận dạng mẫu sách và học máy (công thức 1.27), nó mang lại py( y) = px( X ) |||dxdy|||= px( g( y) ) | g'( y) |py(y)= =px(x)|dxdy|= =px(g(y))|g'(y)|p_y(y)=p_x(x) \left | \frac{d x}{d y} \right |=p_x(g(y)) | g'(y) | trong đó , là pdf tương ứng với đối …

15 machine-learning  probability  self-study  derivative  jacobian 

Tôi đang cố gắng sử dụng lme4::glmer()để phù hợp với mô hình hỗn hợp nhị phân (GLMM) với biến phụ thuộc không phải là nhị phân, mà là biến liên tục giữa 0 và một. Người ta có thể nghĩ về biến này như một xác suất; trong thực tế, …

15 r  logistic  mixed-model  glmm  lme4-nlme 

Có phân phối nào cho hai biến ngẫu nhiên iid trong đó phân phối chung của X - Y là đồng nhất trên hỗ trợ [0,1] không?X,YX,YX,YX−YX−YX-Y

15 distributions  random-variable 

Tiêu chuẩn Gradient Descent sẽ tính toán độ dốc cho toàn bộ tập dữ liệu đào tạo. for i in range(nb_epochs): params_grad = evaluate_gradient(loss_function, data, params) params = params - learning_rate * params_grad Đối với số lượng epoch được xác định trước, trước tiên, chúng tôi tính toán vectơ gradient …

15 machine-learning  optimization  gradient-descent  computational-statistics  sgd 

Kẻ cướp nhiều cánh tay hoạt động tốt trong tình huống bạn có lựa chọn và bạn không chắc chắn kẻ nào sẽ tối đa hóa sức khỏe của bạn. Bạn có thể sử dụng thuật toán cho một số tình huống thực tế. Ví dụ, học tập có thể …

15 algorithms  reinforcement-learning  multiarmed-bandit 

Đối với một vấn đề suy luận nhất định, chúng ta biết rằng một cách tiếp cận Bayes thường khác nhau về cả hình thức và kết quả từ cách tiếp cận đầy đủ. Những người thường xuyên (thường bao gồm tôi) thường chỉ ra rằng các phương pháp của …

15 bayesian  inference  likelihood  likelihood-ratio  frequentist 

Xem xét bước đi ngẫu nhiên 1 chiều trên các số nguyên ZZ\mathbb{Z} với trạng thái ban đầu x∈Zx∈Zx\in\mathbb{Z} : Sn=x+∑i=1nξiSn=x+∑i=1nξi\begin{equation} S_n=x+\sum^n_{i=1}\xi_i \end{equation} nơi gia số ξiξi\xi_i là IID mà P{ξi=1}=P{ξi=−1}=12P{ξi=1}=P{ξi=−1}=12P\{\xi_i=1\}=P\{\xi_i=-1\}=\frac{1}{2} . Người ta có thể chứng minh rằng (1) Px{Sn reaches +1 eventually}=1Px{Sn reaches +1 eventually}=1\begin{equation} P^x{\{S_n \text{ reaches …

15 probability  terminology  stochastic-processes  randomness  random-walk 

Tôi đang thử nghiệm thuật toán máy tăng cường độ dốc thông qua caretgói trong R. Sử dụng một bộ dữ liệu tuyển sinh đại học nhỏ, tôi đã chạy đoạn mã sau: library(caret) ### Load admissions dataset. ### mydata <- read.csv("http://www.ats.ucla.edu/stat/data/binary.csv") ### Create yes/no levels for admission. ### mydata$admit_factor[mydata$admit==0] …

15 machine-learning  caret  boosting  gbm  hypothesis-testing  t-test  panel-data  psychometrics  intraclass-correlation  generalized-linear-model  categorical-data  binomial  model  intercept  causality  cross-correlation  distributions  ranks  p-value  z-test  sign-test  time-series  references  terminology  cross-correlation  definition  probability  distributions  beta-distribution  inverse-gamma  missing-data  paired-comparisons  paired-data  clustered-standard-errors  cluster-sample  time-series  arima  logistic  binary-data  odds-ratio  medicine  hypothesis-testing  wilcoxon-mann-whitney  unsupervised-learning  hierarchical-clustering  neural-networks  train  clustering  k-means  regression  ordinal-data  change-scores  machine-learning  experiment-design  roc  precision-recall  auc  stata  multilevel-analysis  regression  fitting  nonlinear  jmp  r  data-visualization  gam  gamm4  r  lme4-nlme  many-categories  regression  causality  instrumental-variables  endogeneity  controlling-for-a-variable 

Câu hỏi CV Tôi đang cố gắng đưa ra (a) các biểu diễn toán học chi tiết và ngắn gọn của một mô hình hiệu ứng hỗn hợp. Tôi đang sử dụng lme4gói trong R. Biểu diễn toán học chính xác cho mô hình của tôi là gì? Dữ liệu, …

15 r  mixed-model  multilevel-analysis  lme4-nlme 

Theo hiểu biết của tôi, tính toán gần đúng Bayes (ABC) và Markov Chain Monte Carlo (MCMC) có mục tiêu rất giống nhau. Dưới đây tôi mô tả sự hiểu biết của tôi về các phương pháp này và cách tôi nhận thấy sự khác biệt trong ứng dụng của …

15 bayesian  mcmc  computational-statistics 

Câu hỏi cơ bản của tôi là: làm thế nào bạn lấy mẫu từ một phân phối không phù hợp? Nó thậm chí có ý nghĩa để lấy mẫu từ một phân phối không phù hợp? Nhận xét của Xi'an ở đây loại địa chỉ câu hỏi, nhưng tôi đang …

15 distributions  bayesian  mcmc  markov-process  improper-prior