Thống kê và dữ liệu lớn

Bối cảnh: Lưu ý: Tập dữ liệu và mã r của tôi được bao gồm bên dưới văn bản Tôi muốn sử dụng AIC để so sánh hai mô hình hiệu ứng hỗn hợp được tạo bằng gói lme4 trong R. Mỗi mô hình có một hiệu ứng cố định …

18 maximum-likelihood  random-effects-model  fixed-effects-model  mixed-model  lme4-nlme 

Tôi dường như đã bối rối khi cố gắng hiểu nếu một giá trị -quared cũng có giá trị .prrrppp Theo tôi hiểu, trong tương quan tuyến tính với một tập hợp các điểm dữ liệu có thể có giá trị nằm trong khoảng từ đến và giá trị này, …

18 statistical-significance  p-value  r-squared 

Tôi có một bộ dữ liệu với N ~ 5000 và thiếu khoảng 1/2 trên ít nhất một biến quan trọng. Phương pháp phân tích chính sẽ là các mối nguy theo tỷ lệ Cox. Tôi có kế hoạch sử dụng nhiều lần cắt cụt. Tôi cũng sẽ được chia …

18 cross-validation  survival  multiple-imputation  train 

Tôi đã từng nghe rằng chuyển đổi log là cách phổ biến nhất cho các phân phối lệch phải trong hồi quy tuyến tính hoặc hồi quy lượng tử Tôi muốn biết có bất kỳ lý do nào bên dưới tuyên bố này? Tại sao chuyển đổi nhật ký phù …

18 regression  distributions  data-transformation  skewness 

Tôi đang sử dụng cv.glmnetđể tìm dự đoán. Thiết lập tôi sử dụng như sau: lassoResults<-cv.glmnet(x=countDiffs,y=responseDiffs,alpha=1,nfolds=cvfold) bestlambda<-lassoResults$lambda.min results<-predict(lassoResults,s=bestlambda,type="coefficients") choicePred<-rownames(results)[which(results !=0)] Để đảm bảo kết quả là tái sản xuất tôi set.seed(1). Các kết quả rất khác nhau. Tôi đã chạy chính xác mã 100 để xem kết quả biến như …

18 r  cross-validation  feature-selection  glmnet 

Sự khác biệt giữa hồi quy Primal , Dual và Kernel Ridge là gì? Mọi người đang sử dụng cả ba và vì ký hiệu khác nhau mà mọi người sử dụng ở các nguồn khác nhau rất khó để tôi theo dõi. Vì vậy, ai đó có thể nói …

18 regression  kernel-trick  ridge-regression 

Tôi đã phải đối mặt với thời gian khó hiểu ý nghĩa của "mẫu ngẫu nhiên" cũng như "biến ngẫu nhiên iid". Tôi đã cố gắng tìm hiểu ý nghĩa từ một số nguồn, nhưng càng ngày càng bối rối. Tôi đang đăng ở đây những gì tôi đã cố …

18 sampling  terminology  iid 

Tôi đang cố gắng so sánh trực quan cách ba ấn phẩm tin tức khác nhau bao gồm các chủ đề khác nhau (được xác định thông qua mô hình chủ đề LDA). Tôi có hai phương pháp liên quan để làm như vậy, nhưng đã nhận được nhiều phản …

18 data-visualization  communication 

Tôi đang cố gắng áp dụng MCMC cho một vấn đề, nhưng các thầy tu của tôi (trong trường hợp của tôi là )) có bị giới hạn trong một khu vực không? Tôi có thể sử dụng MCMC bình thường và bỏ qua các mẫu nằm ngoài vùng giới …

18 sampling  mcmc  monte-carlo  random-walk 

Trong hồi quy tuyến tính bội, có thể tìm ra hệ số với công thức sau. b = ( X'X)- 1( X') Yb= =(X'X)-1(X')Yb = (X'X)^{-1}(X')Y beta = solve(t(X) %*% X) %*% (t(X) %*% Y) ; beta Ví dụ: > y <- c(9.3, 4.8, 8.9, 6.5, 4.2, 6.2, 7.4, 6, …

18 logistic  regression-coefficients 

Tôi có một câu hỏi trong đó nó yêu cầu xác minh xem liệu phân phối Đồng phục ( ) có được chuẩn hóa hay không.Uniform(a,b)Uniform(a,b){\rm Uniform}(a,b) Đối với một, nó có nghĩa là gì đối với bất kỳ phân phối được chuẩn hóa? Và hai, làm thế nào để …

18 data-transformation  terminology  normalization  standardization 

Khi bạn xây dựng một biplot cho phân tích PCA, bạn có điểm PC1 thành phần chính trên trục x và điểm PC2 trên trục y. Nhưng hai trục còn lại ở bên phải và trên cùng của màn hình là gì?

18 r  pca  biplot 

Tôi muốn biết cách điều trị của trọng lượng khác nhau giữa svyglmvàglm Tôi đang sử dụng twanggói trong R để tạo điểm số xu hướng sau đó được sử dụng làm trọng số, như sau (mã này xuất phát từ twangtài liệu): library(twang) library(survey) set.seed(1) data(lalonde) ps.lalonde <- ps(treat …

18 r  survey 

tl; dr Cách được đề xuất để đối phó với discretedữ liệu khi thực hiện phát hiện bất thường là gì? Cách được đề xuất để đối phó với categoricaldữ liệu khi thực hiện phát hiện bất thường là gì? Câu trả lời này gợi ý sử dụng dữ liệu …

18 machine-learning  categorical-data  outliers  discrete-data  anomaly-detection 

Tôi đang cố gắng thực hiện một phân tích tồn tại thời gian riêng biệt bằng mô hình hồi quy logistic và tôi không chắc mình hoàn toàn hiểu được quy trình. Tôi sẽ đánh giá rất cao sự giúp đỡ với một vài câu hỏi cơ bản. Đây là …

18 survival  discrete-data  hazard  kaplan-meier