Thống kê và dữ liệu lớn

Tôi muốn đưa thuật ngữ và bình phương (biến dự báo) vào hồi quy vì tôi giả sử rằng giá trị thấp của có tác động tích cực đến biến phụ thuộc và giá trị cao có tác động tiêu cực. Các nên nắm bắt được ảnh hưởng của các …

9 regression  multiple-regression  polynomial  centering 

Tôi đã xem xét một bài báo dựa trên ứng dụng nói rằng áp dụng PCA trước khi áp dụng ICA (sử dụng gói fastICA). Câu hỏi của tôi là, ICA (fastICA) có yêu cầu PCA được chạy trước không? Bài báo này đề cập rằng ... Người ta cũng …

9 pca  dimensionality-reduction  pattern-recognition  ica 

Tôi có một nghi ngờ: xem xét các biến ngẫu nhiên thực có giá trị XXX và ZZZ cả hai định nghĩa trên không gian xác suất ( Ω , F, P )(Ω,F,P)(\Omega, \mathcal{F},\mathbb{P}) . Đặt Y: = g( X, Z)Y:=g(X,Z)Y:= g(X,Z) , trong đó g( ⋅ )g(⋅)g(\cdot) là hàm …

9 probability  random-variable 

Theo mặc định khi chúng ta sử dụng một glmhàm trong R, nó sử dụng phương pháp bình phương tối thiểu lặp lại (IWLS) để tìm ước lượng khả năng tối đa của các tham số. Bây giờ tôi có hai câu hỏi. Các ước tính của IWLS có đảm …

9 r  estimation  generalized-linear-model  maximum-likelihood  optimization 

Tôi có những dữ liệu này: set.seed(1) predictor <- rnorm(20) set.seed(1) counts <- c(sample(1:1000, 20)) df <- data.frame(counts, predictor) Tôi đã chạy một hồi quy poisson poisson_counts <- glm(counts ~ predictor, data = df, family = "poisson") Và một hồi quy nhị thức âm: require(MASS) nb_counts <- glm.nb(counts ~ predictor, …

9 generalized-linear-model  residuals  negative-binomial  poisson-regression  dispersion 

Đây là một vấn đề thực hành cho một kỳ thi giữa kỳ. Vấn đề là một ví dụ thuật toán EM. Tôi đang gặp rắc rối với một phần (f). Tôi liệt kê các phần (a) - (e) để hoàn thành và trong trường hợp tôi đã mắc lỗi …

9 self-study  maximum-likelihood  latent-variable  expectation-maximization 

Tôi đang xem xét thời gian mà các thẩm phán yêu cầu để đưa ra quyết định. Mỗi thẩm phán đánh giá một số ứng viên và có thể phê duyệt hoặc không phê duyệt đơn đăng ký. Vụ án được hoàn tất khi thẩm phán đưa ra báo cáo …

9 survival 

Khi (ví dụ, Y xuất phát từ mô hình hồi quy tuyến tính), ε ~ N ( 0 , σ 2 tôi )Y= A X+ εY=AX+εY = AX + \varepsilonYYY Và trong trường hợp đó dư e 1 , ... , e n có tương quan và không độc lập. …

9 regression  residuals  non-independent 

Giả sử tôi có bộ dữ liệu điểm 2D và tôi muốn phát hiện hướng của tất cả các phương sai cực đại cục bộ trong dữ liệu, ví dụ: PCA không giúp ích gì trong tình huống này vì đây là sự phân rã trực giao và do đó …

9 pca  dimensionality-reduction 

Tôi đang tìm kiếm để dự đoán các nhóm mặt hàng mà ai đó sẽ mua ... tức là tôi có nhiều biến phụ thuộc nhiều màu. Thay vì xây dựng 7 mô hình độc lập để dự đoán xác suất ai đó mua mỗi trong số 7 mặt hàng …

9 r  machine-learning  multivariate-analysis 

Giả sử thiết lập sau: Đặt . Ngoài ra . Hơn nữa tức là là sự kết hợp lồi của các ranh giới của các hỗ trợ tương ứng. là chung cho tất cả .Zi=min{ki,Xi},i=1,...,nZi=min{ki,Xi},i=1,...,nZ_i = \min\{k_i, X_i\}, i=1,...,nXi∼U[ai,bi],ai,bi>0Xi∼U[ai,bi],ai,bi>0X_i \sim U[a_i, b_i], \; a_i, b_i >0ki=cai+(1−c)bi,0<c<1ki=cai+(1−c)bi,0<c<1k_i = ca_i + (1-c)b_i,\;\; …

9 distributions  central-limit-theorem  censoring  minimum 

Tôi đã cố gắng cải thiện kiến ​​thức thống kê của mình, đặc biệt là liên quan đến xác định kích thước mẫu và Phân tích sức mạnh thống kê. Nhưng dường như càng đọc tôi càng cần đọc. Dù sao, tôi đã tìm thấy một công cụ có tên …

9 power-analysis  power  non-central 

Tôi đang làm việc trên một mô hình chi phí dự đoán trong đó tuổi của bệnh nhân (số lượng nguyên được đo bằng năm) là một trong những biến dự đoán. Một mối quan hệ phi tuyến mạnh mẽ giữa tuổi và nguy cơ nằm viện là điều hiển …

9 nonlinear-regression  lasso  ridge-regression  smoothing  splines 

Rõ ràng là sai lầm khi cho rằng việc không từ chối null ngụ ý rằng null là đúng. Nhưng trong trường hợp null không bị từ chối và khoảng tin cậy (CI) tương ứng bị thu hẹp và tập trung quanh 0, điều này có cung cấp bằng chứng …

9 hypothesis-testing  statistical-significance  confidence-interval 

Ý tôi là bất kỳ lý do nào ngoài sự thuận tiện để có thể hoàn thành phân tích trong một quy trình duy nhất.

9 anova