Thống kê và dữ liệu lớn self-study

5

Làm thế nào để thực hiện việc cắt bỏ các giá trị trong số lượng điểm dữ liệu rất lớn?

Tôi có một bộ dữ liệu rất lớn và thiếu khoảng 5% giá trị ngẫu nhiên. Các biến này có mối tương quan với nhau. Ví dụ R tập dữ liệu sau đây chỉ là một ví dụ đồ chơi với dữ liệu tương quan giả. set.seed(123) # matrix of …

12 r random-forest missing-data data-imputation multiple-imputation large-data definition moving-window self-study categorical-data econometrics standard-error regression-coefficients normal-distribution pdf lognormal regression python scikit-learn interpolation r self-study poisson-distribution chi-squared matlab matrix r modeling multinomial mlogit choice monte-carlo indicator-function r aic garch likelihood r regression repeated-measures simulation multilevel-analysis chi-squared expected-value multinomial yates-correction classification regression self-study repeated-measures references residuals confidence-interval bootstrap normality-assumption resampling entropy cauchy clustering k-means r clustering categorical-data continuous-data r hypothesis-testing nonparametric probability bayesian pdf distributions exponential repeated-measures random-effects-model non-independent regression error regression-to-the-mean correlation group-differences post-hoc neural-networks r time-series t-test p-value normalization probability moments mgf time-series model seasonality r anova generalized-linear-model proportion percentage nonparametric ranks weighted-regression variogram classification neural-networks fuzzy variance dimensionality-reduction confidence-interval proportion z-test r self-study pdf

2

Trong dữ liệu sai lệch trái, mối quan hệ giữa trung bình và trung bình là gì?

Tôi nghĩ rằng trung bình có nghĩa.≤≤\leq Đây có phải là trường hợp?

12 distributions self-study mean skewness median

4

Số dự kiến tôi sẽ có sau khi rút thẻ cho đến khi tôi nhận được ace, 2, 3, v.v.

Tôi đang gặp một số khó khăn để giải quyết sau đây. Bạn rút thẻ từ bộ bài 52 lá tiêu chuẩn mà không cần thay thế cho đến khi bạn có được một con át chủ bài. Bạn rút ra từ những gì còn lại cho đến khi bạn …

12 self-study conditional-probability conditional-expectation games conditioning

2

Thống kê đầy đủ là gì?

Tôi có một số khó khăn để hiểu đầy đủ thống kê đầy đủ? Đặt là một thống kê đầy đủ.T=ΣxiT=ΣxiT=\Sigma x_i Nếu với xác suất 1, đối với một số hàm g , thì đó là một thống kê đầy đủ.E[g(T)]=0E[g(T)]=0E[g(T)]=0ggg Nhưng điều này có nghĩa là gì? Tôi …

12 self-study estimation intuition decision-theory

1

Sự khác biệt giữa PROC Hỗn hợp và lme / lmer trong R - bậc tự do

Lưu ý: câu hỏi này là một bài đăng lại, vì câu hỏi trước đây của tôi đã bị xóa vì lý do pháp lý. Trong khi so sánh PROC MIXED từ SAS với chức năng lmetừ nlmegói trong R, tôi tình cờ thấy một số khác biệt khá khó …

12 r mixed-model sas degrees-of-freedom pdf unbiased-estimator distance-functions functional-data-analysis hellinger time-series outliers c++ relative-risk absolute-risk rare-events regression t-test multiple-regression survival teaching multiple-regression regression self-study t-distribution machine-learning recommender-system self-study binomial standard-deviation data-visualization r predictive-models pearson-r spearman-rho r regression modeling r categorical-data data-visualization ggplot2 many-categories machine-learning cross-validation weka microarray variance sampling monte-carlo regression cross-validation model-selection feature-selection elastic-net distance-functions information-theory r regression mixed-model random-effects-model fixed-effects-model dataset data-mining

2

Các tích phân gần đúng sử dụng mô phỏng Monte Carlo trong R

Làm cách nào để tính gần đúng tích phân sau bằng mô phỏng MC? ∫1−1∫1−1|x−y|dxdy∫−11∫−11|x−y|dxdy \int_{-1}^{1} \int_{-1}^{1} |x-y| \,\mathrm{d}x \,\mathrm{d}y Cảm ơn! Chỉnh sửa (Một số ngữ cảnh): Tôi đang cố gắng học cách sử dụng mô phỏng để tích phân gần đúng và tôi đang thực hiện một số …

12 r self-study monte-carlo

5

Phân loại tốt hơn mặc định trong hồi quy logistic

Tiết lộ đầy đủ: Đây là bài tập về nhà. Tôi đã bao gồm một liên kết đến tập dữ liệu ( http://www.bertelsen.ca/R/logistic-regression.sav ) Mục tiêu của tôi là tối đa hóa dự đoán của những người vỡ nợ cho vay trong bộ dữ liệu này. Mọi mô hình mà …

12 r logistic spss self-study

4

Điều gì khiến lasso không ổn định để lựa chọn tính năng?

Trong cảm biến nén, có một định lý đảm bảo rằng có một giải pháp thưa thớt duy nhất c (Xem phụ lục để biết thêm chi tiết).cargmin∥c∥1subject to y=Xcargmin‖c‖1subject to y=Xc\text{argmin} \Vert c \Vert_1\\ \text{subject to } y = Xc ccc Có một định lý tương tự cho Lasso? …

12 regression self-study feature-selection lasso regularization

1

Hiệu quả nhân quả bằng cách điều chỉnh cửa sau và cửa trước

Nếu chúng ta muốn tính hiệu ứng nhân quả của trên trong biểu đồ nhân quả bên dưới, chúng ta có thể sử dụng cả hai định lý điều chỉnh cửa sau và điều chỉnh cửa trước, tức là Y P ( y | do ( X = x ) …

12 self-study causality graph-theory dag

1

Kiểm tra chính xác và phân phối siêu âm của Fisher

Tôi muốn hiểu thử nghiệm chính xác của ngư dân tốt hơn, vì vậy tôi đã nghĩ ra ví dụ đồ chơi sau đây, trong đó f và m tương ứng với nam và nữ, và n và y tương ứng với "tiêu thụ soda" như thế này: > soda_gender …

12 fishers-exact hypergeometric clustering supervised-learning modeling econometrics r regression residuals heteroscedasticity independence distributions self-study matlab libsvm self-study conditional-probability conditional-expectation hypothesis-testing self-study multiple-comparisons mode statistical-significance chi-squared multiple-comparisons maximum-likelihood poisson-process optimization uncertainty genetic-algorithms bayesian model-selection overfitting maximum-likelihood optimization approximation r prediction model-evaluation r machine-learning survival neural-networks cox-model machine-learning bayesian bayesian-network hierarchical-bayesian pooling

4

Bootstrap, Monte Carlo

Tôi đã được đặt câu hỏi sau đây như là một phần của bài tập về nhà: Thiết kế và thực hiện một nghiên cứu mô phỏng để kiểm tra hiệu suất của bootstrap để có được khoảng tin cậy 95% trên giá trị trung bình của một mẫu dữ …

12 r self-study bootstrap monte-carlo

1

Bằng chứng là nếu khoảnh khắc cao hơn tồn tại thì khoảnh khắc thấp hơn cũng tồn tại

Các khoảnh khắc -thứ của một biến ngẫu nhiên là hữu hạn nếu X E ( | X r | ) < ∞rrrXXXE(|Xr|)<∞E(|Xr|)<∞ \mathbb E(|X^r|)< \infty Tôi đang cố gắng chỉ ra rằng với bất kỳ số nguyên dương nào , thì khoảnh khắc thứ cũng là hữu hạn.s E …

12 self-study moments function

1

Làm thế nào để hiểu rằng MLE of Variance bị sai lệch trong phân phối Gaussian?

Tôi đang đọc PRML và tôi không hiểu bức tranh. Bạn có thể vui lòng đưa ra một số gợi ý để hiểu bức tranh và tại sao MLE của phương sai trong phân phối Gaussian bị sai lệch? công thức 1,55: công thức 1.56 σ 2 M L E …

12 machine-learning self-study maximum-likelihood

3

Xuất phát của hàm chi phí hồi quy tuyến tính thường xuyên trên mỗi khóa học máy Coursera

Tôi đã tham gia khóa học "Machine Learning" của Andrew Ng qua Coursera vài tháng trước, không chú ý đến hầu hết các môn toán / phái sinh và thay vào đó tập trung vào thực hiện và thực tiễn. Kể từ đó, tôi đã bắt đầu quay lại để …

12 regression self-study

6

Làm thế nào một người nên chấp nhận vấn đề Dự án Euler 213 (Xiếc Flea Circus ')?

Tôi muốn giải quyết Project Euler 213 nhưng không biết bắt đầu từ đâu vì tôi là giáo dân trong lĩnh vực Thống kê, lưu ý rằng cần có câu trả lời chính xác để phương pháp Monte Carlo không hoạt động. Bạn có thể giới thiệu một số chủ …

11 self-study monte-carlo markov-process

Câu hỏi được gắn thẻ «self-study»