Thống kê và dữ liệu lớn

Khi thêm một công cụ dự đoán số với các công cụ dự đoán phân loại và tương tác của chúng, thường được coi là cần thiết để căn giữa các biến ở mức 0 trước. Lý do là các hiệu ứng chính khó diễn giải khi chúng được đánh …

9 centering  quadratic-form 

Tôi có một ma trận tương quan cặp giữa n mục. Bây giờ tôi muốn tìm một tập hợp con của k mục có tương quan ít nhất. Do đó, có hai câu hỏi: Đâu là biện pháp thích hợp cho mối tương quan trong nhóm đó? Làm thế nào …

9 correlation  ranking 

Có thể vẽ sơ đồ phụ thuộc một phần để hiển thị xác suất lớp và ước tính tác động của bộ dự đoán cho mô hình GBM không? Một cái gì đó tương tự partialPlottừ randomForestgói. Theo bài viết này , một phần cốt truyện có thể thực hiện …

9 r  gbm 

Tôi đã thấy trong các tài liệu xuất bản (và được đăng trên đây) rằng hiệu quả tương đối không có triệu chứng của bài kiểm tra xếp hạng Wilcoxon đã ký ít nhất là 0,864 khi so sánh với bài kiểm tra t. Tôi cũng đã nghe nói rằng …

9 nonparametric  power  wilcoxon-signed-rank  paired-comparisons  efficiency 

Giả sử bạn có một đồng tiền công bằng mà bạn có thể lật bao nhiêu lần tùy ý (có thể là vô hạn). Là nó có thể tạo ra sự phân bố đồng đều rời rạc trên , nơi KHÔNG phải là một sức mạnh của 2? Bạn sẽ …

9 random-generation  uniform 

Tôi đang làm việc thông qua Think Bayes (miễn phí tại đây: http://www.greenteapress.com/thinkbayes/ ) và tôi đang tập thể dục 3.1. Dưới đây là tóm tắt về vấn đề: "Một đường sắt đánh số đầu máy xe lửa theo thứ tự 1..N. Một ngày nọ, bạn thấy một đầu máy …

9 bayesian  conditional-probability  bayes 

Đặt YYY và XXX là các biến ngẫu nhiên. E(Y|X)E(Y|X)E(Y|X) là giá trị trung bình có điều kiện của YYY cho XXX . Chúng ta nói YYY không liên quan đến nhân quả XXXnếu E(Y|X)E(Y|X)E(Y|X) không phụ thuộc vào XXX , điều đó hàm ý nó bằng E(Y)E(Y)E(Y) . Bây …

9 econometrics  causality  conditional-expectation 

Tôi đang sử dụng trình phân loại dựa trên Mạng thần kinh để chạy phân loại dữ liệu của mình theo chiều n. Sau đó, tôi nghĩ rằng có thể nên chạy giảm kích thước như PCA cho dữ liệu của mình lúc đầu, sau đó đưa kết quả PCA …

9 pca  neural-networks 

Tôi vừa nhận được một bản sao của các yếu tố của việc học thống kê của Hastie, Tibshirani và Friedman. Trong chương 2 (Tổng quan về học tập có giám sát) phần 4 (Lý thuyết quyết định thống kê), ông đưa ra một dẫn xuất của hàm hồi quy. …

9 regression  statistical-learning 

Tôi có dữ liệu cho các vụ tai nạn xe máy theo giờ trong ngày. Như bạn mong đợi, chúng ở mức cao vào giữa ngày và cao điểm vào giờ cao điểm. Geom_d mật độ mặc định của ggplot2 làm mịn nó ra Một tập hợp con của dữ …

9 r  pdf  kernel-smoothing  splines 

Giả sử mô hình hồi quy bivariate sau: trong đó là iid cho .u i N ( 0 , σ 2 = 9 ) i = 1 , ... , nyTôi= βxTôi+ bạnTôi,yTôi= =βxTôi+bạnTôi, y_i = \beta x_i + u_i, bạnTôibạnTôiu_iN( 0 , σ2= 9 )N(0,σ2= =9)N(0, \sigma^2 = 9)i …

9 probability  self-study  bayesian  confidence-interval  credible-interval 

Từ những gì tôi đã đọc Hamiltonian Monte Carlo là MCMCphương pháp "goto" khi vấn đề của bạn là chiều cao. Thực tế mà nói, có bao nhiêu kích thước 10, 100, 1.000, 10.000, 100.000, ... là quá nhiều? Chi phí tính toán chắc chắn sẽ trở thành một vấn …

9 autocorrelation  mcmc  monte-carlo  dimensionality-reduction 

Nói rằng chúng tôi có các dữ liệu sau: set.seed(123) data <- data.frame(x = c(rnorm(50, 1, 1), rnorm(50, 5, 2)), y = c(rep('A', 50), rep('B', 50))) Mà mang lại boxplot sau ( boxplot(data$x ~ data$y)): Bây giờ hãy nói rằng tôi muốn kiểm tra xem hai mẫu có cùng tham …

9 r  nonparametric  wilcoxon-mann-whitney 

Tôi đang đặt câu hỏi này để làm rõ về các điều khoản giữa "phân phối null" và "phân phối mẫu". Tôi thấy rằng khi một số người nói phân phối null , thực ra họ có ý nghĩa tương tự như khi những người khác nói phân phối mẫu …

9 hypothesis-testing  distributions  sampling 

Tôi không phải là một chuyên gia, vì vậy hãy tha thứ cho tôi nếu một số thuật ngữ hơi vụng về. Rất vui được cung cấp thêm thông tin khi có yêu cầu. Tôi có hai vectơ gồm 50 giá trị số được ghép nối trong R. Tôi muốn …

9 r  statistical-significance  permutation-test