Thống kê và dữ liệu lớn

1

Điểm phân chia dữ liệu thành các phần đào tạo và kiểm tra để đánh giá các thuộc tính dự đoán khi chúng ta có AIC là gì?

Không có triệu chứng, tối thiểu hóa AIC tương đương với giảm thiểu MSE xác thực chéo một lần cho dữ liệu cắt ngang [ 1 ]. Vậy khi chúng ta có AIC, tại sao một người lại sử dụng phương pháp phân chia dữ liệu thành các tập huấn …

8 predictive-models aic

1

Sự sai lệch của một phân phối là gì?

Sự sai lệch của một phân phối là gì? Tôi hỏi nó tại sao bất kỳ chỉ số cụ thể có vẻ thiếu quyết đoán về tính đối xứng, và trong một số trường hợp cũng về sự bất cân xứng.

8 interpretation terminology skewness definition

3

Cách thực hiện SVD để áp đặt các giá trị bị thiếu, một ví dụ cụ thể

Tôi đã đọc những bình luận tuyệt vời về cách xử lý các giá trị bị thiếu trước khi áp dụng SVD, nhưng tôi muốn biết nó hoạt động như thế nào với một ví dụ đơn giản: Movie1 Movie2 Movie3 User1 5 4 User2 2 5 5 User3 3 …

8 r missing-data data-imputation svd sampling matlab mcmc importance-sampling predictive-models prediction algorithms graphical-model graph-theory r regression regression-coefficients r-squared r regression modeling confounding residuals fitting glmm zero-inflation overdispersion optimization curve-fitting regression time-series order-statistics bayesian prior uninformative-prior probability discrete-data kolmogorov-smirnov r data-visualization histogram dimensionality-reduction classification clustering accuracy semi-supervised labeling state-space-models t-test biostatistics paired-comparisons paired-data bioinformatics regression logistic multiple-regression mixed-model random-effects-model neural-networks error-propagation numerical-integration time-series missing-data data-imputation probability self-study combinatorics survival cox-model statistical-significance wilcoxon-mann-whitney hypothesis-testing distributions normal-distribution variance t-distribution probability simulation random-walk diffusion hypothesis-testing z-test hypothesis-testing data-transformation lognormal r regression agreement-statistics classification svm mixed-model non-independent observational-study goodness-of-fit residuals confirmatory-factor neural-networks deep-learning

3

Định nghĩa về tính hợp lệ của một biến công cụ

"Tính hợp lệ của một công cụ" có nghĩa là gì? Trong khóa học kinh tế lượng của tôi, chúng tôi vừa xác định tính hợp lệ của công cụ là , trong đó là biến công cụ và là thuật ngữ lỗi của mô hình hồi quy đơn biến. …

8 econometrics instrumental-variables

2

Cấu trúc liên kết mạng thần kinh tái phát (RNN): tại sao luôn được kết nối đầy đủ?

Tôi đã bắt đầu đọc về Mạng thần kinh tái phát (RNNs) và Bộ nhớ ngắn hạn (LSTM) ... (... ồ, không đủ điểm đại diện ở đây để liệt kê tài liệu tham khảo ...) Một điều tôi không nhận được: Dường như các nơ-ron trong mỗi trường hợp …

8 machine-learning neural-networks backpropagation

1

Làm thế nào để đo lường chính xác dự báo xác suất?

Giả sử tôi đưa ra một loạt các dự báo xác suất như: 70% xác suất tăng trưởng doanh thu sẽ là 10 - 15% trong Q1, 10% xác suất tăng trưởng doanh thu sẽ> 15%, xác suất 20% rằng tăng trưởng doanh thu sẽ <10% Với dữ liệu thực …

8 forecasting scoring-rules

3

Sự khác biệt giữa MLP (Perceptionron nhiều lớp) và Mạng nơ-ron?

Tôi đang tự hỏi về sự khác biệt. Dựa trên sự hiểu biết của tôi, MLP là một loại mạng thần kinh, trong đó chức năng kích hoạt là sigmoid và thuật ngữ lỗi là lỗi entropy chéo (hậu cần). Tìm kiếm sự giúp đỡ, cảm ơn!

8 neural-networks perceptron

2

Các quy trình Gaussian với diện tích lấy mẫu hữu hạn

Tôi xin lỗi trước nếu câu hỏi này được đặt ra kém: Tôi là một nhà thiên văn học, không phải là một nhà thống kê. Câu hỏi của tôi đặc biệt nhằm mục đích giúp tôi tìm hiểu xem các quy trình Gaussian có phải là một kỹ thuật …

8 gaussian-process

1

Phân phối đa thức bậc hai của biến ngẫu nhiên Gaussian

Tôi muốn tính P( Y= a X2+ b X+ c < 0 )P(Y=aX2+bX+c<0)P(Y=aX^2+bX+c<0) trong đó . Tôi có thể làm điều đó khá dễ dàng bằng cách sử dụng Monte Carlo. Tuy nhiên, tôi đã được yêu cầu tìm pdf f Y ( y ) phân tích của Y và …

8 probability normal-distribution pdf polynomial

1

So sánh mô hình Bayes ở trường trung học

Tôi dạy vật lý cho học sinh trung học, và tôi muốn học sinh của mình tiến hành so sánh mô hình Bayes thô sơ cho dữ liệu từ thí nghiệm của họ. Tôi đã tìm ra một cách để họ làm như vậy (xem bên dưới), nhưng tôi không …

8 bayesian linear-model model-comparison teaching bayes-factors

1

Phân phối đề xuất - Metropolis Hastings MCMC

Trong chuỗi cửa hàng Monte Carlo Markov, Monte Carlo, phân phối đề xuất có thể là bất cứ thứ gì kể cả Gaussian (theo Wikipedia). Q: Động lực để sử dụng bất cứ thứ gì ngoài Gaussian là gì? Gaussian hoạt động, thật dễ dàng để đánh giá, nó nhanh …

8 sampling mcmc monte-carlo metropolis-hastings

2

Thống kê độc lập và trật tự

Tôi có một vấn đề trong tay, mà tôi không thể tiến hành. Ai đó có thể giúp tôi bắt đầu? Y1< Y2< Y3Y1<Y2<Y3Y_1<Y_2<Y_3 : Thống kê đơn hàng có kích thước 3 từ phân phối có pdf f( x ) = 2 x 0 < x < 1 f(x)= …

8 self-study independence joint-distribution order-statistics

1

Nếu một ma trận hiệp phương sai nghịch đảo là thưa thớt, tôi có thể nói gì về ma trận hiệp phương sai?

Làm thế nào để điều kiện thưa thớt trên một ma trận hiệp phương sai nghịch ảnh hưởng đến ma trận hiệp phương sai thực tế?

8 mathematical-statistics covariance-matrix linear-algebra

1

Làm cách nào để kiểm tra tính độc lập với các biến phân loại không độc quyền?

Giới thiệu Tôi có một bảng dự phòng phân loại với nhiều hàng và kết quả nhị phân, tôi tính: name outcome1 outcome2 ---- -------- -------- A 14 5 B 17 2 C 6 5 D 11 8 E 18 14 Điều này hoàn toàn tốt, bởi vì cả hai …

8 categorical-data non-independent predictor

1

Hệ số biến tăng, sau đó giảm khi lambda giảm (LASSO)

Tôi đang hồi quy một công cụ dự đoán liên tục trên 60 biến (cả liên tục và phân loại) bằng LASSO (glmnet). Khi kiểm tra biểu đồ theo dõi biến, tôi nhận thấy rằng khi log lambda tăng, một trong những biến chính có hệ số thực sự tăng. …

8 lasso regularization glmnet