Thống kê và dữ liệu lớn cross-validation

1

Báo cáo phương sai của xác nhận chéo k-lặp đi lặp lại

Tôi đã sử dụng xác nhận chéo k-lặp đi lặp lại và đã báo cáo giá trị trung bình (của số liệu đánh giá, ví dụ: độ nhạy, độ đặc hiệu) được tính là giá trị trung bình trong các lần chạy khác nhau của xác thực chéo. Tuy nhiên, …

17 cross-validation

2

Bao nhiêu lần chúng ta nên lặp lại một CV gấp?

Tôi đã bắt gặp chủ đề này xem xét sự khác biệt giữa bootstrapping và xác thực chéo - nhân tiện, câu trả lời và tài liệu tham khảo tuyệt vời. Những gì tôi đang tự hỏi là bây giờ, nếu tôi là để thực hiện lặp đi lặp lại …

17 cross-validation

3

Làm thế nào để có được các tham số siêu trong xác nhận chéo lồng nhau?

Tôi đã đọc các bài viết sau để xác thực chéo lồng nhau và vẫn không chắc chắn 100% tôi sẽ làm gì với lựa chọn mô hình với xác thực chéo lồng nhau: Xác thực chéo lồng nhau để lựa chọn mô hình Lựa chọn mô hình và xác …

16 cross-validation scikit-learn hyperparameter

1

Caret - Xác thực chéo K-lần lặp lại so với xác thực chéo K-gấp, lặp lại n lần

Các caret gói là một thư viện R rực rỡ cho việc xây dựng nhiều mô hình học máy, và có một số chức năng để xây dựng và đánh giá mô hình. Để điều chỉnh tham số và đào tạo mô hình, gói caret cung cấp 'repeatcv' là một …

16 cross-validation caret

1

Có nên sử dụng xác nhận chéo nhiều lần để đánh giá các mô hình dự đoán?

Tôi đã xem qua bài viết năm 2012 này của Gitte Vanwinckelen và Hendrik Blockeel khi đặt câu hỏi về tiện ích của việc xác thực chéo nhiều lần, đã trở thành một kỹ thuật phổ biến để giảm phương sai của xác thực chéo. Các tác giả đã chứng …

16 cross-validation

3

Tìm kiếm lưới trên xác nhận chéo k-Fold

Tôi đã có bộ dữ liệu gồm 120 mẫu trong cài đặt xác thực chéo 10 lần. Hiện tại, tôi chọn dữ liệu huấn luyện của lần đầu tiên và thực hiện xác nhận chéo 5 lần trên đó để chọn các giá trị của gamma và C bằng cách …

16 machine-learning classification cross-validation svm

7

Định nghĩa của Best best tốt nhất được sử dụng trong thuật ngữ phù hợp nhất và xác thực chéo là gì?

Nếu bạn khớp một hàm phi tuyến tính với một tập hợp các điểm (giả sử chỉ có một tọa độ cho mỗi abscissa) thì kết quả có thể là: một chức năng rất phức tạp với số dư nhỏ một chức năng rất đơn giản với số dư lớn …

16 model-selection cross-validation

2

Xác thực chéo PCA và k-gấp trong gói caret trong R

Tôi vừa xem lại một bài giảng từ khóa học về Machine Learning trên Coursera. Trong phần mà giáo sư thảo luận về PCA về dữ liệu tiền xử lý trong các ứng dụng học tập có giám sát, ông nói rằng PCA chỉ nên được thực hiện trên dữ …

16 r pca cross-validation caret

4

Chuẩn hóa trước khi xác thực chéo

Việc chuẩn hóa dữ liệu (để có độ lệch chuẩn trung bình và độ lệch chuẩn) bằng 0 trước khi thực hiện xác thực chéo k-lặp lại có bất kỳ sự chinh phục tiêu cực nào như quá mức không? Lưu ý: đây là tình huống trong đó #case> tổng …

16 cross-validation normalization

2

Lỗi hết túi khiến CV không cần thiết trong Rừng ngẫu nhiên?

Tôi còn khá mới với những khu rừng ngẫu nhiên. Trước đây, tôi luôn so sánh độ chính xác của sự phù hợp với thử nghiệm so với sự phù hợp với sự phù hợp để phát hiện bất kỳ sự quá mức nào. Nhưng tôi chỉ đọc ở đây …

15 cross-validation random-forest overfitting

1

Trực giác đằng sau các mẫu trao đổi theo giả thuyết null là gì?

Các thử nghiệm hoán vị (còn gọi là thử nghiệm ngẫu nhiên, thử nghiệm ngẫu nhiên lại hoặc thử nghiệm chính xác) rất hữu ích và có ích khi giả định phân phối bình thường theo yêu cầu, t-testkhông được đáp ứng và khi chuyển đổi các giá trị theo …

15 hypothesis-testing permutation-test exchangeability r statistical-significance loess data-visualization normal-distribution pdf ggplot2 kernel-smoothing probability self-study expected-value normal-distribution prior correlation time-series regression heteroscedasticity estimation estimators fisher-information data-visualization repeated-measures binary-data panel-data mathematical-statistics coefficient-of-variation normal-distribution order-statistics regression machine-learning one-class probability estimators forecasting prediction validation finance measurement-error variance mean spatial monte-carlo data-visualization boxplot sampling uniform chi-squared goodness-of-fit probability mixture theory gaussian-mixture regression statistical-significance p-value bootstrap regression multicollinearity correlation r poisson-distribution survival regression categorical-data ordinal-data ordered-logit regression interaction time-series machine-learning forecasting cross-validation binomial multiple-comparisons simulation false-discovery-rate r clustering frequency wilcoxon-mann-whitney wilcoxon-signed-rank r svm t-test missing-data excel r numerical-integration r random-variable lme4-nlme mixed-model weighted-regression power-law errors-in-variables machine-learning classification entropy information-theory mutual-information

2

Giá trị trung bình (điểm) so với Điểm (ghép) trong xác thực chéo

TLDR: Tập dữ liệu của tôi là khá nhỏ (120) mẫu. Trong khi thực hiện xác nhận chéo 10 lần, tôi nên: Thu thập các kết quả đầu ra từ mỗi lần kiểm tra, ghép chúng thành một vectơ và sau đó tính toán sai số trên vectơ đầy đủ …

15 classification cross-validation small-sample

1

Khi nào / ở đâu để sử dụng phân tích dữ liệu chức năng?

Tôi rất mới để phân tích dữ liệu chức năng (FDA). Tôi đang đọc: Ramsay, James O., và Silverman, Bernard W. (2006), Phân tích dữ liệu chức năng, tái bản lần 2, Springer, New York. Tuy nhiên, tôi vẫn chưa rõ lắm về việc sử dụng FDA ở đâu / …

15 statistical-significance cross-validation nonparametric

2

Quy trình để xác thực bootstrap của cải thiện (hay còn gọi là xác định lại cách xác thực chéo) là gì?

"Xác thực Bootstrap" / "xác thực lại xác thực chéo" là mới đối với tôi, nhưng đã được thảo luận bởi câu trả lời cho câu hỏi này . Tôi thu thập nó bao gồm 2 loại dữ liệu: dữ liệu thực và dữ liệu mô phỏng, trong đó một …

15 cross-validation bootstrap validation resampling

2

Làm thế nào để xác thực chéo với mô hình mối nguy theo tỷ lệ Cox?

Giả sử tôi đã xây dựng một mô hình dự đoán cho sự xuất hiện của một bệnh cụ thể trong một tập dữ liệu (tập dữ liệu xây dựng mô hình) và bây giờ muốn kiểm tra xem mô hình đó hoạt động tốt như thế nào trong một …

15 predictive-models cross-validation survival roc

Câu hỏi được gắn thẻ «cross-validation»