Câu hỏi được gắn thẻ «cross-validation»

Sự khác biệt giữa xác nhận chéo phân tầng và xác nhận chéo là gì? Wikipedia nói: Trong xác thực chéo k phân tầng , các nếp gấp được chọn sao cho giá trị phản hồi trung bình xấp xỉ bằng nhau trong tất cả các nếp gấp. Trong trường …

55 cross-validation  stratification 

Đối với tôi, có vẻ như xác nhận giữ lại là vô ích. Đó là, chia dữ liệu gốc thành hai phần (đào tạo và kiểm tra) và sử dụng điểm kiểm tra làm thước đo tổng quát, có phần vô dụng. Xác thực chéo K-Fold dường như cung cấp …

54 machine-learning  cross-validation  validation 

Trong học tập thống kê, ngầm hay rõ ràng, một luôn luôn giả định rằng các tập huấn luyện gồm tuples đầu vào / response được rút ra độc lập từ cùng một phân phối chung vớiD={X,y}D={X,y}\mathcal{D} = \{ \bf {X}, \bf{y} \}NNNP ( X , y )(Xi,yi)(Xi,yi)({\bf{X}}_i,y_i) P(X,y)P(X,y)\mathbb{P}({\bf{X}},y) p(X,y)=p(y|X)p(X)p(X,y)=p(y|X)p(X) …

54 machine-learning  cross-validation  non-independent  iid 

Xem xét một vấn đề hồi quy cũ tốt với các yếu tố dự đoán và cỡ mẫu . Sự khôn ngoan thông thường là công cụ ước tính OLS sẽ vượt trội và thường sẽ vượt trội hơn so với công cụ ước tính hồi quy sườn:Đó là tiêu …

50 cross-validation  regularization  overfitting  ridge-regression  shrinkage 

Tôi có chuyển đổi tất cả dữ liệu hoặc nếp gấp của mình (nếu CV được áp dụng) cùng một lúc không? ví dụ (allData - mean(allData)) / sd(allData) Tôi có biến đổi trainset và testset riêng không? ví dụ (trainData - mean(trainData)) / sd(trainData) (testData - mean(testData)) / sd(testData) …

47 r  cross-validation  data-transformation  normalization  standardization 

Bỏ qua các cân nhắc về sức mạnh, có lý do nào để tin rằng việc tăng số lần trong xác thực chéo dẫn đến lựa chọn / xác nhận mô hình tốt hơn (nghĩa là số lần gấp càng cao càng tốt)? Đưa ra lập luận đến mức cực …

47 cross-validation  bias-variance-tradeoff 

Tôi tự hỏi liệu có ai biết về một bản tóm tắt các kỹ thuật xác thực chéo với một cuộc thảo luận về sự khác biệt giữa chúng và hướng dẫn khi nào nên sử dụng từng kỹ thuật. Wikipedia có một danh sách các kỹ thuật phổ biến …

43 cross-validation 

Có bất kỳ nghiên cứu thực nghiệm nào biện minh cho việc sử dụng một quy tắc lỗi tiêu chuẩn có lợi cho phân tích không? Rõ ràng nó phụ thuộc vào quá trình tạo dữ liệu của dữ liệu, nhưng bất cứ điều gì phân tích một khối lượng …

39 cross-validation  model-selection  regularization 

TL, DR: Dường như, trái với lời khuyên oft-lặp đi lặp lại, nghỉ-one-out kiểm chứng chéo (Loo-CV) - có nghĩa là,-fold CV với(số nếp gấp) tương đương với(số về quan sát đào tạo) - đưa ra các ước tính về lỗi tổng quát hóa là biến số nhỏ nhất cho …

37 regression  machine-learning  variance  cross-validation  predictive-models 

Trong tất cả các bối cảnh tôi quen thuộc với xác nhận chéo, nó chỉ được sử dụng với mục tiêu tăng độ chính xác dự đoán. Logic của xác nhận chéo có thể được mở rộng trong việc ước tính mối quan hệ không thiên vị giữa các biến …

37 cross-validation  causality 

Tôi đã sử dụng gói caret trong R để xây dựng các mô hình dự đoán để phân loại và hồi quy. Caret cung cấp một giao diện hợp nhất để điều chỉnh các tham số siêu mô hình bằng cách xác thực chéo hoặc đóng đai khởi động. Ví …

37 r  time-series  cross-validation 

Khi sử dụng xác thực chéo để thực hiện lựa chọn mô hình (chẳng hạn như điều chỉnh siêu tham số) và để đánh giá hiệu suất của mô hình tốt nhất, người ta nên sử dụng xác thực chéo lồng nhau . Vòng lặp bên ngoài là để đánh …

36 cross-validation  model-selection  ridge-regression 

Tôi đang cố gắng tìm ra phương pháp xác nhận chéo nào là tốt nhất cho tình huống của tôi. Các dữ liệu sau đây chỉ là một ví dụ để xử lý vấn đề (trong R), nhưng Xdữ liệu thực của tôi ( xmat) có tương quan với nhau …

36 r  regression  cross-validation  linear-model 

Tôi có một bộ dữ liệu mà tôi có nhiều bộ nhãn nhị phân. Đối với mỗi bộ nhãn, tôi huấn luyện một bộ phân loại, đánh giá nó bằng cách xác thực chéo. Tôi muốn giảm kích thước bằng phân tích thành phần chính (PCA). Câu hỏi của tôi …

35 machine-learning  classification  pca  cross-validation 

Có rất nhiều chủ đề trong CrossValidated về chủ đề lựa chọn mô hình và xác nhận chéo. Ở đây có một ít: Xác nhận chéo nội bộ và bên ngoài và lựa chọn mô hình Câu trả lời hàng đầu của @ DikranMarsupial cho Lựa chọn tính năng và …

34 cross-validation  model-selection