Câu hỏi được gắn thẻ «overfitting»

Trước hết: Tôi biết, không có số lượng kích thước mẫu chung cần thiết để đào tạo một mạng lưới thần kinh. Nó phụ thuộc vào cách quá nhiều yếu tố như độ phức tạp của nhiệm vụ, tiếng ồn trong dữ liệu và như vậy. Và tôi càng có …

12 neural-networks  overfitting  underdetermined 

Tôi muốn hiểu thử nghiệm chính xác của ngư dân tốt hơn, vì vậy tôi đã nghĩ ra ví dụ đồ chơi sau đây, trong đó f và m tương ứng với nam và nữ, và n và y tương ứng với "tiêu thụ soda" như thế này: > soda_gender …

12 fishers-exact  hypergeometric  clustering  supervised-learning  modeling  econometrics  r  regression  residuals  heteroscedasticity  independence  distributions  self-study  matlab  libsvm  self-study  conditional-probability  conditional-expectation  hypothesis-testing  self-study  multiple-comparisons  mode  statistical-significance  chi-squared  multiple-comparisons  maximum-likelihood  poisson-process  optimization  uncertainty  genetic-algorithms  bayesian  model-selection  overfitting  maximum-likelihood  optimization  approximation  r  prediction  model-evaluation  r  machine-learning  survival  neural-networks  cox-model  machine-learning  bayesian  bayesian-network  hierarchical-bayesian  pooling 

Tôi có một sự phân phối rõ ràng của các giá trị, mà tôi tìm cách phù hợp. Dữ liệu có thể phù hợp tốt với 2 chức năng bình thường (bimodal) hoặc với 3 chức năng bình thường. Ngoài ra, có một lý do vật lý hợp lý để …

11 distributions  normal-distribution  model-selection  overfitting 

Bài đăng này trên KDnuggets trích dẫn bài đăng của John Langford nói rằng entropy và thông tin lẫn nhau khi được sử dụng làm biện pháp lỗi có thể dẫn đến quá mức. Bạn có thể đi vào chi tiết hơn về điều này?

11 machine-learning  error  overfitting  entropy 

Hôm nay giáo sư của chúng tôi đã tuyên bố trong lớp rằng "quá mức với các phân loại tuyến tính là không thể". Tôi cho rằng đó là sai, vì ngay cả các trình phân loại tuyến tính cũng có thể nhạy cảm với các ngoại lệ trong tập …

10 classification  overfitting 

Theo như tôi đã thấy, các ý kiến ​​có xu hướng khác nhau về điều này. Thực tiễn tốt nhất chắc chắn sẽ ra lệnh bằng cách sử dụng xác thực chéo (đặc biệt nếu so sánh RF với các thuật toán khác trên cùng một tập dữ liệu). Mặt …

10 cross-validation  random-forest  overfitting  out-of-sample 

Tôi đã đọc một số tài liệu rằng các khu rừng ngẫu nhiên không thể phù hợp. Trong khi điều này nghe có vẻ tuyệt vời, nó có vẻ quá tốt là đúng. Có thể cho rf của overfit?

10 random-forest  overfitting 

Tôi hiểu rằng chúng ta có thể sử dụng chính quy trong bài toán hồi quy bình phương nhỏ nhất như w∗=argminw[(y−Xw)T(y−Xw)+λ∥w∥2]w∗=argminw⁡[(y−Xw)T(y−Xw)+λ‖w‖2]\boldsymbol{w}^* = \operatorname*{argmin}_w \left[ (\mathbf y-\mathbf{Xw})^T(\boldsymbol{y}-\mathbf{Xw}) + \lambda\|\boldsymbol{w}\|^2 \right] và rằng vấn đề này có một giải pháp dạng đóng như: w^=(XTX+λI)−1XTy.w^=(XTX+λI)−1XTy.\hat{\boldsymbol{w}} = (\boldsymbol{X}^T\boldsymbol{X}+\lambda\boldsymbol{I})^{-1}\boldsymbol{X}^T\boldsymbol{y}. Chúng ta thấy rằng trong …

10 regression  regularization  ridge-regression  overfitting  matrix-inverse 

Tôi đang cố gắng hiểu ý nghĩa của một mô hình bão hòa. AFAIK là khi bạn có nhiều tính năng như quan sát. Chúng ta có thể nói một mô hình bão hòa là một trường hợp đặc biệt của một mô hình cực kỳ quá mức?

10 overfitting 

Đây có thể là một câu hỏi cơ bản: sự khác biệt giữa thiên vị và thiếu cân bằng là gì? Và, tương tự, sự khác biệt giữa phương sai và quá mức là gì? Các điều khoản của mỗi cặp có nghĩa là cùng một điều? Nếu không, sự …

10 variance  bias  overfitting  model-evaluation 

Nó không dẫn đến phù hợp quá mức? Kết quả của tôi sẽ đáng tin cậy hơn nếu tôi thêm quy trình jack-dao hoặc bootstrap như một phần của phân tích?

9 multiple-regression  bootstrap  reliability  overfitting  jackknife 

Tôi có một số mô hình dự đoán có hiệu suất mà tôi muốn kiểm tra lại (nghĩa là lấy dữ liệu của tôi, "tua lại" đến thời điểm trước đó và xem mô hình sẽ thực hiện như thế nào trong tương lai). Vấn đề là một số mô …

9 cross-validation  modeling  outliers  splines  overfitting 

Tôi có một mô hình hồi quy đơn giản ( y = param1 * x1 + param2 * x2 ). Khi tôi khớp mô hình với dữ liệu của mình, tôi tìm thấy hai giải pháp tốt: Giải pháp A, params = (2,7), là tốt nhất trên tập huấn luyện …

9 regression  cross-validation  overfitting  sensitivity-analysis 

Tôi đã có một cuộc phỏng vấn việc làm cho một vị trí khoa học dữ liệu. Trong cuộc phỏng vấn, tôi được hỏi tôi phải làm gì để đảm bảo người mẫu không bị thừa. Câu trả lời đầu tiên của tôi là sử dụng xác nhận chéo để …

9 cross-validation  regularization  overfitting 

Trong các nghiên cứu tâm lý học, tôi đã học được rằng chúng ta nên sử dụng phương pháp Bonferroni để điều chỉnh mức ý nghĩa khi kiểm tra một số giả thuyết trên một tập dữ liệu. Hiện tại tôi đang làm việc với các phương pháp học máy …

9 machine-learning  cross-validation  svm  overfitting  bonferroni