Thống kê và dữ liệu lớn

Chúng tôi biết confidence intervalkhông thể được sử dụng cho tuyên bố xác suất, đây là một cái gì đó dành riêng cho credible interval. Tuy nhiên, các kỹ thuật thường xuyên được sử dụng phổ biến nhất (ví dụ: khoảng tin cậy cho phương tiện và tỷ lệ) tương …

7 bayesian  frequentist 

Khi chuyển từ chuẩn hóa sang trong Hồi quy tuyến tính, tôi có nên thấy nhiều sai lệch hoặc nhiều phương sai hơn không? Lưu ý rằng sai lệch là dấu hiệu của sự phù hợp và phương sai là dấu hiệu của sự phù hợp quá mức. Giả sử …

7 variance  lasso  bias  regularization  ridge-regression 

Tôi đang đọc Tất cả các số liệu thống kê phi trắc nghiệm , bởi Larry Wasserman. Tại trang 12, ông định nghĩa hàm phân phối theo kinh nghiệm là: Hàm phân phối theo kinh nghiệm là CDF đặt khối lượng tại mỗi điểm dữ liệu . Chính thứcFn^Fn^\hat{F_n}1n1n\frac{1}{n}XiXiX_i Fn^(x)=1n∑i=1nI(Xi≤x)Fn^(x)=1n∑i=1nI(Xi≤x)\hat{F_n}(x)=\frac{1}{n}\sum^{n}_{i=1}I(X_i\le …

7 distributions  nonparametric 

Tôi nhận thức rõ về các ưu điểm của xác thực chéo k-Fold (và bỏ qua một lần), cũng như các ưu điểm của việc tách tập huấn luyện của bạn để tạo tập hợp 'xác thực' thứ ba mà bạn sử dụng để đánh giá hiệu suất mô hình …

7 machine-learning  cross-validation  hyperparameter  optimization 

Tôi đang làm việc về một vấn đề có những phẩm chất sau đây. Dữ liệu khả dụng rất nhiều - theo thứ tựxxx10610610^6 CDF có hỗ trợ về các số thực không âm.FXFXF_X Tôi không biết .FXFXF_X Chúng ta có thể giả sử dữ liệu là iid. Tôi đang …

7 mathematical-statistics  binomial  prediction-interval 

Trong một nghiên cứu mô phỏng, có sự khác biệt nào giữa ∙∙\bullet ước tính phương sai , lần và lấy trung bình của nó, vàσ2σ2\sigma^2100010001000 ∙∙\bullet ước tính độ lệch chuẩn , lần và lấy trung bình của nó?σσ\sigma100010001000 Tôi có thể làm bất cứ ai trong số này? …

7 self-study  mathematical-statistics  unbiased-estimator  moments  invariance 

Tôi muốn biết đó là biểu thức sai lệch trong hồi quy poisson bằng xgboostcông cụ (tăng cường độ dốc cực độ). Theo mã nguồn, chức năng đánh giá là: struct EvalPoissonNegLogLik : public EvalEWiseBase { const char *Name() const override { return "poisson-nloglik"; } inline bst_float EvalRow(bst_float y, bst_float …

7 regression  poisson-distribution  gbm  xgboost 

Để cho X∼Gamma(3,3)X∼Gamma(3,3)X \sim Gamma(3,3) và Y∼Exp(1)Y∼Exp(1)Y \sim Exp(1). Làm thế nào để tôi tính toán P(X>Y)P(X>Y)P(X>Y)? Tôi tin rằng tôi đã viết lại nó như là P(X−Y>0)P(X−Y>0)P(X-Y>0) nhưng tôi không chắc làm thế nào để tính toán X−YX−YX-Y cho hai bản phân phối khác nhau?

7 probability  distributions  exponential 

Tình hình Tôi đang giải quyết một vấn đề trong đó tôi đang sử dụng dữ liệu cảm biến để dự đoán lỗi máy trước khi xảy ra lỗi và tôi cần một số lời khuyên về phương pháp nào cần khám phá. Cụ thể, tôi muốn xác định các …

7 machine-learning  time-series  predictive-models  prediction-interval 

Tôi có một mô hình hồi quy logistic nhị phân có nguồn gốc từng bước. Tôi đã sử dụng calibrate(, bw=200, bw=TRUE)hàm trong rmsgói trong R để ước tính hiệu chuẩn trong tương lai của nó. Đầu ra được đưa ra dưới đây và nó cho thấy ước tính đường …

7 r  logistic  multiple-regression  regression-strategies  calibration 

Tôi đã đọc cuốn sách này về học tập sâu của Ian và Aron. Trong phần mô tả về DBN, họ nói rằng DBN đã không còn được ưa chuộng và hiếm khi được sử dụng. Các mạng lưới niềm tin sâu sắc đã chứng minh rằng các kiến ​​trúc …

7 machine-learning  deep-learning  deep-belief-networks 

Tôi tự hỏi liệu dữ liệu dự đoán số nguyên nên được coi là phân loại (do đó yêu cầu mã hóa) hoặc liên tục. Ví dụ: nếu phạm vi của một yếu tố dự đoán nhất định Xlà tất cả các số nguyên trong khoảng từ 1 đến 230, …

7 regression  classification  categorical-data  continuous-data 

Giả sử bạn quan sát vectơ của các biến độc lập và biến phụ thuộc , với khả năng . Giả sử là độc lập. Hơn nữa, giả sử bạn được cho trọng số dương , là tùy ý và tính Công cụ ước tính khả năng tối đa có …

7 estimation  maximum-likelihood  weighted-data  weights 

Tôi đang tìm kiếm một số tài liệu tham khảo về việc tạo biểu đồ / dữ liệu trực quan hiệu quả. Tôi đã tìm thấy một loạt sách chỉ ra cách tạo trực quan hóa dữ liệu bằng một số công cụ nhất định (như R / ggplot vs …

7 data-visualization  references 

Câu hỏi: Có ai có đề xuất cho một tài liệu tham khảo là phần giới thiệu "dễ tiếp cận nhất" về thống kê định hướng không? Khi tôi nói "có thể truy cập", tôi có nghĩa là nhiều tác giả có nhiều kinh nghiệm và hiểu biết trong lĩnh …

7 references  circular-statistics  information-geometry