Thống kê và dữ liệu lớn

Tức là, để thực hiện phân tích tuần tự (bạn không biết trước chính xác số lượng dữ liệu bạn sẽ thu thập) với các phương pháp thường xuyên đòi hỏi sự chăm sóc đặc biệt; bạn không thể thu thập dữ liệu cho đến khi giá trị p đủ …

11 bayesian  inference  philosophical  sequential-analysis 

Câu hỏi: phân phối nhị thức bivariate trông như thế nào trong không gian 3 chiều? Dưới đây là chức năng cụ thể mà tôi muốn hình dung cho các giá trị khác nhau của các tham số; cụ thể là , và .p 1nnnp1p1p_{1}p2p2p_{2} f(x1,x2)=n!x1!x2!px11px22,x1+x2=n,p1+p2=1.f(x1,x2)=n!x1!x2!p1x1p2x2,x1+x2=n,p1+p2=1.f(x_{1},x_{2}) = \frac{n!}{x_{1}!x_{2}!}p_{1}^{x_{1}}p_{2}^{x_{2}}, \qquad x_{1}+x_{2}=n, …

11 probability  data-visualization  binomial  discrete-data  distributions 

Tôi có một ứng dụng được bảo vệ bởi mã PIN gồm bốn chữ số và người dùng có năm lần đăng nhập trước khi tài khoản bị khóa. Bây giờ, một trong những khách hàng của tôi muốn "tăng cường" bảo mật và ủng hộ cho một giải pháp …

11 combinatorics 

Vì vậy, chúng tôi đã có Secret Santa tại nơi làm việc. Chúng tôi có 8 người. Chúng tôi thay phiên nhau và rút một mảnh giấy nhỏ từ một cái bát có tên trên đó. Quy tắc duy nhất: Nếu bạn kéo tên của mình, bạn phải đặt lại …

11 combinatorics  odds 

Siêu phẳng tối ưu trong SVM được định nghĩa là: w⋅x+b=0,w⋅x+b=0,\mathbf w \cdot \mathbf x+b=0, trong đó đại diện cho ngưỡng. Nếu chúng ta có một số ánh xạ \ mathbf \ phi ánh xạ không gian đầu vào sang một số không gian Z , chúng ta có thể …

11 svm  threshold 

Dường như có một cái gì đó trong sự hiểu biết của con người chúng ta tạo ra những khó khăn trong việc nắm bắt trực giác ý tưởng về phương sai. Theo nghĩa hẹp, câu trả lời là ngay lập tức: bình phương ném chúng ta khỏi sự hiểu …

11 variance  dispersion 

Tôi đã luôn luôn đọc các thuật ngữ tương tác trong bối cảnh hồi quy. Chúng ta cũng nên xem xét các tương tác với các mô hình khác nhau, ví dụ như knn hoặc svm? Nếu có , hoặc thậm chí nhiều tính năng hơn và cho phép quan …

11 machine-learning  interaction  terminology 

Sau đây là một đoạn trích từ Giới thiệu về Thống kê Bayes của Bolstad . Đối với tất cả các chuyên gia của bạn ngoài kia, điều này có thể là tầm thường nhưng tôi không hiểu làm thế nào tác giả kết luận rằng chúng ta không phải …

11 distributions  bayesian  beta-distribution  conjugate-prior 

Tôi tình cờ đọc được một bài báo (về kinh tế) có xấp xỉ sau cho :log(E(X))log⁡(E(X))\log(E(X)) log(E(X))≈E(log(X))+0.5var(log(X))log⁡(E(X))≈E(log⁡(X))+0.5var(log⁡(X))\log(E(X)) \approx E(\log(X))+0.5 \mathrm{var}(\log(X)) , mà tác giả nói là chính xác nếu X là log-normal (mà tôi biết). Những gì tôi không biết là làm thế nào để lấy được xấp xỉ …

11 lognormal  approximation  taylor-series 

Tôi đang cố gắng xây dựng một bằng chứng cho một vấn đề mà tôi đang làm việc và một trong những giả định mà tôi đang đưa ra là tập hợp các điểm tôi đang lấy mẫu dày đặc trên toàn bộ không gian. Thực tế, tôi đang sử …

11 sampling  asymptotics  latin-square  latin-hypercube 

Tôi đã có một ý tưởng về ưu và nhược điểm của hồi quy sườn và LASSO. Đối với LASSO, thời hạn phạt L1 sẽ mang lại một vectơ hệ số thưa thớt, có thể được xem như một phương pháp lựa chọn tính năng. Tuy nhiên, có một số …

11 feature-selection  lasso  regularization  ridge-regression  elastic-net 

Nếu 20 thử nghiệm Bernoulli độc lập được thực hiện thì mỗi thử nghiệm có xác suất thành công khác nhau và do đó thất bại. Xác suất mà chính xác n trong số 20 thử nghiệm đã thành công là gì? Có cách nào tốt hơn để tính toán …

11 probability  distributions  bernoulli-distribution  poisson-binomial 

Tôi đang cố gắng hình dung một âm mưu thích hợp cho các quan sát trong bảng phương tiện và độ lệch chuẩn của điểm thu hồi: RecallControlMean37SD8ExperimentalMean21SD6ControlExperimentalMeanSDMeanSDRecall378216\begin{array} {c|c c|c c|} & \text{Control} & & \text{Experimental} & \\ & \text{Mean} & \text{SD} &\text{Mean} &\text{SD} \\ \hline \text{Recall} & 37 & …

11 data-visualization  standard-deviation  mean  descriptive-statistics  barplot 

Tôi đang đọc qua cuốn sách Tất cả các số liệu thống kê của Larry Wasserman và hiện tại về giá trị p (trang 187). Trước tiên tôi xin giới thiệu một số định nghĩa (tôi trích dẫn): Định nghĩa 1 Hàm công suất của thử nghiệm với vùng loại …

11 hypothesis-testing  mathematical-statistics  p-value 

Tôi đang tìm kiếm tài nguyên (sách, ghi chú bài giảng, v.v.) về các kỹ thuật có thể xử lý dữ liệu có nhiều mục tiêu (Ví dụ: ba biến phụ thuộc: 2 rời rạc và 1 liên tục). Có ai có bất kỳ nguồn lực / kiến ​​thức về …

11 regression  machine-learning  predictive-models  references