Thống kê và dữ liệu lớn

Biểu đồ cho một ý nghĩa tốt về sự phân phối của một biến. Các ô hộp cố gắng làm điều tương tự, tuy nhiên, đừng đưa ra một bức tranh về sự phân bố của biến này. Tôi không hiểu tại sao mọi người sử dụng lô hộp. Biểu …

13 data-visualization  histogram  boxplot 

Giả sử tôi muốn kiểm tra xem hai mẫu độc lập có phương tiện khác nhau không. Tôi biết phân phối cơ bản là không bình thường . Nếu tôi hiểu chính xác, thống kê kiểm tra của tôi là giá trị trung bình và đối với kích thước mẫu …

13 t-test  central-limit-theorem  z-test 

Tôi biết rằng mô hình thống kê truyền thống như Cox tỉ lệ nguy hại hồi quy & một số mô hình Kaplan-Meier có thể được sử dụng để dự đoán ngày cho đến khi xuất hiện tiếp theo của một thất bại nói sự kiện, vv tức là phân …

13 machine-learning  classification  survival  cox-model  kaplan-meier 

Trong khi tình cờ đọc một số thị trường đại chúng hoạt động trên lý thuyết hỗn loạn trong vài năm qua, tôi bắt đầu tự hỏi làm thế nào các khía cạnh khác nhau của nó có thể được áp dụng cho khai thác dữ liệu và các lĩnh …

13 self-study  mathematical-statistics  references  data-mining  fractal 

Richard Dawkins đã mô tả Ronald Fisher là "cha đẻ của thống kê hiện đại và thiết kế thử nghiệm", một dòng được trích dẫn trong tiểu sử Wikipedia của Fisher . Và cũng là tác giả Anders Hald gọi ông là "một thiên tài gần như một tay tạo …

13 history  ronald-fisher 

Tôi đã đọc về kiểm duyệt là gì và nó cần được tính đến như thế nào trong phân tích sinh tồn nhưng tôi muốn nghe một định nghĩa toán học ít hơn về nó và một định nghĩa trực quan hơn (hình ảnh sẽ rất tuyệt!). Bất cứ ai …

13 survival  cox-model  censoring 

Trong phần 3.2 của Nhận dạng mẫu và học máy của Giám mục , ông đã thảo luận về phân rã phương sai thiên vị, nói rằng đối với hàm mất bình phương, tổn thất dự kiến ​​có thể được phân tách thành một thuật ngữ sai lệch bình phương …

13 self-study  variance  bias  regularization  loss-functions 

Khi chúng tôi đánh giá chất lượng của Rừng ngẫu nhiên, ví dụ như sử dụng AUC, liệu có phù hợp hơn để tính các đại lượng này qua các Mẫu ngoài túi hoặc qua bộ xác nhận chéo không? Tôi nghe rằng việc tính toán nó qua các Mẫu …

13 cross-validation  random-forest  auc 

Tôi đang cố gắng tìm hiểu bằng chứng sau đây rằng Gaussian có entropy tối đa. Làm thế nào để bước đánh dấu sao có ý nghĩa? Một hiệp phương sai cụ thể chỉ sửa chữa khoảnh khắc thứ hai. Điều gì xảy ra với khoảnh khắc thứ ba, thứ …

13 entropy  information-theory  maximum-entropy 

Tôi có một bộ dữ liệu nhỏ gồm 14 lần riêng biệt để hoàn thành một nhiệm vụ. Tuy nhiên tôi gặp khó khăn khi tìm một biểu đồ thích hợp để sử dụng để vẽ biểu đồ dữ liệu. Nếu mẫu lớn hơn tôi sẽ sử dụng biểu đồ …

13 data-visualization  descriptive-statistics  small-sample 

Sự khác biệt giữa Ngoại lệ và dị thường trong bối cảnh học máy là gì. Sự hiểu biết của tôi là cả hai đều đề cập đến cùng một điều.

13 outliers  terminology  anomaly-detection 

Tôi thấy được đề cập ở nhiều nơi mà ANOVA thực hiện ước tính của mình bằng phương pháp khoảnh khắc. Tôi bối rối bởi sự khẳng định đó bởi vì, mặc dù tôi không quen với phương pháp của khoảnh khắc, nhưng sự hiểu biết của tôi là nó …

13 anova  mixed-model  maximum-likelihood  method-of-moments 

Trong Phương pháp thống kê trong Khoa học khí quyển , Daniel Wilks lưu ý rằng hồi quy tuyến tính nhiều có thể dẫn đến các vấn đề nếu có sự giao thoa rất mạnh giữa các yếu tố dự đoán (ấn bản thứ 3, trang 559-560): Một bệnh lý …

13 regression  pca  bias 

Tôi không hiểu làm thế nào phương trình này được bắt nguồn. P(I|M1∩M2)≤P(I)P(I′)⋅P(M1|I)P(M2|I)P(M1|I′)P(M2|I′)P(I|M1∩M2)≤P(I)P(I′)⋅P(M1|I)P(M2|I)P(M1|I′)P(M2|I′)P(I|M_{1}\cap M_{2}) \leq \frac{P(I)}{P(I')}\cdot \frac{P(M_{1}|I)P(M_{2}|I)}{P(M_{1}|I')P(M_{2}|I')} Phương trình này được lấy từ bài báo "Thử nghiệm theo Xác suất" trong đó trường hợp của OJ Simpson được đưa ra như một vấn đề mẫu. Bị cáo đang bị xét …

13 bayesian  conditional-probability  bayes 

Tôi đang tìm cách triển khai một mô hình động để giới thiệu phim cho người dùng. Khuyến nghị nên được cập nhật mỗi khi người dùng xem phim hoặc đánh giá nó. Để đơn giản, tôi nghĩ đến việc tính đến hai yếu tố: xếp hạng quá khứ của …

13 machine-learning  recommender-system  dynamic-regression