Thống kê và dữ liệu lớn

Tôi đang đọc "Nhân quả" của Judea Pearl (ấn bản thứ hai năm 2009) và trong phần 1.1.5 Độc lập có điều kiện và đồ thị, ông nói: Sau đây là danh sách (một phần) các thuộc tính được thỏa mãn bởi mối quan hệ độc lập có điều kiện …

9 self-study  bayesian 

Một cách tiếp cận điển hình để giải quyết vấn đề phân loại là xác định một lớp các mô hình ứng viên và sau đó thực hiện lựa chọn mô hình bằng cách sử dụng một số quy trình như xác nhận chéo. Thông thường, người ta chọn mô …

9 machine-learning  model-selection  error  scoring-rules 

Câu hỏi Một chút gì đó mà tôi đã tự hỏi về một thời gian: Đặt PθPθP_\theta là họ hàm mũ tăng một cách ngẫu nhiên (một tham số) trên không gian mẫu XX\mathcal{X} với Θ⊂RΘ⊂R\Theta\subset\mathbb{R} là không gian tham số tự nhiên của nó, tức là ΘΘ\Theta là tập …

9 distributions  mathematical-statistics  exponential-family 

Tôi hiện đang đọc "cuốn sách" lập trình xác suất và phương pháp xác thực cho tin tặc . Tôi đã đọc một vài chương và tôi đã suy nghĩ về Chương đầu tiên trong đó ví dụ đầu tiên với pymc bao gồm việc phát hiện một điểm phù …

9 probability  mcmc  pymc  change-point 

Trong một bài thuyết trình hôm nay, diễn giả đã đưa ra tuyên bố trên. Ông nói rằng ngay cả khi giai đoạn đầu tiên được xác định sai, các ước tính hệ số của giai đoạn thứ hai vẫn sẽ có hiệu lực. Là một sinh viên tốt nghiệp …

9 econometrics  2sls 

Tôi đang làm việc thông qua các ví dụ trong Phân tích dữ liệu Bay Bay của Kruschke , cụ thể là ANOVA theo cấp số nhân của Poisson trong ch. 22, mà ông trình bày như là một thay thế cho các bài kiểm tra chi bình phương thường …

9 r  bayesian  effect-size  contingency-tables 

Tôi đã nhận được một bài báo báo cáo một nghiên cứu rất giống với một phòng thí nghiệm của tôi muốn chạy. Nhưng, tôi nhận thấy rằng đối với biến quan tâm, Thời lượng, SD lớn hơn giá trị trung bình ... vì đây là thời lượng được tính …

9 standard-deviation  power-analysis 

Trong một bình luận cho câu trả lời của câu hỏi này , đã nói rằng sử dụng AIC trong lựa chọn mô hình tương đương với việc sử dụng giá trị p là 0,125. Tôi đã thử nó trong R, nơi tôi đã sử dụng thuật toán lựa chọn …

9 model-selection  p-value  aic 

Tôi thấy bài đăng này trên Moz đã trình bày một kênh tiếp thị được phân đoạn: Loại điều này sẽ có khá nhiều giá trị trong công việc của tôi. Điều tôi không biết là làm thế nào để trực quan hóa dữ liệu thô để hiển thị một …

9 data-visualization  python  funnel-plot 

Có ai có kinh nghiệm với các cách tiếp cận để chọn số lượng các thành phần chính thưa thớt để đưa vào mô hình hồi quy không?

9 pca  sparse  regression-strategies 

Hãy xem xétXn=⎧⎩⎨1−12kw.p. (1−2−n)/2w.p. (1−2−n)/2w.p. 2−k for k>nXn={1w.p. (1−2−n)/2−1w.p. (1−2−n)/22kw.p. 2−k for k>nX_n = \begin{cases} 1 & \text{w.p. } (1 - 2^{-n})/2\\ -1 & \text{w.p. } (1 - 2^{-n})/2\\ 2^k & \text{w.p. } 2^{-k} \text{ for } k > n\\ \end{cases} Tôi cần chỉ ra rằng mặc dù điều này …

9 probability  self-study  central-limit-theorem  moments  asymptotics 

Cuốn sách Các yếu tố của học thống kê (có sẵn trong PDF trực tuyến) thảo luận về xu hướng tối ưu (7.21, trang 229). Nó nói rằng độ lệch lạc quan là sự khác biệt giữa lỗi huấn luyện và lỗi trong mẫu (lỗi được quan sát nếu chúng …

9 error  bias  validation 

Tôi đã đọc về khoảng cách của đầu bếp để xác định các ngoại lệ có ảnh hưởng lớn đến hồi quy của tôi. Trong nghiên cứu ban đầu của Cook, ông nói rằng tỷ lệ giới hạn là 1 nên tương đương để xác định những người có ảnh …

9 outliers  cooks-distance 

Cho rằng N=nN=nN = n , distr có điều kiện. của là . có distr cận biên. của Poisson ( ), là hằng số dương.χ 2 ( 2 n ) N q qYYYχ2(2n)χ2(2n)\chi ^2(2n)NNNθθ\thetaθθ\theta Chứng tỏ rằng, như , trong phân phối.( Y - E ( Y ) ) / …

9 self-study  poisson-distribution  conditional-probability  convergence  central-limit-theorem 

Tôi nghe nói rằng tất cả các điều kiện đầy đủ (như được sử dụng trong lấy mẫu Gibbs) có thể xác định phân phối chung. Nhưng tôi không hiểu tại sao và như thế nào. Hay tôi đã nghe nhầm? Cảm ơn!

9 distributions