Thống kê và dữ liệu lớn

Giả sử tôi có nguồn độc lập, và tôi quan sát hỗn hợp lồi: X 1 , X 2 , . . . , X n m Y 1nnnX1, X2, . . . , XnX1,X2,...,XnX_1, X_2, ..., X_nmmmY1. . .Ym= a11X1+ một12X2+ ⋯ + a1 nXn= am 1X1+ mộtm 2X2+ …

18 pca  ica 

Giả sử tôi có một mẫu và mẫu bootstrap từ mẫu này cho stastitic (ví dụ: giá trị trung bình). Như chúng ta đều biết, mẫu bootstrap này ước tính các phân phối mẫu của ước lượng số liệu thống kê.χχ\chi Bây giờ, giá trị trung bình của mẫu bootstrap …

18 estimation  bootstrap 

Một chuỗi các công cụ ước tính UnUnU_n cho một tham số θθ\theta là không bình thường nếu n−−√(Un−θ)→N(0,v)n(Un−θ)→N(0,v)\sqrt{n}(U_n - \theta) \to N(0,v). (nguồn) Sau đó, chúng tôi gọivvvlà phương sai tiệm cận củaUnUnU_n. Nếu phương sai này bằng vớiràng buộc Cramer-Rao, chúng tôi nói rằng trình ước tính / …

18 estimation  asymptotics  efficiency 

Trong hơn một năm nay tôi đã có một lớp học "một hương vị cho thống kê" trong một giờ. Mỗi lần tôi nhận được một nhóm trẻ em khác nhau đến, và tôi cho chúng đến lớp. Chủ đề của lớp học là chúng tôi thực hiện một thí …

18 hypothesis-testing  teaching 

Tôi làm việc trong một lĩnh vực có vấn đề nơi mọi người thường báo cáo ROC-AUC hoặc AveP (độ chính xác trung bình). Tuy nhiên, gần đây tôi đã tìm thấy các bài báo tối ưu hóa Mất Log thay vào đó, trong khi những người khác báo cáo …

18 loss-functions 

Điều gì có nghĩa là tuyên bố rằng sự suy yếu của phân phối bình thường là 3. Điều đó có nghĩa là trên đường ngang, giá trị của 3 tương ứng với xác suất cao nhất, tức là 3 là chế độ của hệ thống? Khi tôi nhìn vào …

18 normal-distribution  moments  kurtosis 

Lấy từ Grimmet và Stirzaker : Chứng tỏ rằng không thể là trường hợp U = X + YU=X+YU=X+Y trong đó UUU được phân bố đồng đều trên [0,1] và XXX và YYY là độc lập và phân phối giống hệt nhau. Bạn không nên cho rằng X và Y …

18 probability  random-variable  continuous-data  uniform  proof 

Vấn đề đã được đưa ra trước đây, nhưng tôi muốn hỏi một câu hỏi cụ thể sẽ cố gắng gợi ra một câu trả lời sẽ làm rõ (và phân loại) nó: Trong "Asymptotics của Poor Man", người ta phân biệt rõ ràng giữa (a) một chuỗi các biến …

18 mathematical-statistics  variance  convergence  asymptotics  consistency 

Từ bất kỳ thuật toán lấy mẫu chung nào, người ta có thể rút ra một thuật toán tối ưu hóa. Thật vậy, để tối đa hóa chức năng tùy ý , nó cũng đủ để vẽ mẫu từ g ~ e f / T . Đối với T đủ …

18 sampling  optimization 

Tại sao nhà thống kê làm nản lòng chúng ta ra khỏi đề cập đến kết quả là " cao đáng kể" khi -giá trị là thấp hơn nhiều so thông thường α -level của 0,05 ?pppαα\alpha0.050.050.05 Có thực sự sai khi tin tưởng vào một kết quả có 99,9% …

18 hypothesis-testing  statistical-significance  p-value  terminology 

Tôi đã hy vọng ai đó có thể đề xuất một đối số giải thích tại sao các biến ngẫu nhiên và , có phân phối chuẩn thông thường, độc lập thống kê. Bằng chứng cho thực tế đó dễ dàng theo sau từ kỹ thuật MGF, nhưng tôi thấy …

18 probability  self-study  mathematical-statistics 

Tôi hiểu khái niệm rằng là giá trị trung bình khi biến phân loại bằng 0 (hoặc là nhóm tham chiếu), đưa ra giải thích kết thúc rằng hệ số hồi quy là sự khác biệt về trung bình của hai loại. Ngay cả với> 2 danh mục, tôi sẽ …

18 multiple-regression  categorical-data  interpretation  regression-coefficients  contrast 

Sự hiểu biết của tôi về cuộc tranh luận Bayesian và thường xuyên là số liệu thống kê thường xuyên: là (hoặc tuyên bố là) khách quan hoặc ít nhất là không thiên vị vì vậy các nhà nghiên cứu khác nhau, sử dụng các giả định khác nhau vẫn …

18 bayesian  quality-control 

Tôi đã tìm thấy một lời giải thích sau đây trên một blog và tôi muốn có thêm thông tin về tính không tương quan: Chúng tôi có những sự thật không thể chối cãi sau đây: Trung bình, có sự khác biệt về khối lượng não giữa nam và …

18 correlation  categorical-data  mean  descriptive-statistics  neuroscience 

Tôi muốn chuyển đổi dữ liệu của mình sao cho phương sai sẽ là một và hiệp phương sai sẽ bằng 0 (tức là tôi muốn làm trắng dữ liệu). Hơn nữa, phương tiện nên bằng không.XX\mathbf X Tôi biết tôi sẽ đến đó bằng cách thực hiện chuẩn hóa …

18 pca  linear-algebra