Thống kê và dữ liệu lớn

Tôi đang phỏng vấn mọi người cho vị trí nhà phát triển / nhà nghiên cứu thuật toán trong bối cảnh khai thác dữ liệu / máy học / thống kê. Tôi đang tìm kiếm các câu hỏi để xác định, cụ thể, sự quen thuộc, hiểu biết và tính …

15 machine-learning  probability  distributions 

Tôi còn khá mới với những khu rừng ngẫu nhiên. Trước đây, tôi luôn so sánh độ chính xác của sự phù hợp với thử nghiệm so với sự phù hợp với sự phù hợp để phát hiện bất kỳ sự quá mức nào. Nhưng tôi chỉ đọc ở đây …

15 cross-validation  random-forest  overfitting 

Sau khi đọc bài đăng trên blog này về các mô hình chuỗi thời gian cấu trúc Bayes, tôi muốn xem xét việc thực hiện điều này trong bối cảnh của một vấn đề mà trước đây tôi đã sử dụng ARIMA. Tôi có một số dữ liệu với một …

15 r  time-series  bayesian  mcmc  bsts 

Số lần dự kiến ​​bạn phải lăn một con súc sắc cho đến khi mỗi bên xuất hiện 3 lần là bao nhiêu? Câu hỏi này đã được hỏi ở trường tiểu học ở New Zealand và nó đã được giải quyết bằng cách sử dụng mô phỏng. Giải pháp …

15 probability  multinomial  negative-binomial  coupon-collector-problem 

Tôi có một vấn đề hiểu tại sao suy luận Bayes dẫn đến các vấn đề khó khăn. Vấn đề thường được giải thích như thế này: Điều tôi không hiểu là tại sao tích phân này phải được đánh giá ngay từ đầu: Dường như với tôi rằng kết …

15 bayesian  inference 

Giả sử chúng ta có một quá trình Bernoulli với xác suất thất bại qqq (sẽ nhỏ, giả sử, q≤0.01q≤0.01q \leq 0.01 ) từ đó chúng ta lấy mẫu cho đến khi chúng ta gặp phải 101010 lần thất bại. Chúng tôi do đó ước tính xác suất thất bại …

15 estimation  bernoulli-distribution 

Tôi vừa đọc bài viết này của BBC về định dạng đủ điều kiện trong Công thức 1. Các nhà tổ chức muốn làm cho vòng loại ít dự đoán hơn, tức là để tăng sự thay đổi thống kê trong kết quả. Đưa ra một vài chi tiết không …

15 variance 

Hôm nay, tôi đã chơi xung quanh với một tập dữ liệu nhỏ và thực hiện một hồi quy OLS đơn giản mà tôi dự kiến ​​sẽ thất bại do tính đa hình hoàn hảo. Tuy nhiên, nó đã không. Điều này ngụ ý rằng sự hiểu biết của tôi …

15 multiple-regression  least-squares  multicollinearity 

Tôi hiện đang cố gắng áp dụng mô hình tuyến tính ( family = gaussian) cho một chỉ số về đa dạng sinh học không thể lấy các giá trị thấp hơn 0, bị thổi phồng và liên tục. Giá trị nằm trong khoảng từ 0 đến hơn 0,25. Kết …

15 regression  zero-inflation  tobit-regression  tweedie-distribution 

Tôi nghĩ rằng hai công thức sau đây là đúng: Var(aX)=a2Var(X)Var(aX)=a2Var(X) \mathrm{Var}(aX)=a^2 \mathrm{Var}(X) trong khi a là số không đổi Var(X+Y)=Var(X)+Var(Y)Var(X+Y)=Var(X)+Var(Y) \mathrm{Var}(X + Y)=\mathrm{Var}(X)+\mathrm{Var}(Y) nếuXXX ,YYY độc lập Tuy nhiên, tôi không chắc điều gì sai với phần dưới đây: Var(2X)=Var(X+X)=Var(X)+Var(X)Var(2X)=Var(X+X)=Var(X)+Var(X)\mathrm{Var}(2X) = \mathrm{Var}(X+X) = \mathrm{Var}(X) + \mathrm{Var}(X) không bằng22Var(X)22Var(X)2^2 \mathrm{Var}(X) …

15 variance  linearity  fallacy 

Trong cuốn sách "Biostatistic for dummies" ở trang 40 tôi đã đọc: Lỗi tiêu chuẩn (viết tắt SE) là một cách để chỉ ra mức độ chính xác của ước tính hoặc đo lường của bạn về một cái gì đó. và Khoảng tin cậy cung cấp một cách khác …

15 confidence-interval  standard-error  measurement-error  accuracy 

Tôi đã nghiên cứu số liệu thống kê từ nhiều cuốn sách trong 3 năm qua, và nhờ trang web này tôi đã học được rất nhiều. Tuy nhiên, một câu hỏi cơ bản vẫn chưa được trả lời cho tôi. Nó có thể có một câu trả lời rất …

15 modeling  inference  aic 

Giả sử X1,X2,...,XnX1,X2,...,XnX_1, X_2,...,X_n là iid từ N(μ,σ2)N(μ,σ2)N(\mu,\sigma^2) với biết μ∈Rμ∈R\mu \in \mathcal R và σ2>0σ2>0\sigma^2>0 Hãy Z=X1−X¯S,Z=X1−X¯S,Z=\frac{X_1-\bar{X}}{S},S là độ lệch chuẩn ở đây. Có thể thấy rằng ZZZ có Lebesgue pdf f(z)=n−−√Γ(n−12)π−−√(n−1)Γ(n−22)[1−nz2(n−1)2]n/2−2I(0,(n−1)/n√)(|Z|)f(z)=nΓ(n−12)π(n−1)Γ(n−22)[1−nz2(n−1)2]n/2−2I(0,(n−1)/n)(|Z|)f(z)=\frac{\sqrt{n} \Gamma\left(\frac{n-1}{2}\right)}{\sqrt{\pi}(n-1)\Gamma\left(\frac{n-2}{2}\right)}\left[1-\frac{nz^2}{(n-1)^2}\right]^{n/2-2}I_{(0,(n-1)/\sqrt{n})}(|Z|) Câu hỏi của tôi là làm thế nào để có được pdf này? Câu hỏi đặt …

15 self-study  umvue 

ĐẶT VẤN ĐỀ: Bỏ qua một cách an toàn - nó ở đây để tham khảo và để hợp pháp hóa câu hỏi. Phần mở đầu của bài viết này có nội dung: "Thử nghiệm ngẫu nhiên chi-square nổi tiếng Karl Pearson được bắt nguồn từ số liệu thống kê …

15 chi-squared  proportion  z-test 

Tôi đã có một ví dụ hoạt động (trong R), rằng tôi đang cố gắng hiểu thêm. Tôi đang sử dụng Limma để tạo một mô hình tuyến tính và tôi đang cố gắng hiểu những gì đang xảy ra từng bước trong các tính toán thay đổi lần. Tôi …

15 r  regression  linear-model