Thống kê và dữ liệu lớn

Tôi muốn kết hợp dự báo và dự phòng (viz. Các giá trị quá khứ dự đoán) của dữ liệu chuỗi thời gian được đặt thành một chuỗi thời gian bằng cách giảm thiểu Lỗi Dự đoán bình phương trung bình. Giả sử tôi có chuỗi thời gian từ 2001-2010 …

10 r  time-series  forecasting  data-imputation 

Chúng tôi biết từ lý thuyết đo lường rằng có những sự kiện không thể đo lường được, tức là chúng không thể đo lường được Lebesgue. Chúng ta gọi một sự kiện với xác suất mà phép đo xác suất không được xác định là gì? Những loại tuyên …

10 probability  estimation 

Tôi đang sử dụng gói RandomForest trong R để phát triển mô hình rừng ngẫu nhiên để cố gắng giải thích kết quả liên tục trong bộ dữ liệu "rộng" với nhiều dự đoán hơn mẫu. Cụ thể, tôi phù hợp với một mô hình RF cho phép quy trình …

10 r  machine-learning  hypothesis-testing  model-selection  random-forest 

Tôi đã tính toán một ma trận tương quan của một tập dữ liệu chứa 455 điểm dữ liệu, mỗi điểm dữ liệu chứa 14 đặc điểm. Vậy kích thước của ma trận tương quan là 14 x 14. Tôi đã tự hỏi liệu có một ngưỡng cho giá trị …

10 correlation  statistical-significance  multiple-comparisons 

Tôi làm việc trên khá nhiều mô hình thống kê, chẳng hạn như Mô hình Markov ẩn và Mô hình hỗn hợp Gaussian. Tôi thấy rằng việc đào tạo các mô hình tốt trong mỗi trường hợp này đòi hỏi một lượng lớn dữ liệu (> 20000 câu cho HMM) …

10 modeling  hidden-markov-model  gaussian-mixture 

Tôi có một loạt các hàm, mỗi hàm được cho là mật độ của một biến ngẫu nhiên giữa các tác nhân. Mỗi hàm cũng có một miền, mô tả giá trị nào của biến ngẫu nhiên là hợp lệ. Bây giờ, nếu tôi nhớ chính xác các lớp thống …

10 distributions  probability 

Tôi không quen thuộc với tài liệu này, vì vậy xin vui lòng tha thứ cho tôi nếu đây là một câu hỏi rõ ràng. Do AIC và BIC phụ thuộc vào tối đa hóa khả năng, nên dường như chúng chỉ có thể được sử dụng để so sánh …

10 model-selection  aic  bic 

Đưa ra các mẫu iid từ phân phối gaussian và công cụ ước lượng M, , những thuộc tính nào trên có đủ để đảm bảo trong xác suất? Là đang lồi lõm và tăng đủ nghiêm ngặt?X1,...,Xn∼N(μ,σ)X1,...,Xn∼N(μ,σ)X_1,...,X_n \sim N(\mu,\sigma) μm=argmina∑ρ(|Xi−a|)μm=argmina∑ρ(|Xi−a|)\mu_m = \underset{a}{\operatorname{argmin}} \sum\rho(|X_i-a|)ρρ\rhoμm→μμm→μ\mu_m \rightarrow \muρρ\rho

10 estimation 

Tôi có ba bộ dữ liệu chuỗi thời gian tôi đang tìm kiếm để so sánh. Chúng đã được thực hiện trong 3 khoảng thời gian riêng biệt trong khoảng 12 ngày. Chúng là số lượng đầu trung bình, tối đa và tối thiểu được lấy trong thư viện đại …

10 time-series  multiple-comparisons  trend 

Tôi muốn xử lý hình ảnh kính hiển vi được phân đoạn tự động để phát hiện hình ảnh bị lỗi và / hoặc phân đoạn bị lỗi, như là một phần của đường ống hình ảnh thông lượng cao. Có một loạt các tham số có thể được tính …

10 outliers  online 

Dường như phổ biến rằng số liệu thống kê nhân khẩu học được đưa ra dưới dạng 100.000 dân mỗi năm. Ví dụ, tỷ lệ tự tử, tỷ lệ giết người, năm sống điều chỉnh khuyết tật, danh sách này tiếp tục. Tại sao? Nếu chúng ta đã nói về …

10 demography  units 

Tôi luôn tin rằng thời gian không nên được sử dụng như một công cụ dự đoán trong hồi quy (bao gồm cả gam) bởi vì, sau đó, người ta chỉ đơn giản là "mô tả" chính xu hướng. Nếu mục đích của một nghiên cứu là tìm các thông …

10 r  time-series  mixed-model  nonlinear-regression 

Tôi biết ad.test () có thể được sử dụng để kiểm tra tính quy tắc. Có thể lấy ad.test để so sánh các bản phân phối từ hai mẫu dữ liệu không? x <- rnorm(1000) y <- rgev(2000) ad.test(x,y) Làm cách nào tôi có thể thực hiện thử nghiệm Anderson-Darling …

10 r  goodness-of-fit 

Có gói phần mềm nào để giải quyết hồi quy tuyến tính với mục tiêu giảm thiểu định mức L-infinite.

10 regression 

Các hệ phương trình tuyến tính có sức lan tỏa trong thống kê tính toán. Một hệ thống đặc biệt tôi đã gặp (ví dụ, trong phân tích nhân tố) là hệ thống A x = bAx=bAx=b nơi Dưới đây D là một n × n ma trận đường chéo …

10 factor-analysis  matrix  computational-statistics  matrix-decomposition  matrix-inverse