Thống kê và dữ liệu lớn

Tôi đã thực hiện cả phân tách SVD và chia tỷ lệ đa chiều của ma trận dữ liệu 6 chiều, để hiểu rõ hơn về cấu trúc của dữ liệu. Thật không may, tất cả các giá trị số ít đều theo cùng một thứ tự, ngụ ý rằng …

9 pca  interpretation  dimensionality-reduction  svd 

Hầu hết các thuật toán phân cụm mà tôi thấy bắt đầu bằng việc tạo khoảng cách từng điểm cho tất cả các điểm, điều này trở thành vấn đề trên các bộ dữ liệu lớn hơn. Có ai không làm điều đó? Hoặc nó trong một số cách tiếp …

9 clustering  algorithms  large-data 

Tôi đang làm việc với một chuỗi thời gian của điểm bất thường (nền là phát hiện bất thường trong mạng máy tính). Mỗi phút, tôi nhận được số điểm bất thường cho tôi biết mức độ "bất ngờ" hoặc bất thường của trạng thái hiện tại của mạng. Điểm …

9 time-series  outliers  threshold 

Theo wiki , tiêu chí hội tụ được sử dụng rộng rãi nhất là "sự thay đổi đã không thay đổi". Tôi đã tự hỏi liệu đi xe đạp có thể xảy ra nếu chúng ta sử dụng tiêu chí hội tụ như vậy? Tôi sẽ hài lòng nếu bất …

9 clustering  algorithms  k-means 

Tôi đang lập mô hình Dự đoán bệnh tiểu đường bằng phương pháp hồi quy logistic. Bộ dữ liệu được sử dụng là Hệ thống giám sát nhân tố rủi ro hành vi (BRFSS) của Trung tâm kiểm soát dịch bệnh (CDC). Một trong những biến độc lập là huyết …

9 logistic  missing-data 

Tôi đã kết hợp hai mô hình phương trình ước lượng tổng quát (GEE) với dữ liệu của mình: 1) Mô hình 1: Kết quả là theo chiều dọc Có / Không biến (A) (năm 1,2,3,4,5) với yếu tố dự đoán liên tục theo chiều dọc (B) trong các năm …

9 logistic  gee 

Tôi đang xem xét dữ liệu cực kỳ phi tuyến tính mà các mô hình ARMA / ARIMA không hoạt động tốt. Mặc dù vậy, tôi thấy một số tự tương quan và tôi nghi ngờ sẽ có kết quả tốt hơn cho tự tương quan tuyến tính. 1 / …

9 r  correlation  nonparametric  garch  arma 

Bối cảnh: Tôi có hai bộ dữ liệu từ cùng một bảng câu hỏi trong hơn hai năm. Mỗi câu hỏi được đo bằng thang đo 5 Likert. Q1: Sơ đồ mã hóa Hiện tại, tôi đã mã hóa các câu trả lời của mình trong khoảng [0, 1], với …

9 statistical-significance  likert 

Tôi có hai bộ dữ liệu từ các nghiên cứu kết hợp trên toàn bộ gen. Thông tin duy nhất có sẵn là tỷ lệ lẻ và khoảng tin cậy của chúng (95%) cho mỗi SNP có kiểu gen. Tôi muốn tạo ra một lô rừng so sánh hai tỷ …

9 confidence-interval  meta-analysis  genetics  odds-ratio 

Gói libsvm tuyệt vời cung cấp giao diện python và tệp "easy.py" tự động tìm kiếm các tham số học tập (chi phí & gamma) để tối đa hóa độ chính xác của trình phân loại. Trong một tập hợp các tham số học tập nhất định, độ chính xác …

9 cross-validation  svm 

Đã khóa . Câu hỏi này và câu trả lời của nó bị khóa vì câu hỏi không có chủ đề nhưng có ý nghĩa lịch sử. Nó hiện không chấp nhận câu trả lời hoặc tương tác mới. Tôi giả sử R có tích hợp sẵn này. Làm thế …

9 r  normal-distribution 

Tập dữ liệu của tôi bao gồm tổng tỷ lệ tử vong hoặc tỷ lệ sống của một sinh vật ở ba loại địa điểm, trong nước, giữa kênh và ngoài khơi. Các số trong bảng dưới đây đại diện cho số lượng trang web. 100% Mortality 100% Survival Inshore …

9 logistic  multiple-comparisons  chi-squared  r  text-mining  clustering  classification  feature-selection  unsupervised-learning  time-series  references  mode  hypothesis-testing  confidence-interval  bootstrap  normal-distribution  order-statistics  correlation  statistical-significance  spss  bayesian  beta-binomial 

Tôi có hai mô hình hồi quy logistic trong R được thực hiện với glm(). Cả hai đều sử dụng cùng một biến, nhưng được tạo bằng các tập con khác nhau của ma trận. Có một cách dễ dàng để có được một mô hình trung bình cung cấp …

9 r  generalized-linear-model 

Tôi đang cố gắng để hiểu ký hiệu ma trận, và làm việc với các vectơ và ma trận. Ngay bây giờ tôi muốn hiểu cách tính vectơ ước tính hệ số trong hồi quy bội được tính toán.β^β^\hat{\beta} Phương trình cơ bản dường như là ddβ(y−Xβ)′(y−Xβ)=0.ddβ(y−Xβ)′(y−Xβ)=0. \frac{d}{d\boldsymbol{\beta}} (\boldsymbol{y}-\boldsymbol{X\beta})'(\boldsymbol{y}-\boldsymbol{X\beta}) = …

9 regression 

Hãy xem xét một thí nghiệm với nhiều người tham gia, mỗi người được đo nhiều lần trong hai điều kiện. Một mô hình hiệu ứng hỗn hợp có thể được xây dựng (sử dụng cú pháp lme4 ) như: fit = lmer( formula = measure ~ (1|participant) + condition …

9 mixed-model  bootstrap