Thống kê và dữ liệu lớn

Tôi đang cố gắng tạo ra một con số cho thấy mối quan hệ giữa các bản sao virus và phạm vi bảo vệ bộ gen (GCC). Đây là dữ liệu của tôi trông như sau: Lúc đầu, tôi chỉ vẽ một hồi quy tuyến tính nhưng các giám sát …

15 regression  modeling  curve-fitting  percentage 

Giả sử chúng ta có hai cây hồi quy (cây A và cây B) rằng tấm bản đồ đầu vào để đầu ra y ∈ R . Hãy để y = f Một ( x ) cho cây A và f B ( x ) cho cây B. Mỗi cây …

15 regression  machine-learning  cart 

Làm thế nào và tại sao các trình tạo số ngẫu nhiên (RNG) quan trọng trong thống kê tính toán? Tôi hiểu rằng tính ngẫu nhiên rất quan trọng khi chọn mẫu cho nhiều thử nghiệm thống kê để tránh sai lệch đối với giả thuyết, nhưng có các lĩnh …

15 hypothesis-testing  monte-carlo  algorithms  random-generation  computational-statistics 

Tôi cho rằng P ( A | B ) = P ( A | B , C ) * P ( C ) + P ( A | B , ¬ C ) * P ( ¬ C )P(A|B)=P(A|B,C)∗P(C)+P(A|B,¬C)∗P(¬C)P(A|B) = P(A | B,C) * P(C) + P(A|B,\neg C) * P(\neg …

15 probability  bayesian 

Tôi quan tâm đến việc thay đổi các giả thuyết null bằng cách sử dụng glm()trong R. Ví dụ: x = rbinom(100, 1, .7) summary(glm(x ~ 1, family = "binomial")) kiểm tra giả thuyết rằng . Điều gì xảy ra nếu tôi muốn thay đổi null thành p = một …

15 r  hypothesis-testing  generalized-linear-model  chi-squared  offset 

Tôi đã đọc nhiều lần rằng các hiệu ứng ngẫu nhiên (BLUP / chế độ có điều kiện cho các đối tượng) không phải là tham số của mô hình hiệu ứng hỗn hợp tuyến tính mà thay vào đó có thể được lấy từ các tham số phương sai …

15 mixed-model  intuition  blup 

Tôi hiểu lý do đằng sau việc chia dữ liệu thành tập Kiểm tra và tập Xác thực. Tôi cũng hiểu rằng kích thước của sự phân chia sẽ phụ thuộc vào tình huống nhưng nhìn chung sẽ thay đổi từ 50/50 đến 90/10. Tôi đã xây dựng một RNN …

15 machine-learning  neural-networks  validation 

Tôi có thể nghĩ về ít nhất một ví dụ ngây thơ. Giả sử tôi muốn nghiên cứu mối quan hệ giữa X và Z. Tôi cũng nghi ngờ rằng Y ảnh hưởng đến Z, vì vậy tôi kiểm soát Y. Tuy nhiên, hóa ra, tôi không biết, X gây …

15 mediation  controlling-for-a-variable 

Tôi là một người mới trong số liệu thống kê, vì vậy các bạn có thể vui lòng giúp tôi ra khỏi đây. Câu hỏi của tôi là như sau: phương sai gộp thực sự có nghĩa là gì? Khi tôi tìm kiếm một công thức cho phương sai gộp …

15 variance  mean  pooling 

Là trung bình của nhiều ma trận xác định dương xác định nhất thiết phải là xác định dương xác định hay bán xác định dương? Trung bình là yếu tố trung bình khôn ngoan.

15 mathematical-statistics  matrix  covariance-matrix 

Tôi nghĩ rằng tôi có một số nhầm lẫn cơ bản về cách các chức năng trong hồi quy Logistic hoạt động (hoặc có thể chỉ là toàn bộ chức năng). Làm thế nào mà hàm h (x) tạo ra đường cong nhìn thấy ở bên trái của hình ảnh? …

15 logistic  data-visualization  function 

Tôi muốn tư vấn về việc tổng hợp các lô / số liệu thống kê sau nhiều lần cắt bỏ. Trong quá trình phát triển các mô hình thống kê để dự đoán một sự kiện trong tương lai (ví dụ: sử dụng dữ liệu từ hồ sơ bệnh viện …

15 data-visualization  data-imputation  multiple-imputation  pooling  calibration 

Đặt {Xi}ni=1{Xi}i=1n\{X_i\}_{i=1}^n là một họ các biến ngẫu nhiên iid lấy các giá trị trong [0,1][0,1][0,1] , có giá trị trung bình μμ\mu và phương sai σ2σ2\sigma^2 . Một khoảng tin cậy đơn giản cho giá trị trung bình, sử dụng σσ\sigma bất cứ khi nào nó được biết đến, …

15 normal-distribution  confidence-interval  references  asymptotics  approximation 

Tôi đang làm việc trên một vấn đề cụm văn bản. Dữ liệu chứa một số câu. Có một thuật toán tốt đạt độ chính xác cao trên văn bản ngắn? Bạn có thể cung cấp tài liệu tham khảo tốt? Các thuật toán như KMeans, cụm phổ không hoạt …

15 machine-learning  clustering  text-mining 

Có nhiều tài liệu nhấn mạnh phương pháp Tối đa hóa kỳ vọng trên các mô hình hỗn hợp (Hỗn hợp của Gaussian, Mô hình Markov ẩn, v.v.). Tại sao EM lại quan trọng? EM chỉ là một cách để tối ưu hóa và không được sử dụng rộng rãi …

15 machine-learning  optimization  expectation-maximization  gaussian-mixture