Thống kê và dữ liệu lớn

Tôi có một bộ dữ liệu đang tăng lên rõ rệt khi thời gian trôi qua (tỷ giá hối đoái, dữ liệu hàng tháng trong hơn 20 năm), câu hỏi của tôi là: Tôi có thể loại bỏ dữ liệu và sau đó phân biệt nó để làm cho nó …

12 time-series  stationarity 

Tôi muốn so sánh hai phương pháp khác nhau để phát hiện thay đổi trạng thái trong phân tích sinh tồn. Một nhóm đối tượng đang được theo dõi trong một thời gian dài hơn (nhiều năm) và hai phương pháp kiểm tra đã được sử dụng để kiểm tra …

12 survival  paired-data 

Tôi có một chút vấn đề với cú pháp Stata. Tôi cần thực hiện hồi quy sau: y=ax+bz+c(xz)+ey=ax+bz+c(xz)+ey = ax + bz + c(xz) + e trong đó cả và z đều là công cụ và thuật ngữ tương tác x z sử dụng các giá trị cụ của x …

12 stata  interaction  instrumental-variables 

Tôi có một số khó khăn để hiểu đầy đủ thống kê đầy đủ? Đặt là một thống kê đầy đủ.T=ΣxiT=ΣxiT=\Sigma x_i Nếu với xác suất 1, đối với một số hàm g , thì đó là một thống kê đầy đủ.E[g(T)]=0E[g(T)]=0E[g(T)]=0ggg Nhưng điều này có nghĩa là gì? Tôi …

12 self-study  estimation  intuition  decision-theory 

Tôi vừa xem qua phân tích tuyệt vời này vừa thú vị vừa đẹp mắt: http://www.nytimes.com/interactive/2012/11/02/us/polencies/paths-to-the-white-house.html Tôi tò mò làm thế nào một "cây đường dẫn" như vậy có thể được xây dựng bằng R. Dữ liệu và thuật toán nào mà người ta cần để xây dựng một cây …

12 r  data-visualization  politics 

Tôi đang cố gắng để có được một trực giác về lý do tại sao việc tăng số lượng các tính năng có thể làm giảm hiệu suất. Tôi hiện đang sử dụng trình phân loại LDA hoạt động tốt hơn trong số các tính năng nhất định nhưng tệ …

12 classification  feature-selection 

Tôi đã sử dụng stl () trong R để phân tách dữ liệu đếm thành các thành phần xu hướng, theo mùa và không đều. Các giá trị xu hướng kết quả không còn là số nguyên nữa. Tôi có những câu hỏi sau: Là stl () một cách thích …

12 r  time-series  poisson-distribution 

Trong một Regression với tuyến tính và bậc hai về hậu cần mà thôi, nếu tôi có một tuyến tính hệ số β1β1\beta_1 và bậc hai hệ số β2β2\beta_2 , tôi có thể nói rằng đó là bước ngoặt của xác suất tại - β1/ (2 β2)-β1/(2β2)-\beta_1 / (2\beta_2) ?

12 interpretation  logit  polynomial 

AIC được định nghĩa là , trong đó là công cụ ước tính khả năng tối đa và là kích thước của không gian tham số. Đối với ước tính của , người ta thường bỏ qua yếu tố không đổi của mật độ. Đây là, yếu tố không phụ …

12 model-selection  aic  nested-models 

Tôi có dữ liệu với số lượng tính năng tối thiểu không thay đổi và một vài tính năng bổ sung có thể thay đổi và có tác động lớn đến kết quả. Tập dữ liệu của tôi trông như thế này: Các tính năng là A, B, C (luôn …

12 machine-learning  feature-selection 

Đối với một tập hợp dữ liệu nhất định, mức chênh lệch thường được tính là độ lệch chuẩn hoặc là IQR (phạm vi giữa các nhóm). Trong khi a standard deviationđược chuẩn hóa (điểm z, v.v.) và do đó có thể được sử dụng để so sánh sự lây …

12 nonparametric  mathematical-statistics  standard-deviation  descriptive-statistics  normalization 

Sự hiểu biết của tôi là rừng ngẫu nhiên chọn các biến mtry ngẫu nhiên để xây dựng mỗi cây quyết định. Vì vậy, nếu mtry = ncol / 3 thì mỗi biến sẽ được sử dụng trung bình ở 1/3 số cây. Và 2/3 số cây sẽ không sử …

12 r  random-forest  parameterization 

Giả sử tôi có một hỗn hợp gồm nhiều Gaussian có trọng số, phương tiện và độ lệch chuẩn đã biết. Các phương tiện không bằng nhau. Tất nhiên, độ lệch trung bình và độ lệch chuẩn của hỗn hợp có thể được tính toán, vì các khoảnh khắc được …

12 normal-distribution  mixture  distance 

Tôi đang so sánh sự phân bố kích thước của cây trong sáu cặp ô trong đó một ô được điều trị và một ô khác được kiểm soát. Sử dụng thử nghiệm Kolmogorov-Smirnov trên mỗi cặp lô tôi thấy rằng dao động từ đến . Có bất kỳ phương …

12 nonparametric  kolmogorov-smirnov 

Tôi không thể tìm ra cách thực hiện hồi quy tuyến tính trong R trong một thiết kế đo lặp lại. Trong một câu hỏi trước đây (vẫn chưa được trả lời) tôi đã đề nghị không sử dụng lmmà chỉ sử dụng các mô hình hỗn hợp. Tôi đã …

12 r  regression  mixed-model  repeated-measures