Thống kê và dữ liệu lớn

Tôi đang thực hiện một số dự báo trong R bằng gói dự báo của Rob Hyndman . Giấy thuộc về gói có thể được tìm thấy ở đây . Trong bài báo, sau khi giải thích các thuật toán dự báo tự động, các tác giả thực hiện các …

13 time-series  forecasting  model-selection  aic 

Các hệ số tương quan phi và Matthews có cùng một khái niệm không? Làm thế nào chúng có liên quan hoặc tương đương với hệ số tương quan Pearson cho hai biến nhị phân? Tôi giả sử các giá trị nhị phân là 0 và 1. Mối tương quan …

13 correlation  contingency-tables  bernoulli-distribution  model-evaluation  confusion-matrix 

Tôi hiện đang gặp vấn đề trong việc hiểu cú pháp của R để điều chỉnh GLM bằng cách sử dụng phân phối Gamma. Tôi có một bộ dữ liệu, trong đó mỗi hàng chứa 3 đồng biến ( ), biến trả lời ( Y ) và tham số hình …

13 r  generalized-linear-model  gamma-distribution  dglm 

Tôi đã xem qua rất nhiều tài liệu có sẵn trên mạng, bao gồm cả diễn đàn này mà không gặp may mắn và hy vọng ai đó có thể giúp đỡ một vấn đề thống kê mà tôi hiện đang phải đối mặt: Tôi có 5 danh sách dữ …

13 statistical-significance  ranking  valuation 

Trong vài ngày qua, tôi đã cố gắng hiểu Markov Chain Monte Carlo (MCMC) hoạt động như thế nào. Cụ thể, tôi đã cố gắng để hiểu và thực hiện thuật toán Metropolis-Hastings. Cho đến nay tôi nghĩ rằng tôi có một sự hiểu biết tổng thể về thuật toán …

13 mcmc  metropolis-hastings 

Độ tự do trong hồi quy bội bằng , trong đó k là số lượng biến.N- k - 1N-k-1N-k-1kkk Có bao gồm biến trả lời (nghĩa là Y ) không? Ví dụ: trong mô hình Y = B 0 + B 1 X 1 + B 2 X 2 , …

13 self-study  multiple-regression  degrees-of-freedom 

Tôi chỉ làm việc với cuốn sách Trí tuệ tập thể (của Toby Segaran) và tình cờ thấy điểm số khoảng cách Euclide. Trong cuốn sách, tác giả chỉ ra cách tính điểm tương đồng giữa hai mảng khuyến nghị (tức là .person×movie↦score)person×movie↦score)\textrm{person} \times \textrm{movie} \mapsto \textrm{score}) Anh ta tính …

13 distance-functions  similarities 

Entropy khác biệt của Gaussian RV là . Điều này phụ thuộc vàoσ, là độ lệch chuẩn.đăng nhập2( σ2 πe---√)đăng nhập2⁡(σ2πe)\log_2(\sigma \sqrt{2\pi e})σσ\sigma Nếu chúng ta bình thường hóa biến ngẫu nhiên để nó có phương sai đơn vị giảm entropy của nó. Đối với tôi điều này là phản …

13 information-theory  entropy  randomness 

Tôi biết làm thế nào để thực hiện hồi quy tuyến tính trên một tập hợp các điểm. Đó là, tôi biết làm thế nào để phù hợp với một đa thức của sự lựa chọn của tôi, với một tập dữ liệu nhất định, (theo nghĩa LSE). Tuy nhiên, …

13 regression  machine-learning  least-squares  linear-model  polynomial 

Đối với một biến ngẫu nhiên X∼Exp(λ)X~Exp(λ)X\sim \text{Exp}(\lambda) ( E[X]=1λE[X]= =1λ\mathbb{E}[X] = \frac{1}{\lambda} ) Tôi cảm thấy bằng trực giác rằngE[X|X>x]E[X|X>x]\mathbb{E}[X|X > x]phải bằngvì thuộc tính không nhớ, phân phối củagiống với củanhưng đượcsang phải bởi.X | X > x X xx+E[X]x+E[X]x + \mathbb{E}[X]X|X>xX|X>xX|X > xXXXxxx Tuy nhiên, tôi đang …

13 random-variable  exponential  conditional-expectation 

Tôi đang theo dõi câu hỏi tôi đã hỏi trước đó về RBM . Tôi thấy rất nhiều tài liệu mô tả chúng nhưng không có tài liệu nào thực sự nói về hồi quy (thậm chí không phân loại với dữ liệu được dán nhãn). Tôi có cảm giác …

13 regression  machine-learning  classification  neural-networks 

Tôi đang tìm kiếm một số nguồn mở hoặc một thư viện hiện có mà tôi có thể sử dụng. Theo như tôi nói thì gói glmnet không dễ mở rộng để bao quát trường hợp không âm. Tôi có thể sai, Bất kỳ ai với bất kỳ ý tưởng …

13 r  lasso 

Độ ổn định Beta trong hồi quy tuyến tính với đa cộng tuyến cao? Giả sử trong hồi quy tuyến tính, các biến x1x1x_1 và x2x2x_2 có đa cộng tuyến cao (tương quan là khoảng 0,9). Chúng tôi lo ngại về ββ\beta ổn định hệ số vì vậy chúng tôi …

13 regression  multicollinearity 

Tôi có hai mẫu ( n≈70n≈70n \approx 70 trong cả hai trường hợp). Các phương tiện khác nhau khoảng hai lần std gộp. nhà phát triển Giá trị kết quả TTTxấp xỉ 10. Trong khi thật tuyệt khi biết rằng tôi đã kết luận một cách thuyết phục rằng các …

13 hypothesis-testing  t-test 

Giả sử bạn được cung cấp hai bộ dữ liệu đa biến, giả sử một bộ cũ và một bộ dữ liệu mới và chúng được tạo ra bởi cùng một quy trình (mà bạn không có mô hình nào) nhưng có lẽ, ở đâu đó dọc theo dòng thu …

13 multivariate-analysis