Thống kê và dữ liệu lớn

Quy trình kiểm tra SPSS báo cáo 2 phân tích khi so sánh 2 phương tiện độc lập, một phân tích có phương sai bằng nhau được giả định và một phân tích có phương sai bằng nhau không được giả định. Độ tự do (df) khi các phương sai …

15 hypothesis-testing  t-test  heteroscedasticity  degrees-of-freedom  t-distribution 

Cho ma trận Vm×nVm×n\mathbf V^{m \times n} , Hệ số ma trận không âm (NMF) tìm thấy hai ma trận không âm Wm×kWm×k\mathbf W^{m \times k} và Hk×nHk×n\mathbf H^{k \times n} (nghĩa là với tất cả các phần tử ≥0≥0\ge 0 ) để biểu diễn ma trận phân tách là: …

15 cross-validation  unsupervised-learning  latent-variable  matrix-decomposition  nnmf 

Tôi đang cố gắng hiểu các mô hình nhân tố ma trận cho các hệ thống đề xuất và tôi luôn đọc 'các tính năng tiềm ẩn', nhưng điều đó có nghĩa là gì? Tôi biết một tính năng có nghĩa là gì đối với tập dữ liệu đào tạo …

15 machine-learning  data-mining  recommender-system 

Various descriptions on model selection on random effects of Linear Mixed Models instruct to use REML. I know difference between REML and ML at some level, but I don't understand why REML should be used because ML is biased. For example, is it wrong to conduct a LRT on a …

15 mixed-model  maximum-likelihood  unbiased-estimator  likelihood-ratio  reml 

Trong phân tích cụm làm thế nào để chúng ta tính toán độ tinh khiết? Phương trình là gì? Tôi không tìm kiếm một mã để làm điều đó cho tôi. Đặt là cụm k và c j là lớp j.ωkωk\omega_kcjcjc_j Vì vậy, độ tinh khiết thực tế chính xác? …

15 clustering 

Tôi có dữ liệu về nhân viên của một công ty lớn của Ý trong hơn mười năm và tôi muốn xem khoảng cách giới tính trong thu nhập nam-nữ đã thay đổi theo thời gian như thế nào. Với mục đích này, tôi chạy OLS gộp: trong đó là …

15 hypothesis-testing  estimation  econometrics  fixed-effects-model 

Vì vậy, tôi đã chơi xung quanh với các SVM và tôi tự hỏi liệu đây có phải là một điều tốt để làm không: Tôi có một bộ các tính năng liên tục (0 đến 1) và một bộ các tính năng phân loại mà tôi đã chuyển đổi …

15 categorical-data  svm  feature-selection  linear-model  feature-construction 

Câu hỏi này đưa ra một định nghĩa định lượng về entropy chéo, theo công thức của nó. Tôi đang tìm kiếm một định nghĩa nổi tiếng hơn, wikipedia nói: Trong lý thuyết thông tin, entropy chéo giữa hai phân phối xác suất đo số bit trung bình cần thiết …

15 entropy  information-theory 

Tôi có một bộ dữ liệu chuỗi thời gian đa biến bao gồm các biến sinh học và môi trường tương tác (cộng với có thể một số biến ngoại sinh). Bên cạnh tính thời vụ, không có xu hướng dài hạn rõ ràng trong dữ liệu. Mục đích của …

15 r  time-series  var  seasonality 

Tôi biết 3 phương pháp để thực hiện ước lượng tham số, phương pháp ML, MAP và Bayes. Và đối với cách tiếp cận MAP và Bayes, chúng ta cần chọn các linh mục cho các tham số, phải không? Giả sử tôi có mô hình này , trong đó …

15 bayesian  estimation  prior 

Tôi muốn kết hợp các đầu ra của lmer (thực sự lấp lánh) với một ví dụ nhị thức đồ chơi. Tôi đã đọc các họa tiết và tin rằng tôi hiểu những gì đang xảy ra. Nhưng rõ ràng là tôi không. Sau khi bị mắc kẹt, tôi đã …

15 r  mixed-model  optimization  lme4-nlme 

Ai đó có thể giải thích chức năng tự tương quan trong dữ liệu chuỗi thời gian không? Áp dụng acf vào dữ liệu, ứng dụng sẽ là gì?

15 autocorrelation 

Để CLT được giữ, chúng tôi cần phân phối mà chúng tôi muốn xấp xỉ để có trung bình và phương sai hữu hạn σ 2 . Liệu có đúng không khi nói rằng trong trường hợp phân phối Cauchy, giá trị trung bình và phương sai của nó, không …

15 probability  central-limit-theorem  asymptotics  cauchy 

Tôi gặp khó khăn để lấy được Hessian của hàm mục tiêu, l(θ)l(θ)l(\theta) , trong hồi quy logistic nơi l(θ)l(θ)l(\theta) là: l(θ)=∑i=1m[yilog(hθ(xi))+(1−yi)log(1−hθ(xi))]l(θ)=∑i=1m[yilog⁡(hθ(xi))+(1−yi)log⁡(1−hθ(xi))] l(\theta)=\sum_{i=1}^{m} \left[y_{i} \log(h_\theta(x_{i})) + (1- y_{i}) \log (1 - h_\theta(x_{i}))\right] hθ(x)hθ(x)h_\theta(x) là một hàm logistic. Các Hessian làXTDXXTDXX^T D X . Tôi cố gắng để lấy được nó …

15 logistic 

Trong vài tuần qua, tôi đã cố gắng tìm hiểu MCMC và thuật toán của Metropolis-Hastings. Mỗi lần tôi nghĩ tôi hiểu điều đó tôi lại nhận ra mình sai. Hầu hết các ví dụ mã tôi tìm thấy trên mạng thực hiện một cái gì đó không phù hợp …

15 mcmc  metropolis-hastings