Thống kê và dữ liệu lớn

Đối với một ứng dụng, tôi muốn phân cụm dữ liệu (có khả năng chiều cao) và trích xuất xác suất thuộc về một cụm. Tôi xem xét tại thời điểm Tự tổ chức bản đồ hoặc kernel k-nghĩa để thực hiện công việc. Những ưu và nhược điểm của …

8 clustering  unsupervised-learning 

Cách đây không lâu, tôi đã hỏi một câu hỏi về thời gian tương quan giữa các dấu thời gian và nhận được phản hồi từ Peter Ellis nói rằng tôi có thể tính khoảng cách trung bình giữa các mã ... Điều này đã cung cấp cho bạn một …

8 bootstrap  monte-carlo  resampling  quasi-monte-carlo 

Subitization là phép liệt kê nhanh, chính xác của màn hình số lượng thấp, được phân biệt với việc đếm bằng một phi tuyến sắc nét trong biểu đồ thời gian đáp ứng. Dưới đây là một âm mưu đại diện, từ Watson, DG, Maylor, EA, & Bruce, LAM (2007). …

8 linear-model  contrasts 

Tôi có loại dữ liệu sau (được mã hóa bằng R): v.a = c('cat', 'dog', 'dog', 'goat', 'cat', 'goat', 'dog', 'dog') v.b = c(1, 2, 1, 2, 1, 2, 1, 2) v.c = c('blue', 'red', 'blue', 'red', 'red', 'blue', 'yellow', 'yellow') set.seed(12) v.d = rnorm(8) aov(v.a ~ v.b + v.c …

8 r  logistic  anova  categorical-data  multinomial 

Trong một bài giảng gần đây tôi đã nói rằng, để ước tính khả năng tối đa là hợp lệ, khả năng nhật ký cần phải đi đến vô cùng khi tham số đi đến ranh giới của không gian tham số. Nhưng tôi không hiểu tại sao điều này …

8 maximum-likelihood 

Câu hỏi tổng thể của tôi là: tại sao sử dụng bayesglmthay vì các phương pháp phân loại khác? Ghi chú: Tôi chỉ quan tâm đến dự đoán. Tôi có một lượng dữ liệu kha khá (~ 100.000 obs). Tôi cảm thấy như cỡ mẫu đủ lớn, các tham số …

8 bayesian  generalized-linear-model 

Bản chất riêng biệt của DP làm cho nó không phù hợp cho các ứng dụng chung trong không đối xứng Bayes, nhưng nó rất phù hợp cho vấn đề đặt linh mục lên các thành phần hỗn hợp trong mô hình hỗn hợp. Trích dẫn này là từ Quy …

8 machine-learning  mcmc  dirichlet-process 

Liệu có thể ước tính chính xác số lượng tương đối của Loonies , Twoonies , tứ, dimes, biệt danh (và có lẽ là đồng xu đã ngưng) trong lưu thông từ việc chỉ cần lấy một mẫu tiền đủ lớn thông qua việc sử dụng hàng ngày? Bằng cách …

8 self-study  application 

Tôi có một bộ dữ liệu nhỏ, không cân bằng (70 dương, 30 âm) và tôi đã chơi xung quanh với lựa chọn mô hình cho các tham số SVM bằng BAC (độ chính xác cân bằng) và AUC (vùng dưới đường cong). Tôi đã sử dụng các trọng số …

8 svm  cross-validation  model-selection  auc 

Tôi đang cố gắng dự đoán một biến phản hồi trong hồi quy tuyến tính phải luôn dương (giá mỗi nhấp chuột). Đó là một số tiền. Trong adwords, bạn trả tiền cho google khi nhấp vào quảng cáo và số âm sẽ có nghĩa là google trả tiền cho …

8 regression  predictive-models 

Câu hỏi này đã được đưa ra trong một chủ đề khác mà tôi đã bắt đầu vì vậy tôi nghĩ rằng tôi sẽ nhận được nhiều ý kiến ​​của mọi người về nó. Câu hỏi của tôi là Là phần dư, e, một ước tính của lỗi, ?εϵ\epsilon Lý …

8 standard-error  residuals  error  estimators 

Tôi đang cố gắng tạo ra các bộ biến ngẫu nhiên được kết nối có nguyên nhân và bắt đầu thực hiện điều này với phương pháp monte carlo. Đường cơ sở là biểu đồ đo 2 chiều mà tôi vẽ các giá trị ngẫu nhiên. Trong các ví dụ …

8 monte-carlo  random-generation 

Tôi đang làm việc với mã rừng ngẫu nhiên của Breiman ( http: //stat-www.ber siêu.edu/users/oustiman/RandomForests/cc_manual.htmlm#c2 ) để phân loại dữ liệu vệ tinh (học có giám sát). Tôi đang sử dụng tập dữ liệu huấn luyện và kiểm tra có cỡ mẫu 2000 và kích thước thay đổi 10. Dữ …

8 machine-learning  classification  random-forest 

Trong phân phối Poisson, giá trị trung bình bằng phương sai. Tôi muốn tìm một khoảng tin cậy của phương sai. Là lý luận của tôi dưới đây đúng? Sử dụng giới hạn trung tâm lý tôi xây dựng một khoảng tin cậy 95% cho giá trị trung bình Do …

8 confidence-interval  variance  poisson-distribution 

Tôi đã đọc qua các bài viết sau đây đã trả lời câu hỏi tôi sẽ hỏi: Sử dụng mô hình Rừng ngẫu nhiên để đưa ra dự đoán từ dữ liệu cảm biến Cây quyết định dự đoán đầu ra Đây là những gì tôi đã làm cho đến …

8 random-forest  prediction