Thống kê và dữ liệu lớn

Tôi đang tìm một phương pháp để tính diện tích chồng lấp giữa hai ước tính mật độ hạt nhân trong R, như là một phép đo tương tự giữa hai mẫu. Để làm rõ, trong ví dụ sau, tôi sẽ cần định lượng diện tích của vùng chồng lấn …

14 r  probability  pdf  kernel-smoothing 

Để đánh giá hiệu suất một thuật toán phân loại mới, tôi đang cố gắng so sánh độ chính xác và độ phức tạp (big-O trong đào tạo và phân loại). Từ Machine Learning: đánh giá tôi nhận được một danh sách phân loại được giám sát đầy đủ, cũng …

14 machine-learning  classification  multiple-comparisons  algorithms  time-complexity 

tôi đã đọc ở Abdi (2003) rằng Khi các biến độc lập là cặp trực giao, tác động của từng biến trong hồi quy được đánh giá bằng cách tính độ dốc của hồi quy giữa biến độc lập này và biến phụ thuộc. Trong trường hợp này, (nghĩa là …

14 regression  multiple-regression  regression-coefficients  terminology 

Tôi đã duyệt các chủ đề khác nhau ở đây, nhưng tôi không nghĩ câu hỏi chính xác của mình đã được trả lời. Tôi có bộ dữ liệu ~ 50.000 sinh viên và thời gian bỏ học. Tôi sẽ thực hiện hồi quy mối nguy theo tỷ lệ với …

14 cross-validation  survival  train 

Tôi đang sử dụng wow vowpal để giải quyết vấn đề tên cướp theo ngữ cảnh . Tôi đang hiển thị quảng cáo cho người dùng và tôi có một chút thông tin về bối cảnh quảng cáo được hiển thị (ví dụ: người dùng là ai, họ đang ở …

14 multinomial  gradient-descent  multiarmed-bandit  vowpal-wabbit  contextual-bandit 

Tôi đang đọc một bài báo và tác giả đã viết: Tác dụng của A, B, C đối với Y được nghiên cứu thông qua việc sử dụng phân tích hồi quy bội. A, B, C được đưa vào phương trình hồi quy với Y là biến phụ thuộc. Phân …

14 regression  correlation  terminology 

Phần mềm trực quan hóa dữ liệu nguồn mở tốt nhất là gì? Tôi yêu cầu như sau: Có thể nhập dữ liệu từ Microsoft Excel (nhập dữ liệu từ cơ sở dữ liệu Oracle cũng tốt, nhưng điều này không bắt buộc). Biểu đồ được tạo bởi phần mềm …

14 data-visualization  excel  software  open-source 

vấn đề sau đây xuất hiện gần đây trong khi phân tích dữ liệu. Nếu biến ngẫu nhiên X theo phân phối bình thường và Y theo phân phối (với n dof), thì phân phối như thế nào? Cho đến bây giờ tôi đã đưa ra bản pdf của : …

14 probability  distributions  normal-distribution  chi-squared  convolution 

Tôi có dữ liệu thử nghiệm trong đó tôi có một số mẫu lớn từ các bản phân phối rời rạc mà tôi đang sử dụng làm bản phân phối theo kinh nghiệm. Tôi muốn kiểm tra xem các bản phân phối có thực sự khác nhau hay không và …

14 chi-squared  kolmogorov-smirnov 

Được thúc đẩy bởi sự thay đổi gần đây của thống kê lựa chọn mô hình mặc định trong gói dự báo của R từ AIC sang AICc, tôi tò mò liệu cái sau có thực sự được áp dụng ở bất cứ đâu trước đây không. Tôi có một …

14 model-selection  references  aic 

Trong một biến thể về vấn đề của người thu thập phiếu giảm giá , bạn không biết số lượng phiếu giảm giá và phải xác định điều này dựa trên dữ liệu. Tôi sẽ coi đây là vấn đề cookie may mắn: Cho một số lượng không rõ các …

14 estimation  coupon-collector-problem 

Từ wikipedia , tương quan bậc Spearman được tính bằng cách biến đổi XiXiX_i và YiYiY_i vào biến xếp xixix_i và yiyiy_i , và sau đó tính toán tương quan Pearson giữa xếp hạng các biến: Tuy nhiên, bài viết tiếp tục nêu rõ rằng nếu không có mối quan …

14 correlation  proof  spearman-rho 

Từ trang Wikipedia về khoảng tin cậy : ... Nếu khoảng tin cậy được xây dựng trên nhiều phân tích dữ liệu riêng biệt của các thử nghiệm lặp lại (và có thể khác nhau), tỷ lệ của các khoảng đó có chứa giá trị thực của tham số sẽ …

14 bayesian  confidence-interval 

Tôi hiện đang xem xét một số công việc và đã đi qua những điều sau đây, điều này có vẻ sai đối với tôi. Hai mô hình hỗn hợp được trang bị (trong R) bằng cách sử dụng lmer. Các mô hình không lồng nhau và được so sánh …

14 r  lme4-nlme  likelihood-ratio  nested-models 

Tôi đang đào tạo một mô hình phân loại với Rừng ngẫu nhiên để phân biệt giữa 6 loại. Dữ liệu giao dịch của tôi có khoảng 60k + quan sát và 35 biến. Đây là một ví dụ về cách nó trông như thế nào. _________________________________________________ |user_id|acquisition_date|x_var_1|x_var_2| y_vay | …

14 r  machine-learning  classification  random-forest