Thống kê và dữ liệu lớn

6

Việc sử dụng cùng một dữ liệu để lựa chọn tính năng và xác thực chéo có bị sai lệch hay không?

Chúng tôi có một bộ dữ liệu nhỏ (khoảng 250 mẫu * 100 tính năng) mà chúng tôi muốn xây dựng bộ phân loại nhị phân sau khi chọn tập hợp tính năng tốt nhất. Hãy nói rằng chúng tôi phân vùng dữ liệu thành: Đào tạo, kiểm tra và …

8 machine-learning cross-validation feature-selection train

4

Tôi có thể chứng minh mối quan hệ độ cong khi biến độc lập tuyến tính không đáng kể

Tôi đang nghiên cứu một hiệu ứng đường cong giữa X và Y bằng cách sử dụng phân tích hồi quy phân cấp. Để kiểm tra các hiệu ứng curvilinear, thuật ngữ bình phương cho X đã được tính toán (ý tôi là trung tâm cũng là biến X). Trong …

8 regression

1

Có thể giải thích các hệ số beta được tiêu chuẩn hóa cho hồi quy lượng tử?

Có thể giải thích các hệ số từ hồi quy lượng tử trên dữ liệu chuẩn? Giả sử tôi chuẩn hóa biến phụ thuộc và biến độc lập x (trừ giá trị trung bình và chia cho độ lệch chuẩn) và sau đó chạy hồi quy lượng tử cho trung …

8 regression stata quantiles

1

Xác định vấn đề tham số

Tôi luôn đấu tranh để có được bản chất thực sự của nhận dạng trong kinh tế lượng. Tôi biết rằng chúng ta có thể xác định rằng một tham số (giả sử ) nếu chỉ cần nhìn vào phân phối (khớp) của nó, chúng ta có thể suy ra …

8 estimation identifiability

3

Làm thế nào để kiểm tra sự tương tác giữa yếu tố và hiệp phương sai trong một mô hình hiệu ứng hỗn hợp?

Tôi có 2 yếu tố Avà B(5 × 3) và một yếu tố đồng biến Xtrong thiết kế chủ đề. Đây là cách tôi chỉ định mô hình tổng thể của mình: lme.out = lme(y~ A*B*X, random=~1|Subject, data=mydata) Giải thích của tôi là tôi đang xem một biểu đồ y~x, …

8 repeated-measures interaction lme4-nlme contrasts predictor

2

Làm thế nào để đối phó với sự phân tách hoàn toàn trong một GLMM logistic?

Cập nhật : Vì bây giờ tôi biết rằng vấn đề của tôi được gọi là tách hoàn toàn, tôi đã cập nhật câu hỏi để phản ánh điều này (nhờ Aaron). Tôi có một bộ dữ liệu từ một thử nghiệm trong đó 29 người tham gia (yếu tố …

8 r logistic standard-error lme4-nlme separation

1

Các đường thẳng song song trên phần dư so với cốt truyện được trang bị

Tôi có một vấn đề hồi quy bội, tôi đã cố gắng giải quyết bằng cách sử dụng hồi quy bội đơn giản: model1 <- lm(Y ~ X1 + X2 + X3 + X4 + X5, data=data) Điều này dường như đang giải thích 85% phương sai (theo R-squared) có …

8 r regression multiple-regression

1

Phân phối chuẩn thông thường trên một không gian con

Đặt là một không gian vectơ với . Một phân phối chuẩn chuẩn trên là định luật của một vectơ ngẫu nhiên lấy các giá trị trong và sao cho tọa độ của trong một ( trong bất kỳ) cơ sở trực giao của là một vectơ ngẫu nhiên làm …

8 normal-distribution conditioning

3

Tôi có thể thực hiện tìm kiếm toàn diện với xác thực chéo để chọn tính năng không?

Tôi đã đọc một số bài viết về lựa chọn tính năng và xác thực chéo nhưng tôi vẫn có câu hỏi về quy trình chính xác. Giả sử tôi có một bộ dữ liệu với 10 tính năng và tôi muốn chọn các tính năng tốt nhất. Cũng giả …

8 cross-validation model-selection feature-selection

1

Tại sao một chuỗi Markov hữu hạn, không thể thay đổi và có chu kỳ với ma trận ngẫu nhiên P có phân phối giới hạn đồng nhất?

Định lý là "Nếu một ma trận chuyển tiếp cho chuỗi Markov không thể thay đổi được với không gian trạng thái đặc biệt S là ngẫu nhiên, thì phép đo bất biến (duy nhất) của nó là đồng nhất trên S." Nếu Chuỗi Markov có ma trận chuyển tiếp …

8 probability self-study markov-process

2

Tính bảo thủ của các xét nghiệm dựa trên các biến ngẫu nhiên rời rạc

Đối với thống kê kiểm tra rời rạc, phân phối của giá trị tương ứng là rời rạc và lớn hơn ngẫu nhiên so với phân phối đồng đều. Do đó, kiểm tra giả thuyết tương ứng dựa trên giá trị p (ví dụ từ chối nếu giá trị p …

8 distributions statistical-significance hypothesis-testing discrete-data

1

Tỷ lệ cược của ba người có sinh nhật liên tiếp là gì?

Một người nào đó đã nói chuyện rằng ba người bạn của cô ấy đã có những ngày sinh nhật liên tiếp (chẳng hạn như ngày 10, 11 và 12 tháng 11), và tôi muốn tìm hiểu khả năng của ba người được chọn ngẫu nhiên như thế nào, giả …

8 probability

2

Tính toán độ chính xác và thu hồi trong R

Giả sử tôi đang xây dựng một phân loại hồi quy logistic dự đoán xem ai đó đã kết hôn hay độc thân. (1 = đã kết hôn, 0 = độc thân) Tôi muốn chọn một điểm trên đường cong gợi nhớ chính xác mang lại cho tôi độ chính …

8 r precision-recall

1

Làm thế nào để tôi có được một nhóm người để xếp hạng chung một nhóm các đối tượng?

Tôi làm việc cho một tổ chức giám sát khoảng 180 trường học trên cả nước. Chúng tôi thường xuyên thu thập dữ liệu kết quả từ các trường này và xếp hạng chúng. Tôi đã được yêu cầu làm một cuộc khảo sát của văn phòng quốc gia (khoảng …

8 survey ranking bradley-terry-model

1

Đồng thời không đồng nhất và đuôi nặng trong mô hình hồi quy

Tôi đang cố gắng tạo một mô hình dự đoán bằng cách sử dụng hồi quy. Đây là âm mưu chẩn đoán cho mô hình mà tôi nhận được từ việc sử dụng lm () trong R: Những gì tôi đọc được từ âm mưu QQ là phần dư có …

8 regression residuals heteroscedasticity robust rlm