Thống kê và dữ liệu lớn

1

Phân phối cận biên của đường chéo của ma trận phân phối Wishart nghịch đảo

Giả sử . Tôi quan tâm đến phân phối biên của các phần tử đường chéo . Có một vài kết quả đơn giản về phân phối các mô hình con của (ít nhất là một số được liệt kê tại Wikipedia). Từ đó tôi có thể hình dung rằng …

21 distributions probability pdf

4

Là cây quyết định hầu như luôn luôn là cây nhị phân?

Gần như mọi ví dụ về cây quyết định mà tôi gặp đều là cây nhị phân. Đây có phải là khá phổ quát? Có phải hầu hết các thuật toán tiêu chuẩn (C4.5, GIỎI, v.v.) chỉ hỗ trợ cây nhị phân? Từ những gì tôi thu thập được, CHAID …

21 machine-learning data-mining cart

5

Ví dụ về hệ số tương quan mạnh với giá trị p cao

Tôi đã tự hỏi, có thể có một hệ số tương quan rất mạnh (giả sử .9 hoặc cao hơn), với giá trị p cao (nói 0,25 hoặc cao hơn)? Đây là một ví dụ về hệ số tương quan thấp, với giá trị p cao: set.seed(10) y <- rnorm(100) …

21 r hypothesis-testing correlation

3

Hồi quy Poisson so với hồi quy bình phương nhỏ nhất log-Count?

Hồi quy Poisson là GLM với chức năng liên kết nhật ký. Một cách khác để mô hình hóa dữ liệu đếm không được phân phối thông thường là tiền xử lý bằng cách lấy nhật ký (hay đúng hơn là nhật ký (đếm 1 +) để xử lý 0 …

21 regression poisson-distribution generalized-linear-model

2

Làm thế nào để sử dụng trọng số trong hàm lm trong R?

Đã khóa . Câu hỏi này và câu trả lời của nó bị khóa vì câu hỏi không có chủ đề nhưng có ý nghĩa lịch sử. Nó hiện không chấp nhận câu trả lời hoặc tương tác mới. Bất cứ ai cũng có thể cung cấp một số gợi …

21 r regression

2

Khó kiểm tra tuyến tính trong hồi quy

Trong mô hình thống kê: Hai nền văn hóa Leo Breiman viết Thực tiễn áp dụng hiện nay là kiểm tra sự phù hợp của mô hình dữ liệu bằng cách sử dụng các kiểm tra mức độ phù hợp và phân tích dư. Tại một thời điểm, vài năm …

21 regression goodness-of-fit

2

Cách chọn giữa các thuật toán học tập

Tôi cần triển khai một chương trình sẽ phân loại các bản ghi thành 2 loại (đúng / sai) dựa trên một số dữ liệu đào tạo và tôi đã tự hỏi nên xem xét thuật toán / phương pháp nào. Dường như có rất nhiều trong số chúng để …

21 machine-learning bayesian optimization genetic-algorithms

2

Xác thực chéo (tổng quát hóa lỗi) sau khi chọn mô hình

Lưu ý: Trường hợp là n >> p Tôi đang đọc các yếu tố của học thống kê và có nhiều đề cập khác nhau về cách "đúng" để thực hiện xác nhận chéo (ví dụ trang 60, trang 245). Cụ thể, câu hỏi của tôi là làm thế nào …

21 machine-learning model-selection data-mining cross-validation

5

Giới thiệu về lý thuyết đo lường

Tôi quan tâm đến việc tìm hiểu thêm về các kỹ thuật Bayesian (và có liên quan). Nền tảng của tôi là về khoa học máy tính và mặc dù tôi chưa bao giờ tham gia một khóa học về lý thuyết đo lường hoặc lý thuyết xác suất, tôi …

21 probability bayesian references theory

7

Làm thế nào để giải thích khoảng tin cậy của sự khác biệt về phương tiện trong một thử nghiệm T mẫu?

SPSS cung cấp "khoảng tin cậy của chênh lệch trung bình". Tôi đã đọc ở một số nơi có nghĩa là "95 lần trong số 100, sự khác biệt trung bình mẫu của chúng tôi sẽ nằm giữa các giới hạn" Tôi thấy điều này không rõ ràng. Bất cứ …

21 confidence-interval

3

So sánh giữa MaxEnt, ML, Bayes và các phương pháp suy luận thống kê khác

Tôi không phải là một nhà thống kê (tôi đã có một khóa học về thống kê toán học nhưng không có gì hơn thế), và gần đây, trong khi nghiên cứu lý thuyết thông tin và cơ học thống kê, tôi đã gặp một thứ gọi là "thước đo …

21 entropy inference

2

Đo độ tương tự tài liệu

Để phân cụm (văn bản) tài liệu, bạn cần một cách đo lường sự tương đồng giữa các cặp tài liệu. Hai lựa chọn thay thế là: So sánh các tài liệu dưới dạng vectơ hạn sử dụng Tương tự Cosine - và TF / IDF làm trọng số cho …

21 information-retrieval

2

Làm thế nào để đo lường / lập luận mức độ phù hợp của đường xu hướng đối với luật quyền lực?

Tôi có một số dữ liệu mà tôi đang cố gắng để phù hợp với một đường xu hướng. Tôi tin rằng dữ liệu tuân theo luật công suất và do đó đã vẽ dữ liệu trên các trục log-log tìm kiếm một đường thẳng. Điều này đã dẫn đến …

21 goodness-of-fit power-law

4

Mối quan hệ giữa ước tính và ước tính là gì?

21 estimation terminology estimators

4

Phân phối trước thông tin yếu cho các tham số tỷ lệ

Tôi đã sử dụng các bản phân phối bình thường như các bản phân phối trước cho các tham số tỷ lệ (đối với các bản phân phối bình thường, bản phân phối, v.v.) khi tôi có một ý tưởng sơ bộ về quy mô nên là gì, nhưng tôi …

21 distributions bayesian modeling prior maximum-entropy