Thống kê và dữ liệu lớn

Khi nào thì người ta thích sử dụng mô hình Tự động có điều kiện hơn mô hình Tự động đồng thời khi mô hình hóa dữ liệu trên không được tham chiếu địa lý tự động?

23 modeling  spatial 

Có những phương pháp rộng rãi nào để phát hiện gian lận, dị thường, làm mờ, v.v. trong các công trình khoa học do bên thứ ba sản xuất? (Tôi đã có động lực để hỏi điều này bởi vụ Marc Hauser gần đây .) Thông thường đối với gian …

23 meta-analysis  fraud 

Trong hai bài báo năm 1986 và 1988 , Connor và Korajchot đã đề xuất một phương pháp để mô hình hóa lợi nhuận tài sản. Vì các chuỗi thời gian này thường có nhiều tài sản hơn các quan sát trong khoảng thời gian, họ đã đề xuất thực …

23 pca  econometrics 

Câu hỏi: Tôi có một ma trận tương quan lớn. Thay vì phân cụm các tương quan riêng lẻ, tôi muốn phân cụm các biến dựa trên mối tương quan của chúng với nhau, tức là nếu biến A và biến B có tương quan tương tự với các biến …

23 correlation  clustering  correlation-matrix 

Tôi đang tìm kiếm một giải pháp thay thế cho Cây phân loại có thể mang lại sức mạnh dự đoán tốt hơn. Dữ liệu tôi đang xử lý có các yếu tố cho cả các biến giải thích và biến được giải thích. Tôi nhớ đã đi qua các …

23 r  machine-learning  classification  cart 

Gần đây tôi bắt đầu làm việc cho một phòng khám bệnh lao. Chúng tôi gặp nhau định kỳ để thảo luận về số lượng các trường hợp mắc bệnh lao mà chúng tôi hiện đang điều trị, số lượng xét nghiệm được quản lý, v.v. Tôi muốn bắt đầu …

23 r  time-series  poisson-distribution  count-data  epidemiology 

Đây là phần tiếp theo của câu hỏi Stackoverflow về việc xáo trộn một mảng ngẫu nhiên . Có các thuật toán đã được thiết lập (chẳng hạn như Shuffle Knuth-Fisher-Yates ) mà người ta nên sử dụng để xáo trộn một mảng, thay vì dựa vào các triển khai …

23 combinatorics  randomness 

Các cơ chế chú ý đã được sử dụng trong các bài viết Deep Learning khác nhau trong vài năm qua. Ilya Sutskever, người đứng đầu nghiên cứu tại Open AI, đã nhiệt tình khen ngợi họ: https://towardsdatascience.com/the-fall-of-rnn-lstm-2d1594c74ce0 Eugenio Culurciello tại Đại học Purdue đã tuyên bố rằng RNN và …

23 time-series  deep-learning  lstm  rnn  attention 

Các định nghĩa của tham số min_child_weight trong xgboost được đưa ra như: tổng trọng lượng tối thiểu (hessian) cần thiết ở trẻ. Nếu bước phân vùng cây dẫn đến một nút lá có tổng trọng số thể hiện nhỏ hơn min_child_ weight, thì quá trình xây dựng sẽ từ …

23 machine-learning  xgboost  hessian 

Tôi đang cố gắng để cảm nhận về những ưu điểm và nhược điểm tương đối, cũng như các lĩnh vực ứng dụng khác nhau của hai chương trình MCMC này. Khi nào bạn sẽ sử dụng cái nào và tại sao? Khi một người có thể thất bại nhưng …

23 mcmc  random-walk  particle-filter  probabilistic-programming  hmc 

Tôi đã thấy hai loại công thức mất logistic. Chúng ta có thể dễ dàng cho thấy chúng giống hệt nhau, sự khác biệt duy nhất là định nghĩa của nhãn yyy . Xây dựng / ký hiệu 1, :y∈{0,+1}y∈{0,+1}y \in \{0, +1\} L(y,βTx)=−ylog(p)−(1−y)log(1−p)L(y,βTx)=−ylog⁡(p)−(1−y)log⁡(1−p) L(y,\beta^Tx)=-y\log(p)-(1-y)\log(1-p) trong đó , trong đó …

23 logistic  generalized-linear-model  notation  loss-functions 

Câu hỏi này đã được di chuyển từ Stack Overflow vì nó có thể được trả lời trên Cross xác thực. Di cư 3 năm trước . Trong các số liệu thống kê, chúng tôi đang thực hiện hồi quy tuyến tính, sự khởi đầu của chúng. Nói chung, chúng …

23 regression  r-squared 

Trong suy luận thống kê , vấn đề 9.6b, "Vùng mật độ cao nhất (HDR)" được đề cập. Tuy nhiên, tôi đã không tìm thấy định nghĩa của thuật ngữ này trong cuốn sách. Một thuật ngữ tương tự là Mật độ Posterior cao nhất (HPD). Nhưng nó không phù …

23 confidence-interval  estimation  definition  credible-interval  highest-density-region 

Tôi đã tự hỏi những trường hợp sử dụng khác nhau là gì đối với hai thuật toán, Phối hợp gốc và Giảm dần . Tôi biết rằng gốc tọa độ có vấn đề với các hàm không trơn tru nhưng nó được sử dụng trong các thuật toán phổ …

23 optimization  gradient-descent 

Tôi quan tâm đến việc lựa chọn mô hình trong một thiết lập chuỗi thời gian. Để cụ thể, giả sử tôi muốn chọn một mô hình ARMA từ một nhóm các mô hình ARMA với các đơn đặt hàng độ trễ khác nhau. Mục đích cuối cùng là dự …

23 time-series  forecasting  cross-validation  model-selection  aic