Thống kê và dữ liệu lớn

Tôi không phải là một nhà thống kê bởi giáo dục, tôi là một kỹ sư phần mềm. Tuy nhiên, số liệu thống kê đưa ra rất nhiều. Trong thực tế, các câu hỏi cụ thể về lỗi Loại I và Loại II đang xuất hiện rất nhiều trong quá …

88 terminology  type-i-and-ii-errors 

Tôi đang làm việc với một lượng lớn chuỗi thời gian. Các chuỗi thời gian này về cơ bản là các phép đo mạng cứ sau 10 phút và một số trong số chúng là định kỳ (tức là băng thông), trong khi một số khác không (tức là lượng …

88 time-series  outliers  mathematical-statistics  real-time 

Nếu chúng ta lắp lại một ánh sáng, chúng ta có thể nhận được một cảnh báo cho chúng ta biết mô hình đang gặp khó khăn để hội tụ ... ví dụ: >Warning message: In checkConv(attr(opt, "derivs"), opt$par, ctrl = control$checkConv, : Model failed to converge with max|grad| = …

88 r  mixed-model  lme4-nlme 

Kết hợp hồi quy logistic bằng lme4 kết thúc bằng Error in mer_finalize(ans) : Downdated X'X is not positive definite. Một nguyên nhân có thể của lỗi này rõ ràng là thiếu thứ hạng. Thiếu thứ hạng là gì, và tôi nên giải quyết nó như thế nào?

87 r  logistic  lme4-nlme 

Tôi biết rằng phương tiện k không được giám sát và được sử dụng để phân cụm vv và k-NN được giám sát. Nhưng tôi muốn biết sự khác biệt cụ thể giữa hai?

86 machine-learning  k-means  k-nearest-neighbour 

Do phần mềm có thể thực hiện phép tính kiểm tra chính xác của Fisher ngày nay một cách dễ dàng , liệu có bất kỳ tình huống nào, về mặt lý thuyết hay thực tế, kiểm tra chi bình phương thực sự thích hợp hơn kiểm tra chính xác …

86 chi-squared  contingency-tables  fishers-exact 

Giả sử tôi có một tập hợp dữ liệu mẫu từ một phân phối không xác định hoặc phức tạp và tôi muốn thực hiện một số suy luận về thống kê của dữ liệu. Khuynh hướng mặc định của tôi là chỉ cần tạo ra một loạt các mẫu …

86 hypothesis-testing  confidence-interval  bootstrap 

Tôi biết đại khái và không chính thức khoảng tin cậy là gì. Tuy nhiên, tôi dường như không thể quấn đầu quanh một chi tiết khá quan trọng: Theo Wikipedia: Khoảng tin cậy không dự đoán rằng giá trị thực của tham số có xác suất cụ thể nằm …

86 confidence-interval  definition 

Có bao giờ hợp lệ để bao gồm một tương tác hai chiều trong một mô hình mà không bao gồm các hiệu ứng chính? Điều gì sẽ xảy ra nếu giả thuyết của bạn chỉ liên quan đến sự tương tác, bạn vẫn cần bao gồm các hiệu ứng …

85 regression  modeling  interaction  regression-coefficients 

Wiki thảo luận về các vấn đề phát sinh khi đa cộng tuyến là một vấn đề trong hồi quy tuyến tính. Vấn đề cơ bản là kết quả đa cộng đồng trong các ước tính tham số không ổn định, điều này làm cho việc đánh giá tác động …

85 regression  intuition  multicollinearity 

Tôi thích cuốn sách của G van Belle về Quy tắc thống kê của ngón tay cái , và ở mức độ thấp hơn Các lỗi phổ biến trong Thống kê (và Cách tránh chúng) từ Phillip I Good và James W. Hardin. Họ giải quyết những cạm bẫy phổ …

85 modeling  eda  rule-of-thumb 

Tất cả chúng ta đều biết câu thần chú "tương quan không ngụ ý nhân quả" mà được đánh trống trong tất cả các sinh viên thống kê năm đầu tiên. Có một số ví dụ hay ở đây để minh họa ý tưởng. Nhưng đôi khi mối tương quan …

85 correlation  causality 

Tôi có phù hợp với một vài hiệu ứng mô hình hỗn hợp (đặc biệt là mô hình theo chiều dọc) sử dụng lme4trong Rnhưng muốn thực sự nắm vững các mô hình và mã mà đi với họ. Tuy nhiên, trước khi lặn bằng cả hai chân (và mua …

85 r  mixed-model  lme4-nlme 

Đó là một thực tế được biết rằng trung vị chống lại các ngoại lệ. Nếu đó là trường hợp, khi nào và tại sao chúng ta sẽ sử dụng giá trị trung bình ở nơi đầu tiên? Một điều tôi có thể nghĩ có lẽ là để hiểu sự …

84 mathematical-statistics  mean  median 

Tôi mới làm quen với máy học và tôi đã cố gắng tìm ra cách áp dụng mạng nơ-ron vào dự báo chuỗi thời gian. Tôi đã tìm thấy tài nguyên liên quan đến truy vấn của mình, nhưng dường như tôi vẫn bị mất một chút. Tôi nghĩ rằng …

83 time-series  forecasting  neural-networks