Thống kê và dữ liệu lớn

Phân tích dữ liệu thăm dò (EDA) thường dẫn đến việc khám phá các "dấu vết" khác không nhất thiết thuộc về các giả thuyết ban đầu. Tôi phải đối mặt với tình huống như vậy trong trường hợp nghiên cứu với quy mô mẫu hạn chế và rất nhiều …

25 multiple-comparisons  epidemiology  small-sample  eda 

Những phương pháp độ tin cậy giữa các nhà nghiên cứu là thích hợp nhất cho dữ liệu thứ tự hoặc khoảng thời gian? Tôi tin rằng "Xác suất chung của thỏa thuận" hoặc "Kappa" được thiết kế cho dữ liệu danh nghĩa. Trong khi "Pearson" và "Spearman" có thể …

25 reliability  psychometrics  agreement-statistics  cohens-kappa 

Một sinh viên hỏi tôi hôm nay, "Làm sao họ biết có bao nhiêu người tham dự một sự kiện lớn của nhóm, ví dụ, cuộc biểu tình của Stewart / Colbert 'Rally để khôi phục lại sự tỉnh táo' ở Washington DC?" Các cửa hàng tin tức báo cáo …

25 estimation  sampling 

CÂU HỎI: Tôi có dữ liệu nhị phân về các đề thi (đúng / không chính xác). Một số cá nhân có thể đã có quyền truy cập trước vào một tập hợp các câu hỏi và câu trả lời đúng của họ. Tôi không biết ai, bao nhiêu, hay …

25 r  clustering  classification  psychometrics 

Tôi đã được hỏi câu hỏi này trong một cuộc phỏng vấn cho một vị trí giao dịch với một công ty thương mại độc quyền. Tôi rất muốn biết câu trả lời cho câu hỏi này và trực giác đằng sau nó. Câu hỏi về amip: Một quần thể …

25 probability 

Tôi đã bắt đầu thực hiện theo cách của mình thông qua Hướng dẫn khai thác dữ liệu thống kê của Andrew Moore (rất khuyến khích cho bất kỳ ai khác lần đầu tiên mạo hiểm trong lĩnh vực này). Tôi bắt đầu bằng cách đọc bản PDF cực kỳ …

25 time-series  outliers  signal-processing  wavelet 

Những cách tốt để hình dung tập hợp các phản ứng Likert là gì? Ví dụ: một tập hợp các mục tìm hiểu về tầm quan trọng của X đối với các quyết định của A về A, B, C, D, E, F & G? Có một cái gì đó …

25 data-visualization  scales  likert 

Tôi đang cố gắng thực hiện giảm độ dốc cơ bản và tôi đang thử nghiệm nó với chức năng mất bản lề, ví dụ: . Tuy nhiên, tôi bối rối về độ dốc của bản lề. Tôi có ấn tượng rằng nó làlhinge=max(0,1−y x⋅w)lhinge=max(0,1−y x⋅w)l_{\text{hinge}} = \max(0,1-y\ \boldsymbol{x}\cdot\boldsymbol{w}) ∂∂wlhinge={−y …

25 loss-functions 

Nói rằng tôi đã ăn hamburger mỗi thứ ba trong nhiều năm. Bạn có thể nói rằng tôi ăn hamburger 14% thời gian, hoặc xác suất tôi ăn hamburger trong một tuần nhất định là 14%. Sự khác biệt chính giữa xác suất và tỷ lệ là gì? Là một …

25 probability  intuition 

Điều này có thể khó tìm, nhưng tôi muốn đọc một ví dụ ARIMA được giải thích rõ rằng sử dụng toán tối thiểu mở rộng cuộc thảo luận ngoài việc xây dựng một mô hình sử dụng mô hình đó để dự báo các trường hợp cụ thể sử …

25 time-series  arima  intuition 

Khi đọc về bài kiểm tra KS 2 mẫu, tôi hiểu chính xác những gì nó đang làm nhưng tôi không hiểu tại sao nó lại hoạt động . Nói cách khác, tôi có thể làm theo tất cả các bước để tính toán các hàm phân phối theo kinh …

25 distributions  statistical-significance  nonparametric  kolmogorov-smirnov 

Hồi quy LASSO thu nhỏ các hệ số về 0, do đó cung cấp lựa chọn mô hình hiệu quả. Tôi tin rằng trong dữ liệu của mình có những tương tác có ý nghĩa giữa hiệp phương sai danh nghĩa và liên tục. Tuy nhiên, không nhất thiết là …

25 machine-learning  lasso  glmnet  shrinkage  penalized 

Với hàm chi phí lồi, sử dụng SGD để tối ưu hóa, chúng ta sẽ có một gradient (vectơ) tại một điểm nhất định trong quá trình tối ưu hóa. Câu hỏi của tôi là, với điểm trên lồi, liệu độ dốc chỉ trỏ theo hướng mà hàm tăng / …

25 neural-networks  optimization  gradient-descent  sgd  convex 

Đóng cửa . Câu hỏi này dựa trên ý kiến . Nó hiện không chấp nhận câu trả lời. Bạn muốn cải thiện câu hỏi này? Cập nhật câu hỏi để có thể trả lời bằng sự kiện và trích dẫn bằng cách chỉnh sửa bài đăng này . Đóng …

25 machine-learning  neural-networks  svm  deep-learning 

Trong suốt, chúng tôi giả sử thống kê của chúng tôi là một hàm của một số dữ liệu được rút ra từ hàm phân phối ; hàm phân phối theo kinh nghiệm của mẫu của chúng tôi là . Vì vậy, là số liệu thống kê được xem là …

25 probability  mathematical-statistics  bootstrap  asymptotics  consistency