Thống kê và dữ liệu lớn

Tôi đang cố gắng hiểu làm thế nào backpropagation hoạt động cho lớp đầu ra softmax / cross-entropy. Hàm lỗi entropy chéo là E(t,o)=−∑jtjlogojE(t,o)=−∑jtjlog⁡ojE(t,o)=-\sum_j t_j \log o_j với và là mục tiêu và đầu ra tại nơron , tương ứng. Tổng là trên mỗi nơ ron trong lớp đầu ra. …

40 backpropagation  derivative  softmax  cross-entropy 

Tôi tự hỏi nếu ai đó biết bất kỳ quy tắc chung nào về số lượng mẫu bootstrap nên sử dụng, dựa trên các đặc điểm của dữ liệu (số lượng quan sát, v.v.) và / hoặc các biến bao gồm?

40 bootstrap  inference  monte-carlo 

Biến số triệt tiêu trong hồi quy bội là gì và đâu là cách để hiển thị hiệu ứng triệt tiêu một cách trực quan (cơ học hoặc bằng chứng của nó trong kết quả)? Tôi muốn mời mọi người có suy nghĩ, chia sẻ.

40 multiple-regression  data-visualization  geometry  suppressor 

"Dữ liệu lớn" có ở khắp mọi nơi trên các phương tiện truyền thông. Mọi người đều nói rằng "dữ liệu lớn" là điều quan trọng trong năm 2012, ví dụ cuộc thăm dò của KDNuggets về các chủ đề nóng cho năm 2012 . Tuy nhiên, tôi có mối …

40 data-mining  dataset  large-data  validation 

Tôi phải tìm 95% CI trên trung vị và các phân vị khác. Tôi không biết làm thế nào để tiếp cận điều này. Tôi chủ yếu sử dụng R như một công cụ lập trình.

40 r  confidence-interval  median 

Tôi đã chơi xung quanh với các khu rừng ngẫu nhiên để hồi quy và đang gặp khó khăn trong việc tìm ra chính xác hai biện pháp quan trọng có nghĩa là gì và chúng nên được giải thích như thế nào. Các importance()chức năng cung cấp cho hai …

40 r  machine-learning  random-forest  importance 

Tôi chưa quen với số liệu thống kê và tôi hiện đang giao dịch với ANOVA. Tôi thực hiện kiểm tra ANOVA trong R bằng cách sử dụng aov(dependendVar ~ IndependendVar) Tôi nhận được - trong số những người khác - giá trị F và giá trị p. Giả thuyết …

40 r  anova  interpretation 

Tôi đã có một số dữ liệu về các chuyến bay của hãng hàng không (trong khung dữ liệu được gọi flights) và tôi muốn xem liệu thời gian chuyến bay có ảnh hưởng gì đến xác suất chuyến bay bị trì hoãn đáng kể hay không (nghĩa là 10 …

40 r  logistic  separation 

Tôi đang cố gắng thực hiện một phân tích hồi quy logistic trong R. Tôi đã tham dự các khóa học bao gồm tài liệu này bằng STATA. Tôi thấy rất khó để nhân rộng chức năng trong R. Là nó trưởng thành trong lĩnh vực này? Dường như có …

40 r  logistic  odds-ratio 

Đối với phân phối không chính thống bị lệch vừa phải, chúng ta có mối quan hệ thực nghiệm sau đây giữa giá trị trung bình, trung bình và chế độ: Mối quan hệ này như thế nào nguồn gốc?(Mean - Mode) ~ 3(Trung bình - Trung bình)(Mean - Mode)∼3(Mean …

40 distributions  mathematical-statistics  descriptive-statistics  history 

Tôi đang cố gắng dự đoán kết quả của một hệ thống phức tạp bằng cách sử dụng các mạng thần kinh (ANN). Giá trị kết quả (phụ thuộc) nằm trong khoảng từ 0 đến 10.000. Các biến đầu vào khác nhau có phạm vi khác nhau. Tất cả các …

40 machine-learning  neural-networks  multidimensional-scaling 

Tôi hiểu rằng Rừng ngẫu nhiên và Cây ngẫu nhiên cực kỳ khác nhau theo nghĩa là sự phân chia của cây trong Rừng ngẫu nhiên là xác định trong khi chúng là ngẫu nhiên trong trường hợp Cây ngẫu nhiên cực kỳ (chính xác hơn, lần phân chia tiếp …

40 machine-learning  correlation  references  random-forest 

Tôi tiếp tục đọc về các trường hợp chúng tôi tập trung dữ liệu (ví dụ: với chính quy hoặc PCA) để xóa phần chặn (như đã đề cập trong câu hỏi này ). Tôi biết nó đơn giản, nhưng tôi có một thời gian khó hiểu bằng trực giác …

40 regression  pca  centering 

Tôi muốn xem 7 biện pháp hành vi sửa văn bản (thời gian sửa văn bản, số lần nhấn phím, v.v.) liên quan với nhau như thế nào. Các biện pháp có tương quan. Tôi đã chạy PCA để xem các biện pháp được chiếu lên PC1 và PC2 như …

39 pca  tsne 

Tôi là một econ / stat chính. Tôi biết rằng các nhà kinh tế đã cố gắng sửa đổi các giả định của họ về hành vi và tính hợp lý của con người bằng cách xác định các tình huống trong đó mọi người không cư xử hợp lý. …

39 bias