Thống kê và dữ liệu lớn

Tôi gặp phải vấn đề có vẻ dễ dàng, nhưng tôi đã không tìm thấy một giải pháp phù hợp trong vài tuần nay. Tôi có khá nhiều dữ liệu khảo sát / khảo sát (hàng chục nghìn người được hỏi, ví dụ 50 nghìn cho mỗi tập dữ liệu), …

14 machine-learning  survey-weights  survey-sampling 

Trong một mạng thần kinh tái phát, bạn thường sẽ chuyển tiếp truyền qua một số bước thời gian, "hủy đăng ký" mạng và sau đó truyền lại qua chuỗi các đầu vào. Tại sao bạn không chỉ cập nhật các trọng số sau mỗi bước riêng lẻ trong chuỗi? …

14 time-series  neural-networks  backpropagation  rnn 

Tôi đã đọc bài viết này về trường hợp của Palantir, nơi Bộ Lao động đang buộc tội họ trong việc phân biệt đối xử với người châu Á. Có ai biết họ đã lấy những ước tính xác suất này từ đâu không? Tôi không nhận được 1/741 trong …

14 probability  p-value  contingency-tables  legal 

25% hàng đầu là phần tư hàng đầu. 10% hàng đầu là decile hàng đầu. 1% hàng đầu là tỷ lệ phần trăm hàng đầu. Có tương đương với 0,5% tức là 1 trong 200 không?

14 terminology  quantiles 

Tôi đã tham gia một khóa học máy tại trường đại học của tôi. Trong một trong những câu hỏi, câu hỏi này đã được hỏi. Mô hình 1: y=θx+ϵy=θx+ϵ y = \theta x + \epsilon Mô hình 2: y=θx+θ2x+ϵy=θx+θ2x+ϵ y = \theta x + \theta^2 x + \epsilon Những …

14 regression  machine-learning  self-study  modeling  model 

Tôi nghĩ rằng khái niệm về bộ điển hình khá trực quan: một chuỗi độ dài nnn sẽ thuộc về bộ điển hình nếu xác suất của chuỗi xuất hiện cao. Vì vậy, bất kỳ chuỗi nào có khả năng sẽ có trong . (Tôi đang tránh định nghĩa chính …

14 entropy  intuition  information-theory 

Cấu trúc của câu hỏi này như sau: ban đầu, tôi cung cấp khái niệm về học tập hòa đồng , hơn nữa tôi cung cấp một danh sách các nhiệm vụ nhận dạng mẫu , sau đó tôi đưa ra các ví dụ về thuật toán học tập đồng …

14 machine-learning  neural-networks  pattern-recognition  ensemble  ocr 

Tôi là người mới bắt đầu cố gắng kết hợp dự án đầu tiên của mình. Tôi đã có một dự án phân loại bài hát trong đầu, nhưng vì tôi sẽ được dán nhãn thủ công, tôi chỉ có thể kết hợp hợp lý khoảng 1000 bài hát, hoặc …

14 neural-networks 

Tôi có một số dữ liệu thú vị về các nghệ sĩ âm nhạc nổi tiếng nhất được phân chia theo địa điểm thành khoảng 200 quận của quốc hội. Tôi muốn xem liệu có thể thăm dò ý kiến ​​của một người theo sở thích âm nhạc của người …

14 correlation  prediction  pooling  weighted-data 

Tôi có lẽ không hiểu rõ về nghịch lý của Simpson . Một cách không chính thức tôi biết rằng trung bình của phản ứng Y1, được nhóm theo tất cả các mức của yếu tố A có thể, có thể cao hơn mức trung bình của phản ứng Y2 …

14 mathematical-statistics  simpsons-paradox 

Có đúng là là một công cụ ước tính không thiên vị cho ? Đó là, ρ X , Y E [ R X , Y ] = ρ X , Y ?RX,YRX,YR_{X,Y}ρX,YρX,Y\rho_{X,Y}E[RX,Y]=ρX,Y?E[RX,Y]=ρX,Y?\mathbf{E}\left[R_{X,Y}\right]=\rho_{X,Y}? Nếu không, công cụ ước tính không thiên vị cho gì? (Có lẽ đó là một ước …

14 correlation 

Ai đó có thể giải thích ý tưởng chính đằng sau phương pháp Hamiltonian Monte Carlo và trong trường hợp nào họ sẽ mang lại kết quả tốt hơn phương pháp Markov Chain Monte Carlo?

14 bayesian  mcmc  hmc 

Trong những trường hợp nhất định, Jeffreys trước cho một mô hình đa chiều đầy đủ generaly coi là không đầy đủ, đây là ví dụ trường hợp của: (Trong đó ε ~ N ( 0 , σ 2 ) , với μ và σ chưa biết), nơi những điều …

14 distributions  bayesian  estimation  prior  jeffreys-prior 

Lưu ý: SSTSSTSST = Sum of Squares Total, SSESSESSE = Sum of Squared Error và SSRSSRSSR = Regression Sum of Squares. Phương trình trong tiêu đề thường được viết là: ∑i=1n(yi−y¯)2=∑i=1n(yi−y^i)2+∑i=1n(y^i−y¯)2∑i=1n(yi−y¯)2=∑i=1n(yi−y^i)2+∑i=1n(y^i−y¯)2\sum_{i=1}^n (y_i-\bar y)^2=\sum_{i=1}^n (y_i-\hat y_i)^2+\sum_{i=1}^n (\hat y_i-\bar y)^2 Câu hỏi khá đơn giản, nhưng tôi đang tìm kiếm một lời …

14 regression  least-squares  r-squared 

Đã có những nghiên cứu quy mô lớn về các phương pháp MCMC so sánh hiệu suất của một số thuật toán khác nhau trên một bộ mật độ thử nghiệm? Tôi đang nghĩ về một cái gì đó tương đương với bài báo của Rios và Sahinidis (2013), đó …

14 machine-learning  bayesian  references  mcmc