Thống kê và dữ liệu lớn

Tôi đang đọc cuốn sách Thống kê (Freeman, Pisani, Purves) và tôi đang cố gắng tái tạo một ví dụ trong đó một đồng xu được tung ra nói 50 lần, số lượng đầu được đếm và điều này được lặp lại nói 1.000 lần. Đầu tiên, tôi giữ số …

19 normal-distribution  central-limit-theorem  normal-approximation 

Nhiều nguồn tin đề cập đến thiết kế "cốt truyện hộp" cổ điển cho John Tukey và "sơ đồ nguyên lý" của ông năm 1970. Thiết kế này dường như vẫn ở trạng thái tĩnh kể từ đó, với phiên bản cắt xuống của âm mưu hộp của Edward Tufte …

19 data-visualization  references  boxplot  history 

Chính quy trong hồi quy (tuyến tính, logistic ...) là cách phổ biến nhất để giảm sự phù hợp quá mức. Khi mục tiêu là độ chính xác dự đoán (không giải thích), có sự thay thế tốt nào cho việc chính quy hóa, đặc biệt phù hợp với các …

19 regression  regularization  overfitting 

Tôi muốn kiểm tra giả thuyết rằng hai mẫu được rút ra từ cùng một quần thể, mà không đưa ra bất kỳ giả định nào về sự phân bố của các mẫu hoặc dân số. Làm thế nào tôi nên làm điều này? Từ Wikipedia, ấn tượng của tôi …

19 r  hypothesis-testing  nonparametric  wilcoxon-mann-whitney  wilcoxon-signed-rank 

Từ trang Wikipedia có tiêu đề tương quan không ngụ ý nhân quả , Đối với bất kỳ hai sự kiện tương quan, A và B, các mối quan hệ có thể khác nhau bao gồm: A gây ra B (nhân quả trực tiếp); B gây ra A (nhân quả …

19 correlation  causality 

Thứ nhất, ông đưa ra xác suất kết quả. Vì vậy, ví dụ, dự đoán của ông cho cuộc bầu cử ở Mỹ hiện là 82% Clinton so với 18% Trump. Bây giờ, ngay cả khi Trump thắng, làm sao tôi biết rằng đó không chỉ là 18% thời gian …

19 forecasting  prediction  validation  accuracy  scoring-rules 

Tôi đã nghe khái niệm rằng Jaynes tuyên bố những người thường xuyên hoạt động với một "ưu tiên ngầm". Những linh mục ngầm này là gì? Điều này có nghĩa là các mô hình thường xuyên là tất cả các trường hợp đặc biệt của các mô hình Bayes …

19 bayesian  prior  posterior  frequentist 

Tôi đã cố gắng hết sức để hiểu khái niệm lấy mẫu âm trong ngữ cảnh của word2vec. Tôi không thể tiêu hóa ý tưởng lấy mẫu [âm]. Ví dụ, trong các bài báo của Mikolov, kỳ vọng lấy mẫu âm tính được xác định là đăng nhậpσ( ⟨ W …

19 machine-learning  word2vec  word-embeddings 

Tôi đang cố gắng xây dựng một trình phân loại nhiều nhãn để gán chủ đề cho các tài liệu hiện có bằng scikit Tôi đang xử lý các tài liệu của mình chuyển chúng qua TfidfVectorizercác nhãn thông qua MultiLabelBinarizervà tạo một OneVsRestClassifiervới SGDClassifiertư cách là công cụ ước …

19 scikit-learn  multi-class  multilabel 

Tôi đang cố gắng hiểu các kiến ​​trúc mạng thần kinh tái phát (RNN) khác nhau được áp dụng cho dữ liệu chuỗi thời gian và tôi hơi bối rối với các tên khác nhau thường được sử dụng khi mô tả RNN. Là cấu trúc của bộ nhớ ngắn …

19 neural-networks  lstm  rnn 

Tôi có một mô hình mạng nơ-ron sâu và tôi cần đào tạo nó trên tập dữ liệu của mình bao gồm khoảng 100.000 ví dụ, dữ liệu xác nhận của tôi chứa khoảng 1000 ví dụ. Bởi vì cần có thời gian để đào tạo từng ví dụ (khoảng …

19 neural-networks  deep-learning 

Đặt tọa độ Cartesian của một điểm ngẫu nhiên được chọn st .( x , y ) ~ U ( - 10 , 10 ) × U ( - 10 , 10 )x , yx,yx,y( x , y) ~ U( - 10 , 10 ) × U( - 10 , …

19 normal-distribution  matlab  pdf  uniform 

Gốc cây quyết định là một cây quyết định chỉ với một lần phân chia. Nó cũng có thể được viết như là một hàm piecewise. Ví dụ: giả sử xxx là một vectơ và x1x1x_1 là thành phần đầu tiên của xxx , trong cài đặt hồi quy, một …

19 machine-learning  cart  linear  boosting 

Đây thực chất là một bản sao của một câu hỏi tôi tìm thấy tại math.se , không nhận được câu trả lời mà tôi hy vọng. Đặt là một chuỗi các biến ngẫu nhiên độc lập, được phân phối giống hệt nhau, với và .{Xi}i∈N{Xi}i∈N\{ X_i \}_{i \in \mathbb{N}}E[Xi]=1E[Xi]=1\mathbb{E}[X_i] …

19 probability  mathematical-statistics  asymptotics 

Vì vậy, trong một phân phối bình thường, chúng ta có hai tham số: mean và variance . Trong cuốn sách Nhận dạng mẫu và Học máy , đột nhiên xuất hiện một siêu tham số trong các điều khoản chính quy của hàm lỗi.σ 2μμ\muσ2σ2\sigma^2λλ\lambda Siêu âm là gì? …

19 terminology  definition  parameterization  hyperparameter