Thống kê và dữ liệu lớn

Gần đây, tôi đã trở nên quan tâm đến việc sắp xếp mô hình như một hình thức học tập. Cụ thể, tôi đã thử nghiệm một chút với một số bộ dữ liệu đồ chơi cho các vấn đề hồi quy. Về cơ bản, tôi đã triển khai các …

10 machine-learning  ensemble  stacking 

Tôi đang đọc một ví dụ được đưa ra trong cuốn sách, Machine Learning for Hackers . Trước tiên tôi sẽ giải thích về ví dụ và sau đó nói về câu hỏi của tôi. Ví dụ : Lấy một bộ dữ liệu trong 10 năm với giá 25 cổ …

10 time-series  pca  references  covariance  stationarity 

Trong các nguồn khác nhau (xem ví dụ ở đây ), công thức sau đây được đưa ra cho khoảng tin cậy cho trung vị (đặc biệt cho mục đích vẽ các rãnh trên các ô hình hộp và ria): 95 % C Tôim e d i a n= M …

10 confidence-interval  median  boxplot  interquartile 

Những gì hiện ~˙~˙\dot\sim ký hiệu (dấu chấm trên dấu ngã) có nghĩa là, trong bối cảnh như x ∼˙N( 0 , 1 )x~˙N(0,1)x \mathrel{\dot\sim} \mathcal N(0,1) ? Hóa ra việc tìm cách sắp xếp nó một cách chính xác sẽ dễ dàng hơn: tex.SE giải thích rằng người ta …

10 mathematical-statistics  notation 

Chứng minh / Từ chối E[1A|Ft]=0 or 1 a.s. ⇒E[1A|Fs]=E[1A|Ft] a.s.E[1A|Ft]=0 or 1 a.s. ⇒E[1A|Fs]=E[1A|Ft] a.s.E[1_A | \mathscr{F_t}] = 0 \ \text{or} \ 1 \ \text{a.s.} \ \Rightarrow E[1_A | \mathscr{F_{s}}] = E[1_A | \mathscr{F_t}] \ \text{a.s.} Cho một không gian xác suất lọc (Ω,F,{Fn}n∈N,P)(Ω,F,{Fn}n∈N,P)(\Omega, \mathscr{F}, \{\mathscr{F}_n\}_{n \in \mathbb{N}}, \mathbb{P}) …

10 probability  conditional-probability  random-variable  filter 

Tôi đang làm một nghiên cứu về việc sử dụng polydrug. Tôi có một bộ dữ liệu gồm 400 người nghiện ma túy, mỗi người tuyên bố các loại thuốc mà họ lạm dụng. Có hơn 10 loại thuốc và do đó có thể kết hợp lớn. Tôi đã mã …

10 hypothesis-testing  clustering  combinatorics  association-measure  association-rules 

Làm thế nào tôi có thể nhận được p,d and qcác giá trị trong ARIMA(p,d,q)mô hình ước tính auto.arima(mytimeseries)? arima_model <- auto.arima (mytimeseries, ic = 'bic') Nếu chúng ta nhìn vào đầu ra của arima_model $ arma chúng tôi nhận được, [1] 1 0 0 0 1 2 0 Ý …

10 r  arima 

Tôi có một vấn đề tương tự với câu hỏi được hỏi ở đây: Làm thế nào để đo lường sự không đồng đều của một phân phối? Tôi có một bộ phân phối xác suất qua các ngày trong tuần. Tôi muốn đo mức độ gần nhau của mỗi …

10 probability  distributions  random-variable  uniform  measurement 

Tôi đang cố gắng hiểu việc sử dụng hồi quy logistic trong các bảng dự phòng 2x2 và Ix2. Ví dụ, sử dụng điều này làm ví dụ Sự khác biệt giữa sử dụng kiểm tra chi bình phương và sử dụng hồi quy logistic là gì? Thế còn một …

10 logistic  chi-squared  logit  contingency-tables 

Các vấn đề phân loại với các ranh giới phi tuyến có thể được giải quyết bằng một tri giác đơn giản . Mã R sau đây dành cho mục đích minh họa và dựa trên ví dụ này trong Python): nonlin <- function(x, deriv = F) { if (deriv) …

10 r  neural-networks  svm  kernel-trick  perceptron 

Tôi hiện đang đọc về kỹ thuật hình ảnh t-SNE và được đề cập rằng một trong những nhược điểm của việc sử dụng phân tích thành phần chính (PCA) để hiển thị dữ liệu chiều cao là nó chỉ giữ khoảng cách cặp lớn giữa các điểm. Có nghĩa …

10 machine-learning  data-visualization  pca  tsne 

Trong bài báo này (có sẵn miễn phí qua trung tâm PubMed), các tác giả sử dụng hồi quy nhị thức âm tính để mô hình hóa điểm số trên một công cụ sàng lọc 10 mục ghi được 0-40. Thủ tục này giả định dữ liệu đếm, rõ ràng …

10 regression  negative-binomial  count-data 

Hôm nay giáo sư của chúng tôi đã tuyên bố trong lớp rằng "quá mức với các phân loại tuyến tính là không thể". Tôi cho rằng đó là sai, vì ngay cả các trình phân loại tuyến tính cũng có thể nhạy cảm với các ngoại lệ trong tập …

10 classification  overfitting 

Một mạng nhỏ cỡ thế giới là một loại đồ thị toán học trong đó hầu hết các nút không phải là hàng xóm của nhau, nhưng hầu hết các nút có thể đạt được từ mỗi khác bởi một số ít hoa bia hoặc các bước. Cụ thể, mạng …

10 hypothesis-testing  graph-theory  networks 

Tôi quan tâm đến loại trường hợp sau: có các biến ngẫu nhiên liên tục 'n' phải tổng bằng 1. Cái gì sẽ là PDF cho bất kỳ một biến nào như vậy? Vì vậy, nếu , thì tôi quan tâm đến phân phối cho , trong đó và đều …

10 uniform