Thống kê và dữ liệu lớn

Trong kỹ thuật giảm kích thước như Phân tích thành phần chính, LDA, v.v ... thường sử dụng thuật ngữ đa tạp. Một đa tạp trong thuật ngữ phi kỹ thuật là gì? Nếu một điểm thuộc về một hình cầu mà tôi muốn giảm kích thước và nếu có …

28 terminology  manifold-learning 

Một thử nghiệm thống kê duy nhất có thể đưa ra bằng chứng cho thấy giả thuyết null (H0) là sai và do đó, giả thuyết thay thế (H1) là đúng. Nhưng nó không thể được sử dụng để chỉ ra rằng H0 là đúng vì không từ chối H0 …

28 hypothesis-testing  p-value  combining-p-values 

Tôi đã hoàn thành phân tích thành phần chính (PCA), phân tích nhân tố khám phá (EFA) và phân tích nhân tố xác nhận (CFA), xử lý dữ liệu theo thang độertert (phản hồi 5 cấp: không, một chút, một số, ..) như một liên tục biến. Sau đó, bằng …

28 pca  factor-analysis  ordinal-data  binary-data  likert 

Khi điều chỉnh mô hình hồi quy, điều gì xảy ra nếu các giả định của đầu ra không được đáp ứng, cụ thể: Điều gì xảy ra nếu phần dư không phải là homoscedastic? Nếu phần dư hiển thị mô hình tăng hoặc giảm trong biểu đồ Residuals so …

28 regression  multiple-regression  error  assumptions  normality-assumption 

Đây là một câu hỏi phỏng vấn cho một vị trí phân tích định lượng, được báo cáo ở đây . Giả sử chúng ta đang vẽ từ một phân phối thống nhất và các lần rút là iid, độ dài dự kiến ​​của phân phối tăng đơn điệu là …

28 probability  random-variable  expected-value  uniform  iid 

Tôi thường thấy thuật ngữ tiếng ồn trắng xuất hiện khi đọc về các mô hình thống kê khác nhau. Tuy nhiên tôi phải thừa nhận rằng tôi không hoàn toàn chắc chắn điều này có nghĩa là gì. Nó thường được viết tắt là . Điều đó có nghĩa …

28 normal-distribution  white-noise 

Ví dụ, hãy xem xét một mô hình hồi quy tuyến tính. Tôi nghe nói rằng, trong khai thác dữ liệu, sau khi thực hiện lựa chọn từng bước dựa trên tiêu chí AIC, việc nhìn vào các giá trị p để kiểm tra giả thuyết null cho rằng mỗi …

28 multiple-regression  predictive-models  data-mining  stepwise-regression 

Tôi đang sử dụng các mô hình R (3.1.1) và ARIMA để dự báo. Tôi muốn biết tham số "tần số" nào được chỉ định trong ts()hàm , nếu tôi sử dụng dữ liệu chuỗi thời gian: cách nhau vài phút và trải đều trên 180 ngày (1440 phút / …

28 r  time-series  arima  multiple-seasonalities  mape 

Ví dụ: lấy hàm mục tiêu của mô hình XGBoost trên lần lặp thứ :ttt L( t )= ∑i = 1nℓ ( ytôi, y^( t - 1 )tôi+ft(xi))+Ω(ft)L(t)=∑i=1nℓ(yi,y^i(t−1)+ft(xi))+Ω(ft)\mathcal{L}^{(t)}=\sum_{i=1}^n\ell(y_i,\hat{y}_i^{(t-1)}+f_t(\mathbf{x}_i))+\Omega(f_t) Trong đó là hàm mất, là đầu ra của cây và là chính quy. Một trong những bước chính (nhiều) để tính …

28 optimization  loss-functions  boosting  xgboost  taylor-series 

Tôi đang sử dụng glmnet để tính toán ước tính hồi quy sườn núi. Tôi đã nhận được một số kết quả khiến tôi nghi ngờ trong glmnet đó thực sự đang làm những gì tôi nghĩ nó làm. Để kiểm tra điều này, tôi đã viết một tập lệnh …

28 r  ridge-regression  glmnet 

Tôi bối rối. Có sự khác biệt giữa mạng niềm tin Deep và Máy Deep Boltzmann không? Nếu vậy, sự khác biệt là gì?

28 machine-learning  deep-learning  rbm  deep-belief-networks 

Bộ dữ liệu "Iris" có lẽ quen thuộc với hầu hết mọi người ở đây - đó là một trong những bộ dữ liệu kiểm tra chính tắc và bộ dữ liệu ví dụ cho tất cả mọi thứ, từ trực quan hóa dữ liệu đến học máy. Ví dụ, …

28 dataset 

Vấn đề lasso có giải pháp dạng đóng: nếu có các cột trực giao. Điều này đã được thể hiện trong chủ đề này: Dẫn xuất của giải pháp lasso dạng đóng .β Lasso j = s g n ( β LS j ) ( | β LS j | …

28 regression  lasso  regularization 

Như chúng ta đã biết, nếu bạn lật một đồng xu có cơ hội hạ cánh bằng nhau như đuôi, thì nếu bạn lật đồng xu nhiều lần, một nửa thời gian bạn sẽ nhận được đầu và một nửa thời gian bạn sẽ nhận được đuôi. Khi thảo luận …

28 probability  distributions  sampling 

Sự khác biệt giữa Mạng Bayes và quy trình Markov là gì? Tôi tin rằng tôi đã hiểu các nguyên tắc của cả hai, nhưng bây giờ khi tôi cần so sánh hai thứ tôi cảm thấy lạc lõng. Chúng có nghĩa gần như giống tôi. Chắc chắn là không. …

28 bayesian  references  modeling  markov-process  bayesian-network