Thống kê và dữ liệu lớn

Hầu hết các thuật toán phân cụm và giảm kích thước cổ điển (phân cụm theo phân cấp, phân tích thành phần chính, phương tiện k, bản đồ tự tổ chức ...) được thiết kế dành riêng cho dữ liệu số và dữ liệu đầu vào của chúng được xem …

21 clustering  dimensionality-reduction  distance  self-organizing-maps  mixed-type-data 

Khi tôi vẽ biểu đồ dữ liệu của mình, nó có hai đỉnh: Điều đó có nghĩa là một phân phối đa phương thức tiềm năng? Tôi đã chạy dip.testtrong R ( library(diptest)) và đầu ra là: D = 0.0275, p-value = 0.7913 Tôi có thể kết luận rằng dữ …

21 r  hypothesis-testing  distributions  self-study  histogram 

Tôi quan sát một hành vi rất kỳ lạ trong kết quả SVD của dữ liệu ngẫu nhiên, mà tôi có thể sao chép trong cả Matlab và R. Có vẻ như một số vấn đề về số trong thư viện LAPACK; Là nó? Tôi vẽ mẫu từ Gaussian chiều …

21 pca  svd  linear-algebra  numerics 

Theo một văn bản mà tôi đang sử dụng, công thức cho phương sai của phần dư được đưa ra bởi:ithithi^{th} σ2(1−1n−(xi−x¯¯¯)2Sxx)σ2(1−1n−(xi−x¯)2Sxx)\sigma^2\left ( 1-\frac{1}{n}-\frac{(x_{i}-\overline{x})^2}{S_{xx}} \right ) Tôi thấy điều này khó tin kể từ khi còn lại là sự khác biệt giữa giá trị quan sát và giá trị được …

21 regression  variance  residuals 

Khi tính toán AIC, Một tôiC= 2 k - 2 l n LMộttôiC= =2k-2tôinLAIC = 2k - 2 ln L k có nghĩa là 'số lượng tham số'. Nhưng những gì được coi là một tham số? Ví dụ trong mô hình y= a x + by= =mộtx+by = ax …

21 aic 

Tôi có 383 mẫu có độ lệch lớn đối với một số giá trị phổ biến, làm thế nào để tôi tính được 95% CI cho giá trị trung bình? CI mà tôi tính toán dường như tắt, mà tôi giả sử là do dữ liệu của tôi không giống …

21 confidence-interval  mean 

Tôi đang cố gắng điều chỉnh mô hình hồi quy tuyến tính đa biến với dữ liệu của mình với một vài tham số đầu vào, giả sử 3. F( x )F( x )= A x1+ B x2+ Cx3+ dhoặc là= ( A B C )T( x1 x2 x3) + …

21 regression  data-visualization  multiple-regression  communication 

Tôi là một nhà toán học tự học thống kê và đấu tranh đặc biệt là với ngôn ngữ. Trong cuốn sách tôi đang sử dụng, có một vấn đề sau: Một biến ngẫu nhiên được đưa ra dưới dạng phân phối với . (Tất nhiên, bạn có thể thực …

21 maximum-likelihood 

Có phải là trong phương sai tiêu chuẩn hóa được biết đến trong khi học sinh không được biết và do đó ước tính? Cảm ơn bạn.

21 standardization 

Tôi đang đọc Giám mục về thuật toán EM cho GMM và mối quan hệ giữa GMM và k-mean. Trong cuốn sách này có nói rằng k-mean là phiên bản cứng của GMM. Tôi tự hỏi điều đó có nghĩa là nếu dữ liệu tôi đang cố gắng phân cụm …

21 clustering  data-mining  k-means  gaussian-mixture 

Tôi có một câu hỏi về phân tích cụm. Có 3000 công ty, phải được phân cụm theo cách sử dụng năng lượng của họ trong hơn 5 năm. Mỗi công ty có giá trị cho mỗi giờ trong 5 năm. Tôi muốn tìm hiểu xem một số công ty …

21 time-series  clustering  spss 

Tôi đang áp dụng mô hình tuyến tính cho dữ liệu của mình: ytôi= β0+ β1xtôi+ εtôi,εtôi~ N( 0 , σ2) .ytôi= =β0+β1xtôi+εtôi,εtôi~N(0,σ2). y_{i}=\beta_{0}+\beta_{1}x_{i}+\epsilon_{i}, \quad\epsilon_{i} \sim N(0,\sigma^{2}). Tôi muốn ước tính khoảng tin cậy (CI) của các hệ số ( , ) bằng phương pháp bootstrap. Có hai cách tôi …

21 regression  bootstrap 

Trong bối cảnh học máy và nhận dạng mẫu, có một khái niệm gọi là Kernel Trick . Đối mặt với các vấn đề mà tôi được yêu cầu để xác định xem một hàm có thể là hàm kernel hay không, chính xác thì nên làm gì? Trước tiên …

21 machine-learning  kernel-trick 

Câu hỏi này đã được di chuyển từ Stack Overflow vì nó có thể được trả lời trên Cross xác thực. Di cư 6 năm trước . Tôi có kết quả sau khi chạy chức năng glm. Làm thế nào tôi có thể giải thích các giá trị sau đây: …

21 r  regression  generalized-linear-model 

Ai đó có thể giải thích sự giải thích tự nhiên cho siêu âm LDA là gì? ALPHAvà BETAlà các tham số của phân phối Dirichlet cho chủ đề (trên mỗi tài liệu) và phân phối từ (theo chủ đề) tương ứng. Tuy nhiên, ai đó có thể giải thích …

21 interpretation  prior  topic-models  hyperparameter