Thống kê và dữ liệu lớn

Tôi đang cố gắng học các phương pháp xác nhận chéo khác nhau, chủ yếu với ý định áp dụng các kỹ thuật phân tích đa biến có giám sát. Hai tôi đã đi qua là kỹ thuật xác thực chéo K-Fold và Monte Carlo. Tôi đã đọc rằng K-Fold …

29 cross-validation  monte-carlo 

Dựa trên độ chính xác phân loại ước tính, tôi muốn kiểm tra xem một phân loại có tốt hơn về mặt thống kê trên một bộ cơ sở so với phân loại khác hay không. Đối với mỗi phân loại, tôi chọn ngẫu nhiên một mẫu đào tạo và …

29 machine-learning  classification  t-test 

Đối với các công cụ ước tính mật độ hạt nhân đơn biến (KDE), tôi sử dụng quy tắc của Silverman để tính hhh : 0.9 phút ( s d, TôiQ R / 1,34 ) × n- 0,20,9tối thiểu(Sd,tôiQR/1,34)×n-0,2\begin{equation} 0.9 \min(sd, IQR/1.34)\times n^{-0.2} \end{equation} Các quy tắc chuẩn cho KDE …

29 smoothing  kernel-smoothing 

Tôi đang sử dụng dấu mũ để chạy một rừng ngẫu nhiên được xác thực chéo qua tập dữ liệu. Biến Y là một yếu tố. Không có NaN, Inf, hoặc NA trong tập dữ liệu của tôi. Tuy nhiên, khi chạy rừng ngẫu nhiên, tôi nhận được Error in …

29 r  random-forest  caret  regression  prediction  fitting  social-science  poisson-distribution  distributions  characteristic-function  bayesian  prior  regression  normal-distribution  interaction  nonparametric  skewness  svm  standard-deviation  standard-error  regression-coefficients  igraph  natural-language  word2vec  word-embeddings  regression  machine-learning  sampling  r  regression  machine-learning  random-forest  ensemble  sampling  unbiased-estimator  proof  estimators  mse  probability  conditional-probability  bayes  anova  missing-data  neural-networks  recommender-system  r  confidence-interval  sample  multiple-imputation  r  time-series  forecasting  mase 

Tôi đang học PCA từ khóa học Coursera của Andrew Ng và các tài liệu khác. Trong bài tập đầu tiên của Stanford NLP cs224n , và trong video bài giảng của Andrew Ng , họ thực hiện phân rã giá trị số ít thay vì phân tách eigenvector của …

29 pca  linear-algebra  svd  eigenvalues  numerics 

Tôi đang tham gia khóa học Machine Learning Stanford trên Coursera. Trong chương về Hồi quy logistic, hàm chi phí là: Sau đó, nó được dẫn xuất ở đây: Tôi đã thử lấy đạo hàm của hàm chi phí nhưng tôi có một thứ hoàn toàn khác. Đạo hàm thu …

29 regression  logistic  gradient-descent  derivative 

Tôi có một ví dụ dưới đây mà tôi đã lấy từ tài liệu sklearn.metrics. Classification_Vport của sklearn. Điều tôi không hiểu là tại sao lại có các giá trị F1, độ chính xác và thu hồi cho mỗi lớp mà tôi tin rằng lớp là nhãn dự đoán? Tôi …

29 machine-learning  python  scikit-learn  precision-recall 

Tôi đang sử dụng gói mạnh mẽ để chạy ước tính glm. Tuy nhiên khi tôi làm điều đó, tôi nhận được lỗi sau: Error in solve.default(crossprod(X, DiagB * X)/nobs, EEq) : system is computationally singular: reciprocal condition number = 1.66807e-16 Điều này có nghĩa là gì / chỉ ra? …

29 r  generalized-linear-model  robust 

Tôi có hai phân loại A: mạng Bayes ngây thơ B: cây (kết nối đơn) mạng Bayes Về độ chính xác và các biện pháp khác, A thực hiện tương đối kém hơn B. Tuy nhiên, khi tôi sử dụng các gói R ROCR và AUC để thực hiện phân …

29 machine-learning  classification  roc  auc  bayesian-network 

Tôi đang cố gắng đưa ra một số liệu để đo lường sự không đồng đều của phân phối cho một thử nghiệm tôi đang chạy. Tôi có một biến ngẫu nhiên nên được phân phối đồng đều trong hầu hết các trường hợp và tôi muốn có thể xác …

28 distributions  variance  random-variable  uniform 

Statistics.com đã công bố một vấn đề trong tuần: Tỷ lệ gian lận bảo hiểm dân cư là 10% (một trong mười yêu cầu là gian lận). Một nhà tư vấn đã đề xuất một hệ thống máy học để xem xét các khiếu nại và phân loại chúng là …

28 probability  bayesian  puzzle 

Tôi đã học được rằng, khi xử lý dữ liệu bằng cách sử dụng phương pháp dựa trên mô hình, bước đầu tiên là mô hình hóa thủ tục dữ liệu dưới dạng mô hình thống kê. Sau đó, bước tiếp theo là phát triển thuật toán học / suy …

28 machine-learning  svm  modeling 

Sự khác biệt giữa ngoại suy và nội suy là gì, và cách chính xác nhất để sử dụng các thuật ngữ này là gì? Ví dụ, tôi đã thấy một tuyên bố trong một bài báo sử dụng phép nội suy như: "Quy trình nội suy hình dạng của …

28 terminology  interpolation  extrapolation 

Theo hỗn hợp của hai phân phối bình thường: https://en.wikipedia.org/wiki/Multimodal_distribution#Mixture_of_two_n normal_distribution "Một hỗn hợp của hai phân phối bình thường có năm tham số để ước tính: hai phương tiện, hai phương sai và tham số trộn. Một hỗn hợp của hai phân phối bình thường có độ lệch chuẩn …

28 bimodal 

Gần đây tôi đọc được rằng một mạng thần kinh tái phát có thể xấp xỉ bất kỳ thuật toán nào. Vì vậy, câu hỏi của tôi là: điều này chính xác có nghĩa là gì và bạn có thể cho tôi một tài liệu tham khảo nơi điều này …

28 references  rnn