Thống kê và dữ liệu lớn

Tôi hiểu rằng đã đưa ra một tập hợp các quan sát độc lập các Maximum Likelihood Estimator (hay tương đương, MAP với TV / thống nhất trước đó) xác định các thông số \ mathbf {θ} sản xuất phân phối model p_ {model} \ bên trái (\, \ cdot …

12 maximum-likelihood  deep-learning  cross-entropy 

Đã hơn 2 năm tôi làm việc trên các chuỗi thời gian khác nhau. Tôi đã đọc trên nhiều bài báo rằng ACF được sử dụng để xác định thứ tự của thuật ngữ MA và PACF cho AR. Có một quy tắc ngón tay cái là đối với MA, …

12 time-series  arima  autoregressive  moving-average 

Những vấn đề đầu vào tuần tự phù hợp nhất cho từng vấn đề? Liệu kích thước đầu vào xác định cái nào phù hợp hơn? Các vấn đề đòi hỏi "bộ nhớ dài hơn" có phù hợp hơn với LSTM RNN không, trong khi các vấn đề với mô …

12 time-series  neural-networks  hidden-markov-model  rnn 

Cấu trúc liên kết của mô hình Google Inception có thể được tìm thấy ở đây: Google Inception Netowrk Tôi nhận thấy rằng có 3 lớp softmax trong mô hình này (# 154, # 152, # 145) và 2 trong số đó là một lối thoát sớm của mô hình …

12 deep-learning  conv-neural-network 

Trong những tình huống nào chúng ta nên sử dụng t-SNE (ngoài trực quan hóa dữ liệu)? T-SNE được sử dụng để giảm kích thước. Câu trả lời cho câu hỏi này cho thấy rằng t-SNE chỉ nên được sử dụng để trực quan hóa và chúng ta không nên …

12 data-visualization  dimensionality-reduction  tsne 

Trong Nhận dạng mẫu và Học máy của Giám mục, tôi đã đọc phần sau, ngay sau khi mật độ xác suất được giới thiệu:p(x∈(a,b))=∫bap(x)dxp(x∈(a,b))=∫abp(x)dxp(x\in(a,b))=\int_a^bp(x)\textrm{d}x Dưới sự thay đổi phi tuyến của biến, mật độ xác suất biến đổi khác với hàm đơn giản, do yếu tố Jacobian. Chẳng hạn, …

12 machine-learning  probability 

Tôi đã nhận thấy rằng khi xây dựng các mô hình hồi quy rừng ngẫu nhiên, ít nhất là trong R, giá trị dự đoán không bao giờ vượt quá giá trị tối đa của biến mục tiêu được thấy trong dữ liệu huấn luyện. Ví dụ, xem mã dưới …

12 r  random-forest 

Tôi sẽ sử dụng thử nghiệm Kolmogorov-Smirnov để kiểm tra tính quy phạm của MYDATA trong R. Đây là một ví dụ về những gì tôi làm ks.test(MYDATA,"pnorm",mean(MYDATA),sd(MYDATA)) Đây là kết quả mà R mang lại cho tôi: data: MYDATA D = 0.13527, p-value = 0.1721 alternative hypothesis: two-sided Warning …

12 kolmogorov-smirnov  ties 

Tôi đang đọc bài viết Lỗi lan truyền theo phương pháp Monte Carlo trong tính toán địa hóa, Anderson (1976) và có điều gì đó tôi không hiểu lắm. Xem xét một số dữ liệu đo và một chương trình rằng các quá trình và quay trở lại một giá …

12 bootstrap  monte-carlo  error 

LASSO và LASSO thích ứng là hai thứ khác nhau, phải không? (Đối với tôi, các hình phạt trông khác nhau, nhưng tôi chỉ kiểm tra xem tôi có bỏ sót điều gì không.) Khi bạn thường nói về lưới đàn hồi, trường hợp đặc biệt LASSO hay LASSO thích …

12 lasso  glmnet  elastic-net  oracle 

Tôi muốn lấy mẫu từ mật độ đơn biến nhưng tôi chỉ biết mối quan hệ:fXfXf_X fX(x)=∫fX|Y(x|y)fY(y)dy.fX(x)=∫fX|Y(x|y)fY(y)dy.f_X(x) = \int f_{X\vert Y}(x\vert y)f_Y(y) dy. Tôi muốn tránh việc sử dụng MCMC (trực tiếp trên biểu diễn tích phân) và, vì và rất dễ lấy mẫu, tôi đã nghĩ đến việc sử …

12 sampling  conditional-probability  monte-carlo  marginal 

Tôi đã đọc về các số liệu hồi quy trong hướng dẫn tìm hiểu python và mặc dù mỗi trong số chúng có công thức riêng, tôi không thể biết được sự khác biệt giữa R2R2R^2 và điểm phương sai là gì và do đó khi nào nên sử dụng …

12 regression  variance  scikit-learn  r-squared  model-evaluation 

Có một số thống kê tóm tắt. Khi bạn muốn mô tả mức độ lây lan của phân phối, bạn có thể sử dụng ví dụ độ lệch chuẩn hoặc hệ số Gini . Tôi biết rằng độ lệch chuẩn dựa trên xu hướng trung tâm, nghĩa là độ lệch …

12 standard-deviation  descriptive-statistics  gini 

Đây là nỗ lực đầu tiên của tôi cho ai đó đến từ trại thường xuyên thực hiện phân tích dữ liệu Bayes. Tôi đã đọc một số hướng dẫn và một vài chương từ Phân tích dữ liệu Bayes của A. Gelman. Như ví dụ phân tích dữ liệu …

12 bayesian  pymc 

Tôi bắt gặp hệ số Dice về độ tương tự âm lượng ( https://en.wikipedia.org/wiki/S%C3%B8rensen%E2%80%93Dice_coffic ) và độ chính xác ( https://en.wikipedia.org/wiki/Accuracy_and_precision ). Dường như với tôi rằng hai biện pháp này là như nhau. Có suy nghĩ gì không?

12 descriptive-statistics  roc  accuracy  precision-recall  auc