Thống kê và dữ liệu lớn

Tôi biết rằng nếu trung bình và giá trị trung bình xấp xỉ bằng nhau thì điều này có nghĩa là có sự phân bố đối xứng nhưng trong trường hợp cụ thể này tôi không chắc chắn. Giá trị trung bình và trung bình khá gần nhau (chỉ chênh …

23 distributions  mean  skewness  median  qq-plot 

Trong bài báo nổi tiếng năm 1938 (" Phân phối mẫu lớn về tỷ lệ khả năng kiểm tra các giả thuyết tổng hợp ", Biên niên sử Thống kê toán học, 9: 60-62), Samuel Wilks đã đưa ra phân phối tiệm cận của (tỷ lệ khả năng ghi nhật …

23 hypothesis-testing  model-selection  likelihood-ratio  asymptotics  misspecification 

Tôi đã tìm thấy hai định nghĩa trong tài liệu về thời gian tự tương quan của chuỗi thời gian đứng yên yếu: τmột= 1 + 2 Σk = 1∞ρkđấu vớiτb= 1 + 2 Σk = 1∞| ρk|τmột= =1+2Σk= =1∞ρkđấu vớiτb= =1+2Σk= =1∞|ρk| \tau_a = 1+2\sum_{k=1}^\infty \rho_k \quad \text{versus} \quad …

23 r  time-series  correlation 

tối đa ( 0 , 1 - ytôi( w⊺xtôi+ b ) )tối đa(0,1-ytôi(w⊺xtôi+b))\max(0,1-y_i(w^\intercal x_i+b))12∥ w ∥2+ CΣtôitối đa ( 0 , 1 - ytôi( w⊺xtôi+ b ) )12‖w‖2+CΣtôitối đa(0,1-ytôi(w⊺xtôi+b)) \frac{1}{2}\|w\|^2+C\sum_i\max(0,1-y_i(w^\intercal x_i+b)) ∥ w ∥2‖w‖2\|w\|^2tối đa ( 0,1 - ytôi( w⊺xtôi+ b ) )tối đa(0,1-ytôi(w⊺xtôi+b))\max(0,1-y_i(w^\intercal x_i+b)) Tuy nhiên, đối với SVM …

23 svm  loss-functions 

Khi tôi Google cho "fisher" "fiducial" ... Tôi chắc chắn nhận được rất nhiều lượt truy cập, nhưng tất cả những bài tôi đã theo dõi hoàn toàn vượt quá tầm hiểu biết của tôi. Tất cả các hit này dường như có một điểm chung: tất cả chúng đều …

23 bayesian  inference  terminology  fiducial  ronald-fisher 

Tôi đã sử dụng nguyên tắc entropy tối đa để biện minh cho việc sử dụng một số bản phân phối trong các cài đặt khác nhau; tuy nhiên, tôi vẫn chưa thể xây dựng một thống kê, trái ngược với lý thuyết thông tin, giải thích về entropy tối …

23 distributions  entropy  intuition  information-theory  maximum-entropy 

Tôi có một bộ dữ liệu chứa tối đa 150 ví dụ (được chia thành đào tạo & kiểm tra), với nhiều tính năng (cao hơn 1000). Tôi cần so sánh các phân loại và các phương pháp lựa chọn tính năng hoạt động tốt trên dữ liệu. Vì vậy, …

23 classification  feature-selection 

Tôi đã đọc rất nhiều tài liệu nghiên cứu về phân loại tình cảm và các chủ đề liên quan. Hầu hết trong số họ sử dụng xác nhận chéo 10 lần để đào tạo và kiểm tra phân loại. Điều đó có nghĩa là không có kiểm tra / …

23 classification  cross-validation 

Câu hỏi dành cho người mới bắt đầu: Tôi muốn kiểm tra xem hai bộ dữ liệu rời rạc có đến từ cùng một phân phối hay không. Một thử nghiệm Kolmogorov-Smirnov đã được đề xuất cho tôi. Conover (Số liệu thống kê phi thực tế , 3d) dường như …

23 r  goodness-of-fit  discrete-data  kolmogorov-smirnov 

Tôi có một vấn đề hồi quy đa đầu ra với tính năng đầu vào và đầu ra. Các đầu ra có cấu trúc tương quan phức tạp, phi tuyến tính.dxdxd_xdydyd_y Tôi muốn sử dụng rừng ngẫu nhiên để thực hiện hồi quy. Theo như tôi có thể nói, các …

23 regression  multivariate-analysis  random-forest 

Tôi đã sử dụng prcomp()chức năng để thực hiện PCA (phân tích thành phần chính) trong R. Tuy nhiên, có một lỗi trong chức năng đó khiến na.actiontham số không hoạt động. Tôi đã yêu cầu giúp đỡ về stackoverflow ; Hai người dùng ở đó đưa ra hai cách …

23 r  pca  missing-data  data-imputation 

Tôi đang tìm kiếm các ví dụ về cách diễn giải các ước tính AIC (tiêu chí thông tin Akaike) và BIC (tiêu chí thông tin Bayes). Sự khác biệt tiêu cực giữa các BIC có thể được hiểu là tỷ lệ cược sau của một mô hình so với …

23 interpretation  aic  bic 

Tôi có dữ liệu với nhiều tính năng tương quan và tôi muốn bắt đầu bằng cách giảm các tính năng có chức năng cơ bản trơn tru, trước khi chạy LDA. Tôi đang cố gắng sử dụng các khối vuông tự nhiên trong splinesgói với nschức năng. Làm thế …

23 r  splines 

(Tôi là người mới về thống kê. Tôi là nhà toán học và lập trình viên và tôi đang cố gắng xây dựng một cái gì đó giống như bộ lọc thư rác Bayes ngây thơ.) Tôi đã nhận thấy ở nhiều nơi rằng mọi người có xu hướng phá …

23 bayesian 

Tôi đã có một thuật toán MCMC cụ thể mà tôi muốn chuyển sang C / C ++. Phần lớn tính toán đắt tiền đã có trong C qua Cython, nhưng tôi muốn có toàn bộ bộ lấy mẫu được viết bằng ngôn ngữ được biên dịch để tôi có …

23 mcmc  software  c++  computing