Thống kê và dữ liệu lớn

Giả sử, tôi có một trình phân loại (Nó có thể là bất kỳ trình phân loại tiêu chuẩn nào như cây quyết định, rừng ngẫu nhiên, hồi quy logistic .. vv) để phát hiện gian lận bằng cách sử dụng mã dưới đây library(randomForest) rfFit = randomForest(Y ~ ., …

11 classification  supervised-learning 

Cách chính xác để xác định sự khác biệt trong mô hình khác biệt với dữ liệu bảng cấp độ cá nhân là gì? Đây là thiết lập: Giả sử rằng tôi có dữ liệu bảng cấp độ cá nhân được nhúng trong các thành phố trong nhiều năm và …

11 econometrics  panel-data  fixed-effects-model  difference-in-difference 

Prof của chúng tôi không đi sâu vào toán học hay thậm chí là biểu diễn hình học của hồi quy tuyến tính đa biến và điều này làm tôi hơi bối rối. Một mặt, nó vẫn được gọi là hồi quy tuyến tính , thậm chí ở các chiều …

11 multiple-regression  high-dimensional 

Tôi đã có một dữ liệu nhu cầu nửa giờ, đó là một chuỗi thời gian nhiều mùa. Tôi đã sử dụng tbatstrong forecastgói vào R, và nhận được kết quả như thế này: TBATS(1, {5,4}, 0.838, {<48,6>, <336,6>, <17520,5>}) Điều đó có nghĩa là sê-ri không nhất thiết phải …

11 r  time-series  diagnostic  multiple-seasonalities  tbats 

Tôi đang tìm kiếm một mô hình giữa dự trữ năng lượng và thời tiết. Tôi có giá của MWatt được mua giữa các quốc gia Châu Âu và rất nhiều giá trị về thời tiết (tệp Grib). Mỗi giờ trong khoảng thời gian 5 năm (2011-2015). Giá / ngày …

11 time-series  forecasting  predictive-models  modeling  large-data 

Tôi đã tự hỏi nếu có bất kỳ kỹ thuật máy học (không giám sát) để mô hình hóa dữ liệu theo chiều dọc? Tôi đã luôn sử dụng các mô hình hiệu ứng hỗn hợp (chủ yếu là phi tuyến tính) nhưng tôi tự hỏi liệu có cách nào …

11 machine-learning  mixed-model 

Tôi sẽ hỏi một câu hỏi liên quan đến cái này . Tôi tìm thấy một ví dụ về cách viết chức năng mất tùy chỉnh cho xgboost tại đây : loglossobj <- function(preds, dtrain) { # dtrain is the internal format of the training data # We extract the …

11 r  machine-learning  gradient-descent  boosting  loss-functions 

Tôi đã tham gia một khóa học ML trước đây, nhưng bây giờ tôi đang làm việc với các dự án liên quan đến ML trong công việc của mình, tôi đang phải vật lộn khá nhiều để thực sự áp dụng nó. Tôi chắc chắn những thứ tôi đang …

11 machine-learning  references  train  application 

Có phải mỗi ngụ ý khác? Nếu không, cái này có ngụ ý cái kia không? Tại sao tại sao không? Vấn đề này được đưa ra để trả lời một bình luận về một câu trả lời tôi đã đăng ở đây . Mặc dù google tìm kiếm các …

11 mathematical-statistics  bias  unbiased-estimator  estimators  consistency 

Tôi đã đọc bài viết chuẩn hóa hàng loạt [1] và nó có một phần trong đó là một ví dụ, cố gắng chỉ ra tại sao việc chuẩn hóa phải được thực hiện cẩn thận. Thành thật mà nói, tôi không thể hiểu được ví dụ này hoạt động …

11 machine-learning  neural-networks  conv-neural-network 

Gần đây, chúng ta đã thấy sự xuất hiện của Mạng lưới thần kinh dư, trong đó, mỗi lớp bao gồm một mô đun tính toán và một kết nối phím tắt bảo tồn đầu vào của lớp như đầu ra của lớp thứ i thể hiện: Mạng cho phép …

11 machine-learning  neural-networks  deep-learning  gradient-descent  residual-networks 

Tôi đang sử dụng NN chuyển tiếp. Tôi hiểu khái niệm này, nhưng câu hỏi của tôi là về trọng lượng. Làm thế nào bạn có thể giải thích chúng, tức là chúng đại diện cho cái gì hoặc làm thế nào chúng có thể bị phá hủy (chỉ bao …

11 neural-networks  weights 

Tôi đang cố gắng thực hiện lựa chọn mô hình trên một số dự đoán ứng viên bằng LASSO với kết quả liên tục. Mục tiêu là chọn mô hình tối ưu với hiệu suất dự đoán tốt nhất, thường có thể được thực hiện bằng xác thực chéo K-Fold …

11 cross-validation  survey  lasso  glmnet 

Tôi đang cố gắng để hiểu và biết những gì cần báo cáo từ phân tích của tôi về một số dữ liệu bằng cách sử dụng mô hình tính trung bình trong R. Tôi đang sử dụng tập lệnh sau để phân tích hiệu quả của phương pháp đo …

11 r  model-averaging 

Quá trình Gaussian đã được sử dụng rộng rãi, đặc biệt là trong thi đua. Được biết, nhu cầu tính toán rất cao ( ).0 ( n3)0(n3)0(n^3) Điều gì làm cho chúng phổ biến? Lợi thế chính và ẩn của họ là gì? Tại sao chúng được sử dụng thay …

11 gaussian-process