Thống kê và dữ liệu lớn

Cụ thể, việc triển khai R của t-SNE trong gói Rtsne có đối số "check_d repeatates" và tài liệu cho thấy rằng "tốt nhất là đảm bảo không có bản sao nào xuất hiện và đặt tùy chọn này thành FALSE, đặc biệt là cho các bộ dữ liệu lớn". …

7 tsne 

Đây là một chút của một câu hỏi lý thuyết. Tôi cũng mới làm quen với phân tích chuỗi thời gian và cố gắng học nhanh. Xin lỗi nếu một số thuật ngữ của tôi bị tắt. Bạn có thể phân loại một cách lỏng lẻo các phương pháp để …

7 time-series  arima  spectral-analysis 

Tôi đang cố gắng để hiểu phân phối . Wikipedia có biểu đồ sau cho hàm mật độ xác suất:χ2χ2\chi^2 Biểu đồ này cho thấy với , PDF sẽ ... vô hạn? Chế độ phân phối được xác định là , vì vậyk = 1k=1 k = 1χ2χ2\chi^2m a x …

7 mathematical-statistics  chi-squared 

Tôi đã đọc đoạn này trong James et al, Giới thiệu về Học thống kê , tr183-184 [1]: Do giá trị trung bình của nhiều đại lượng tương quan cao có phương sai cao hơn so với giá trị trung bình của nhiều đại lượng không tương quan cao, ước …

7 correlation  variance 

Tham số alpha của trung bình di chuyển theo hàm mũ xác định độ mịn mà trung bình áp dụng cho chuỗi thời gian. Theo cách tương tự, kích thước cửa sổ của cửa sổ chuyển động cũng có nghĩa là xác định độ mịn. Có cách nào để điều …

7 exponential-smoothing  moving-average  calibration  moving-window 

Tôi bị mắc kẹt với một vấn đề trong công việc. Ai đó có thể vui lòng giúp tôi cung cấp cho tôi phân phối chung của biến ngẫu nhiên Bernoulli nhưng trong ràng buộc rằng tổng của biến ngẫu nhiên này phải là .nnnnnn111 Bất cứ ai có thể …

7 distributions  joint-distribution  bernoulli-distribution  constraint 

Tôi đang chạy một mô hình ols đa biến trong đó biến phụ thuộc của tôi là Điểm tiêu thụ thực phẩm , một chỉ số được tạo bởi tổng trọng số của các lần xuất hiện tiêu dùng của một số loại thực phẩm nhất định. Mặc dù tôi …

7 mixed-model  heteroscedasticity  normality-assumption  multivariate-regression  quantile-regression 

Khi chúng ta phải xác định phân phối số lượng rời rạc, chúng ta thường sử dụng: Phân phối Poisson, nếu có nghĩa là = phương sai Phân phối nhị thức, nếu có nghĩa là> phương sai Phân phối nhị thức âm, nếu có nghĩa là <phương sai Câu hỏi …

7 normal-distribution  binomial  poisson-distribution  negative-binomial  count-data 

Tôi đang nghiên cứu một vấn đề trong đó tôi có nhiều cặp con đực hiện đang sống imà mỗi nithế hệ có tổ tiên được cho là thế hệ trước (dựa trên bằng chứng phả hệ) và nơi tôi có thông tin về việc có sự không phù hợp …

7 r  confidence-interval  maximum-likelihood  bootstrap  delta-method 

Để khám phá cách LASSOhồi quy hoạt động, tôi đã viết một đoạn mã nhỏ để tối ưu hóa LASSOhồi quy bằng cách chọn tham số alpha tốt nhất. Tôi không thể hiểu tại sao LASSOhồi quy lại cho tôi kết quả không ổn định như vậy đối với tham …

7 r  regression  python  lasso  penalized 

tôi đang tham gia vào một cuộc trò chuyện trong đó tôi đã tạo ra một mô hình thực hiện 70% AUC trên tập tàu và 70% AUC trên tập kiểm tra tạm dừng. Người tham gia khác đã tạo ra một mô hình thực hiện 96% AUC trên tập …

7 validation  overfitting  model-comparison  auc  train 

Những gì tôi muốn làm là xây dựng GLMM để đánh giá lựa chọn tài nguyên và tôi có một bộ biến (một số biểu thị khoảng cách và một số khác đại diện cho% diện tích đất). Tôi có thể kiểm tra mối tương quan giữa các biến trước …

7 correlation  glmm  standardization  ecology 

Trong nhiều cài đặt, chúng tôi quan tâm đến việc ước tính một mô hình với biến phụ thuộc phân đoạn. Ví dụ, Papke & Wooldrige (1996) http://faculty.smu.edu/millimet/classes/eco6375/papers/papke%20wooldridge%201996.pdf xem xét 401 tỷ lệ tham gia kế hoạch (k), nơi tỷ lệ được định nghĩa là . Các tác giả sau …

7 count-data 

Tôi đã đọc bài viết chuẩn hóa hàng loạt (BN) (1) và nó nói: Đối với điều này, khi mạng đã được đào tạo, chúng tôi sử dụng chuẩn hóa bằng cách sử dụng dân số , thay vì mini -batch, thống kê.x^=x−E[x]Var[x]+ϵ−−−−−−−−√x^=x−E[x]Var[x]+ϵ\hat{x} = \frac{x - E[x]}{ \sqrt{Var[x] + \epsilon}} …

7 machine-learning  neural-networks  deep-learning  conv-neural-network  batch-normalization 

Các tỷ lệ (ví dụ = / ) thường được sử dụng (ví dụ: thay đổi lần trong biểu hiện mRNA hoặc protein, chỉ số khối cơ thể [BMI], v.v.). Nhiều người khuyên rằng các biến được mã hóa theo tỷ lệ (ví dụ: thay đổi lần) nên được chuyển …

7 data-transformation  logarithm  ratio