Thống kê và dữ liệu lớn

Tôi có hai hàm mật độ xác suất của phân phối bình thường: f1(x1|μ1,σ1)=1σ12π−−√e−(x−μ1)22σ21f1(x1|μ1,σ1)=1σ12πe−(x−μ1)22σ12f_1(x_1 \; | \; \mu_1, \sigma_1) = \frac{1}{\sigma_1\sqrt{2\pi} } \; e^{ -\frac{(x-\mu_1)^2}{2\sigma_1^2} } và f2(x2|μ2,σ2)=1σ22π−−√e−(x−μ2)22σ22f2(x2|μ2,σ2)=1σ22πe−(x−μ2)22σ22f_2(x_2 \; | \; \mu_2, \sigma_2) = \frac{1}{\sigma_2\sqrt{2\pi} } \; e^{ -\frac{(x-\mu_2)^2}{2\sigma_2^2} } Tôi đang tìm hàm mật độ xác suất của khoảng …

20 distributions  normal-distribution  distance 

Tôi không hiểu chính xác ý nghĩa của kích thước nút. Tôi biết nút quyết định là gì, nhưng không phải kích thước nút là gì.

20 machine-learning  random-forest  bagging 

Tôi đọc từ đó rằng lỗi tiêu chuẩn của phương sai mẫu là SES2= 2 σ4N- 1------√SEs2=2σ4N−1SE_{s^2} = \sqrt{\frac{2 \sigma^4}{N-1}} Các lỗi tiêu chuẩn của độ lệch chuẩn mẫu là gì? Tôi muốn được cám dỗ để đoán và nói rằng nhưng tôi không chắc.SES= SES2----√SEs=SEs2SE_{s} = \sqrt{SE_{s^2}}

20 sampling  standard-deviation  standard-error 

Tôi đang tham gia khóa học của Andrew Ng về Machine Learning thông qua Coursera . Đối với các phương trình, siêu ký tự được sử dụng thay vì các chỉ số. Ví dụ: trong phương trình sau được sử dụng thay cho x i :x(i)x(i)x^{(i)}xixix_i J(θ0,θ1)=12m∑i=1m(hθ(x(i))−y(i))2J(θ0,θ1)=12m∑i=1m(hθ(x(i))−y(i))2J(\theta_0, \theta_1) = \frac{1}{2m} …

20 machine-learning  notation 

Xem câu hỏi này trên Math SE . Truyện ngắn: Tôi đã đọc Các yếu tố của học thống kê và cảm thấy thất vọng khi tôi cố gắng xác minh một số kết quả, ví dụ: được đưa ra sau đó I đang tìm kiếm một cuốn sách tính …

20 references  matrix  matrix-calculus 

Có nhiều kỹ thuật trong thống kê sinh thái để phân tích dữ liệu thăm dò dữ liệu đa chiều. Chúng được gọi là kỹ thuật 'phong chức'. Nhiều người giống nhau hoặc liên quan chặt chẽ đến các kỹ thuật phổ biến ở những nơi khác trong thống kê. …

20 pca  eda  ecology  correspondence-analysis 

Tôi đã xem rất nhiều video hướng dẫn và chúng trông giống nhau. Ví dụ này: https://www.youtube.com/watch?v=ip4iSMRW5X4 Họ giải thích các trạng thái, hành động và xác suất là tốt. Người đó giải thích nó ổn, nhưng tôi dường như không thể hiểu được nó sẽ được sử dụng trong …

20 markov-process 

Nghịch lý của Stein cho thấy rằng khi ước tính ba hoặc nhiều tham số đồng thời, thì tồn tại các ước tính kết hợp chính xác hơn trung bình (nghĩa là có lỗi bình phương trung bình dự kiến ​​thấp hơn) so với bất kỳ phương pháp nào xử …

20 paradox  steins-phenomenon 

Tôi có một mạng lưới thần kinh được thiết lập để dự đoán một cái gì đó trong đó biến đầu ra là thứ tự. Tôi sẽ mô tả bên dưới bằng ba kết quả đầu ra có thể A <B <C. Một cách khá rõ ràng là làm thế …

20 neural-networks  ordinal-data  softmax 

Tôi có một câu hỏi liên quan đến việc cần sử dụng các phương pháp lựa chọn tính năng (Rừng ngẫu nhiên có giá trị quan trọng hoặc phương pháp lựa chọn tính năng Univariate, v.v.) trước khi chạy thuật toán học thống kê. Chúng tôi biết để tránh bị …

20 regression  machine-learning  feature-selection  lasso  regularization 

Tại sao trong "Phương pháp của các khoảnh khắc", chúng ta đánh đồng các khoảnh khắc mẫu với các khoảnh khắc dân số để tìm công cụ ước tính điểm? Đâu là logic đằng sau này?

20 intuition  method-of-moments 

Tôi đã rất ấn tượng với kết quả trong bài báo " Các đại diện phân phát về câu và tài liệu " của ICML 2014 của Le và Mikolov. Kỹ thuật mà họ mô tả, được gọi là "vectơ đoạn", học các biểu diễn không được giám sát của …

20 text-mining  natural-language  word-embeddings  sentiment-analysis  reproducible-research 

Tôi hiểu rằng sự khác biệt giữa chúng có liên quan đến việc biến nhóm trong mô hình được ước tính là hiệu ứng cố định hay ngẫu nhiên, nhưng tôi không rõ tại sao chúng không giống nhau (nếu chúng không giống nhau). Tôi đặc biệt quan tâm đến …

20 mixed-model  blue  blup  small-area-estimation 

Tôi biết rằng việc thực hiện điều chỉnh siêu tham số bên ngoài xác thực chéo có thể dẫn đến các ước tính cao về tính hợp lệ bên ngoài, bởi vì tập dữ liệu mà bạn sử dụng để đo hiệu suất là giống như bạn đã sử dụng …

20 cross-validation  validation  hyperparameter 

Sau đây là các lô acf và pacf của một chuỗi dữ liệu hàng tháng. Cốt truyện thứ hai là acf với ci.type = 'ma': Sự tồn tại của các giá trị cao trong cốt truyện acf có thể đại diện cho một xu hướng tích cực dài hạn. Câu …

20 time-series