Thống kê và dữ liệu lớn

Chúng tôi đang xử lý phân phối hợp lý trong một khóa học tài chính và sách giáo khoa của tôi chỉ nói rằng điều này là đúng, điều mà tôi thấy khó chịu vì nền tảng toán học của tôi không mạnh lắm nhưng tôi muốn có trực giác. …

13 distributions  expected-value  lognormal 

Vì vậy, chúng ta biết rằng tìm kiếm ngẫu nhiên hoạt động tốt hơn tìm kiếm lưới, nhưng một cách tiếp cận gần đây hơn là tối ưu hóa Bayes (sử dụng các quy trình gaussian). Tôi đã tìm kiếm một so sánh giữa hai, và không tìm thấy gì. …

13 bayesian  hyperparameter 

Tôi bối rối giữa hai thuật ngữ "hàm tạo xác suất" và "hàm tạo mô men". Làm thế nào để các điều khoản khác nhau?

13 probability  distributions  terminology  intuition  mgf 

Tôi đã đọc câu hỏi này liên quan đến hồi quy quy mô lớn ( liên kết ) trong đó whuber chỉ ra một điểm thú vị như sau: "Hầu như bất kỳ kiểm tra thống kê nào bạn chạy sẽ mạnh đến mức gần như chắc chắn xác định …

13 regression  statistical-significance 

Tôi muốn biết bao nhiêu học máy đòi hỏi tối ưu hóa. Từ những gì tôi đã nghe thống kê là một chủ đề toán học quan trọng cho những người làm việc với máy học. Tương tự như thế nào là quan trọng đối với một người làm việc …

13 machine-learning  optimization 

Đã đóng cửa. Câu hỏi này không đúng chủ đề . Nó hiện không chấp nhận câu trả lời. Bạn muốn cải thiện câu hỏi này? Cập nhật câu hỏi để nó thuộc chủ đề cho Xác thực chéo. Đóng cửa 2 năm trước . Dòng này trả về 4 …

13 python  pandas 

Chủ nhân của tôi hiện đang thực hiện một cuộc khảo sát trên toàn công ty về thái độ đối với văn phòng, ví dụ như Tình cảm. Trước đây, họ đã mở cuộc khảo sát cho tất cả các lĩnh vực kinh doanh (Giả sử 10 phòng ban rất …

13 survey  survey-sampling 

Tôi cảm thấy thật ngớ ngẩn khi hỏi một câu hỏi cơ bản như vậy nhưng rồi đây: Nếu tôi có một biến ngẫu nhiên XXX có thể lấy các giá trị 000 và 111 , với P(X=1)=pP(X=1)=pP(X=1) = p vàP(X=0)=1−pP(X=0)=1−pP(X=0) = 1-p , thì nếu tôi rút ra mẫu …

13 variance  binomial 

Tôi đã bắt gặp một bằng chứng cho một trong các thuộc tính của mô hình ARCH nói rằng nếu , thì là văn phòng phẩm iff \ sum_ {i = 1} ^ pb_i &lt;1 trong đó mô hình ARCH là:E(X2t)&lt;∞E(Xt2)&lt;∞\mathbb{E}(X_t^2) < \infty{Xt}{Xt}\{X_t\}∑pi=1bi&lt;1∑i=1pbi&lt;1\sum_{i=1}^pb_i < 1 Xt=σtϵtXt=σtϵtX_t = \sigma_t\epsilon_t σ2t=b0+b1X2t−1+...bpX2t−pσt2=b0+b1Xt−12+...bpXt−p2\sigma_t^2 = …

13 mathematical-statistics  stationarity  garch 

Một chỉ tiêu L1L1L_1 là duy nhất (ít nhất là một phần) vì p=1p=1p=1 nằm ở ranh giới giữa không lồi và lồi. Một chỉ tiêu L1L1L_1 là chỉ tiêu lồi 'thưa thớt nhất' (phải không?). Tôi hiểu rằng chỉ tiêu Euclide p=2p=2p=2 có nguồn gốc từ hình học và …

13 regression  regularization  sparse 

Như tôi chắc chắn mọi người ở đây đều đã biết, bản PDF của bản phân phối Beta X∼B(a,b)X∼B(a,b)X \sim B(a,b) được cung cấp bởi f(x)=1B(a,b)xa−1(1−x)b−1f(x)=1B(a,b)xa−1(1−x)b−1f(x) = \frac{1}{B(a,b)}x^{a-1}(1-x)^{b-1} Tôi đã săn lùng khắp nơi để tìm lời giải thích về nguồn gốc của công thức này, nhưng tôi không thể …

13 probability  mathematical-statistics  pdf  beta-distribution  history 

Nói rằng chúng tôi có một vấn đề phân loại nhị phân với các tính năng chủ yếu là phân loại. Chúng tôi sử dụng một số mô hình phi tuyến tính (ví dụ XGBoost hoặc Random Forests) để tìm hiểu nó. Người ta vẫn nên quan tâm đến đa …

13 classification  random-forest  multicollinearity  xgboost 

Tôi biết rằng trong hồi quy tuyến tính, biến trả lời phải liên tục nhưng tại sao lại như vậy? Tôi dường như không thể tìm thấy bất cứ điều gì trực tuyến giải thích tại sao tôi không thể sử dụng dữ liệu rời rạc cho biến phản hồi.

13 regression  linear 

Trong bài viết năm 2015 của DeepMind về học tập củng cố sâu, đã nói rằng "Những nỗ lực trước đây để kết hợp RL với các mạng thần kinh đã thất bại phần lớn do học tập không ổn định". Bài báo sau đó liệt kê một số nguyên …

13 machine-learning  neural-networks  deep-learning  reinforcement-learning 

Tôi có dữ liệu thô có khoảng 20 cột (20 tính năng). Mười trong số đó là dữ liệu liên tục và 10 trong số đó là phân loại. Một số dữ liệu phân loại có thể có 50 giá trị khác nhau (Hoa Kỳ). Sau khi tôi xử lý …

13 machine-learning  neural-networks  tensorflow  data-preprocessing  theano