Thống kê và dữ liệu lớn

Tôi đang gặp khó khăn để chọn đúng cách để trực quan hóa dữ liệu. Giả sử chúng ta có các hiệu sách bán sách và mỗi cuốn sách có ít nhất một danh mục . Đối với một hiệu sách, nếu chúng ta đếm tất cả các loại sách, …

9 pca  data-visualization  histogram  barplot 

Sự khác biệt giữa nghiên cứu hoạt động và phân tích thống kê là gì?

9 operations-research 

Đơn giản hóa một chút, tôi có khoảng một triệu hồ sơ ghi lại thời gian vào và thời gian thoát của mọi người trong một hệ thống kéo dài khoảng mười năm. Mọi bản ghi đều có thời gian vào, nhưng không phải bản ghi nào cũng có thời …

9 survival  missing-data 

Tôi đã nghe nói rằng rất nhiều số lượng xảy ra trong tự nhiên thường được phân phối. Điều này thường được chứng minh bằng cách sử dụng định lý giới hạn trung tâm, nói rằng khi bạn tính trung bình một số lượng lớn các biến ngẫu nhiên iid, …

9 data-transformation  normality-assumption 

Trong một câu trả lời cho câu hỏi này về việc coi dữ liệu phân loại là liên tục , tỷ lệ tối ưu đã được đề cập. Phương pháp này hoạt động như thế nào và nó được áp dụng như thế nào?

9 categorical-data  data-transformation  optimal-scaling 

Như bạn đã biết, có hai loại xác thực chéo phổ biến là K-Fold và lấy mẫu ngẫu nhiên (như được mô tả trong Wikipedia ). Tuy nhiên, tôi biết rằng một số nhà nghiên cứu đang tạo và xuất bản các bài báo trong đó một cái gì đó …

9 machine-learning  cross-validation 

Cung cấp một cỡ mẫu "N" mà tôi dự định sử dụng để dự báo dữ liệu. Một số cách để chia nhỏ dữ liệu để tôi sử dụng một số cách để thiết lập mô hình và dữ liệu còn lại để xác thực mô hình là gì? Tôi …

9 machine-learning  modeling  sample  validation 

Tôi biết về Cameron và Trivei's Microeconometrics bằng Stata. Các văn bản tốt khác để học Stata là gì?

9 references  stata 

Làm thế nào bạn sẽ giải thích trực quan hóa dữ liệu và tại sao nó quan trọng đối với một giáo dân?

9 data-visualization  intuition 

Những thư viện trực quan nào (lô, đồ thị, ...) bạn sẽ đề xuất sử dụng trong một ứng dụng độc lập (Linux, .Net, Windows, bất cứ thứ gì). Hiệu suất hợp lý cũng sẽ tốt đẹp.

9 data-visualization  software 

Giả sử chúng ta có ma trận dữ liệu , là -by- và vectơ nhãn , là -by-one. Ở đây, mỗi hàng của ma trận là một quan sát và mỗi cột tương ứng với một thứ nguyên / biến. (giả sử )XX\mathbf{X}nnnpppYYYnnnn > pn>pn>p Sau đó, điều gì làm …

9 regression  multiple-regression  terminology  geometry  biplot 

Đây không phải là bài tập về nhà. Đặt XXX là biến ngẫu nhiên. Nếu E[X]=k∈RE[X]=k∈R\mathbb{E}[X] = k \in \mathbb{R} và Var[X]=0Var[X]=0\text{Var}[X] = 0 , liệu nó có tuân theo Pr(X=k)=1Pr(X=k)=1\Pr\left(X = k\right) = 1 không? Theo trực giác, điều này có vẻ rõ ràng, nhưng tôi không chắc làm …

9 probability 

Theo Luật phương sai tổng thể, Var(X)=E(Var(X∣Y))+Var(E(X∣Y))Var⁡(X)=E⁡(Var⁡(X∣Y))+Var⁡(E⁡(X∣Y))\operatorname{Var}(X)=\operatorname{E}(\operatorname{Var}(X\mid Y)) + \operatorname{Var}(\operatorname{E}(X\mid Y)) Khi cố gắng chứng minh, tôi viết Var(X)=E(X−EX)2=E{E[(X−EX)2∣Y]}=E(Var(X∣Y))Var⁡(X)=E⁡(X−E⁡X)2=E⁡{E⁡[(X−E⁡X)2∣Y]}=E⁡(Var⁡(X∣Y)) \begin{equation} \begin{aligned} \operatorname{Var}(X) &= \operatorname{E}(X - \operatorname{E}X)^2 \\ &= \operatorname{E}\left\{\operatorname{E}\left[(X - \operatorname{E}X)^2\mid Y\right]\right\} \\ &= \operatorname{E}(\operatorname{Var}(X\mid Y)) \end{aligned} \end{equation} Có gì sai với nó?

9 variance  conditional-probability  expected-value  conditional-expectation  moments 

Đây bài nói Một PDF được sử dụng để xác định xác suất của biến ngẫu nhiên nằm trong một phạm vi giá trị cụ thể, trái ngược với việc lấy bất kỳ một giá trị nào. Có đúng không đây là bản PDF của bản phân phối chuẩn. φ(x)=12π−−√e−x2/2φ(x)=12πe−x2/2\varphi(x) …

9 distributions  terminology 

Tôi đang đọc và đây là định nghĩa tôi có được từ cuốn sách của DeGroot: Điều đó có nghĩa là các tham số là như nhau? Ví dụ: giả sử X được phân phối lognormally và Y thường được phân phối trong đó Y = log (X). Có phải …

9 normal-distribution  lognormal