Intuition (geometrisch oder anders) von

Betrachten Sie in einer anderen Folge von Intuitionen für Identitäten in der Wahrscheinlichkeit das elementare Identitätsgesetz der Gesamtvarianz

\begin{array}{rcl} V. ein r (X.) & = & E. [V. ein r (X. | Y.)]] + V. ein r (E. [X. | Y.]]) \end{array}

$\begin{eqnarray} \rm{Var}(X) &=&\rm{E}[\rm{Var}(X|Y)] + \rm{Var}(E[X|Y]) \end{eqnarray}$

Es ist eine ~~einfache,~~ unkomplizierte algebraische Manipulation der Definition von Momenten in Summation oder, wie im Wikipedia-Link, über die Manipulation von E und Var.

Aber diese Identität habe ich keine Ahnung, was es bedeutet . Ich nehme an, es bedeutet, dass Sie vermutlich die Varianz einer Variablen mithilfe einer anderen Variablen berechnen könnten, um zu helfen, aber es sieht nicht so aus, als würde es die Dinge vereinfachen oder die Handhabbarkeit verbessern.

Die Wiki-Seite sagt

Die erste Komponente wird als Erwartungswert der Prozessvarianz (EVPV) und die zweite als Varianz des hypothetischen Mittels (VHM) bezeichnet.

Das ist so aufschlussreich wie das Ablesen von Namen sein kann.

Also , was bedeutet es wirklich bedeutet ? Gibt es eine Intuition über die beiden Teile? Benötigen Sie zuerst eine Intuition von ? Eine geometrische Intuition mag nett sein, aber auch eine wortreiche Erklärung, kleine Algebra, würde immens helfen. $E[E[X|Y]] = E[X]$

Gibt es gute lineare Algebra-Interpretationen oder physikalische Interpretationen oder andere, die Einblick in diese Identität geben würden?

variance intuition Mitch
quelle

aber es sieht nicht so aus, als würde es die Dinge vereinfachen oder die Handhabbarkeit verbessern - es ist praktisch in jedem Fall nützlich, in dem es ein Hilfs- , das es einfacher macht, über nachzudenken, als nur über selbst. Nehmen Sie zum Beispiel und ; dann Versuch, dies direkt zu berechnen, wäre viel weniger einfach gewesen.

Y

$Y$

X ∣ Y

$X \mid Y$

X

$X$

$\DeclareMathOperator{\E}{\mathbb E}\DeclareMathOperator{\Var}{Var}$

X ∣ Y \sim N (Y, Y σ^{2})

$X \mid Y \sim \mathcal{N}(Y, Y \sigma^2)$

Y \sim B i n o m i a l (n, p)

$Y \sim \mathrm{Binomial}(n, p)$

\begin{matrix} E. [Var (X. ∣ Y.)]] = E. [Y. σ^{2}]] = n p σ^{2} \\ Var (E. [X. ∣ Y.]]) = Var (Y.) = n p (1 - - p) . \end{matrix}

$\begin{gather}\E[\Var(X \mid Y)] = \E[Y \sigma^2] = n p \sigma^2 \\ \Var(\E[X \mid Y]) = \Var(Y) = n p (1-p).\end{gather}$

Dougal

Verwandte: stats.stackexchange.com/questions/71620/…

Taylor

Antworten:

Um eine einfache Intuition zu erhalten, werden wir mit einer Zwei-Wege-Varianzanalyse vergleichen. Sei wobei die mit der Erwartung Null und der gemeinsamen Varianz , iid sind . $Y_{ij} = \mu_i +\epsilon_{ij}$ $\epsilon_{ij}$ $\sigma^2$ $i=1,\dotsc,k; j=1,\dotsc,n_i$

Dann haben wir die Zersetzung wobei der erste Term auf der rechten Seite die gruppeninterne Varianz misst (und zur Schätzung der gemeinsamen gruppeninternen Varianz), der zweite Term die gruppeninterne Varianz misst und zur Schätzung vonnur unter der Hypothese, dass alleeinen gemeinsamen Wert haben. Andernfalls enthält es eine zusätzliche Komponente, die "Varianz der". Dies hat die gleiche Form wie das Gesetz der totalen Varianz!

\sum_{ich = 1}^{k} \sum_{j = 1}^{n_{ich}} ({Y.}_{ich j} - - \bar{\bar{Y.}})^{2} = \sum_{ich = 1}^{k} \sum_{j = 1}^{n_{ich}} ({Y.}_{ich j} - - \bar{{Y.}_{ich}})^{2} + \sum_{ich = 1}^{k} n_{ich} ((\bar{{Y.}_{ich}} - - \bar{\bar{Y.}})^{2}

$\sum_{i=1}^k\sum_{j=1}^{n_i} (Y_{ij}-\overline{\overline{Y}})^2 = \sum_{i=1}^k\sum_{j=1}^{n_i} (Y_{ij}-\overline{Y_i})^2 + \sum_{i=1}^k n_i((\overline{Y_{i}}-\overline{\overline{Y}})^2$

σ^{2}

$\sigma^2$

σ^{2}

$\sigma^2$

μ_{i}

$\mu_i$

μ_{i}

$\mu_i$

Formal lassen Gruppenzugehörigkeit die Zufallsvariable . Dann erhalten wir und können dies lesen als "Varianz von ist der erwartete Wert der Varianz innerhalb der Gruppe plus die Varianz von Gruppenerwartungen. " Dies entspricht unserer obigen Interpretation der ANOVA-Zerlegung. Bei näherer Betrachtung der Ableitung (die wir hier nicht angegeben haben) können Sie erkennen, dass es sich tatsächlich um eine Version des Satzes von Pythagoras handelt. Für diesen Standpunkt siehe $G$

V. ein r Y. = E. V. ein r (Y. | G) + V. ein r E. (Y. | G)

$Var Y = E Var (Y | G) + Var E (Y | G)$

Y

$Y$ Gesetz der totalen Varianz als Satz von Pythagoras

kjetil b halvorsen
quelle

Mein Mathjax-Hack, um doppelte Overlines zu bekommen, funktioniert nicht sehr gut. Ideen, um es besser zu machen?

kjetil b halvorsen

Doppelüberstrich sieht viel besser mit

als mit

aus irgendeinem Grund:

X

$X$

Y

$Y$

\bar{\bar{X}}

$\overline{\overline{X}}$

Jbowman