Hellingerabstand

Der Hellingerabstand, auch Hellingermetrik genannt, ist eine Metrik für Wahrscheinlichkeitsmaße, die sich durch Wahrscheinlichkeitsdichten darstellen. Er steht im engen Zusammenhang mit dem Totalvariationsabstand und erlaubt beispielsweise, aufgrund des Abstandes zweier Wahrscheinlichkeitsmaße Rückschlüsse zu ziehen, ob diese singulär zueinander sind.

Er wurde 1909 von Ernst Hellinger im Rahmen der Funktionalanalysis eingeführt.

Definition

Gegeben seien zwei Wahrscheinlichkeitsmaße $P_1$ und $P_2$ auf dem Ereignisraum $(X,𝒜)$, die beide absolut stetig bezüglich eines σ-endlichen Maßes $\mu$ sind und somit die Dichtefunktionen $f_1$ und $f_2$ bezüglich des Maßes $\mu$ haben. Der Hellingerabstand ist dann definiert als

$H(P_1,P_2)={(\frac{1}{2}\underset{X}{\int }|\sqrt{f_1}-\sqrt{f_2}{|}^2\mathrm{d}\mu )}^{\frac{1}{2}}$.

Eigenschaften

• Es ist stets $H(P_1,P_2)\in [0,1]$.
• Es ist $H(P_1,P_2)=1$ genau dann, wenn $P_1\perp P_2$, also wenn die Wahrscheinlichkeitsmaße singulär zueinander sind.
• Es ist $H(P_1,P_2)=0$ genau dann, wenn $P_1=P_2$.
• Für Produkte von Wahrscheinlichkeitsmaßen gilt

$1-H^2(\underset{i=1}{\overset{n}{⨂}}{P}_i,\underset{i=1}{\overset{n}{⨂}}{Q}_i)=\prod _{i=1}^n(1-H^2(P_i,Q_i))$.

Daraus folgt dann für Produktmaße

$1-H^2(P^{\otimes n},Q^{\otimes n})=(1-H^2(P,Q){)}^n$.

Also sind Produktmaße asymptotisch immer singulär oder stimmen überein.

• Bezeichnet $\Vert \cdot {\Vert }_{TV}$ die Totalvariationsnorm, so gilt

$H^2(P_1,P_2)\le \frac{1}{2}\Vert P_1-P_2{\Vert }_{TV}\le \sqrt{2}H(P_1,P_2)$.

• Totalvariationsnorm und Hellingerabstand sind äquivalent zueinander, sie erzeugen also dieselbe Topologie.

Literatur

• Vorlage:Literatur