Begründung für Konjugat vor?

12

Gibt es neben der Benutzerfreundlichkeit eine erkenntnistheoretische Rechtfertigung (mathematisch, philosophisch, heuristisch usw.) für die Verwendung von konjugierten Prioren? Oder ist es meist nur so, dass es normalerweise eine gute Annäherung ist und die Dinge viel einfacher macht?

anonym
quelle
Tatsächlich müssen Sie in vielen Fällen keine konjugierten Priors verwenden, wenn Sie MCMC verwenden, z. B. stats.stackexchange.com/questions/126265/…
Tim
2
Die Verwendung von konjugierten Priors ist nicht einschränkend, da auch diskrete Gemische von konjugierten Priors konjugiert sind und Sie daher viel Flexibilität beim Einrichten eines konjugierten Priors haben.
Jaradniemi

Antworten:

16

Vielleicht erfüllen konjugierte Prioritäten die Kategorie "heuristische" Rechtfertigung und sind unter anderem wegen der "fiktiven Stichprobeninterpretation" nützlich.

π(θ)=Γ(α0+β0)Γ(α0)Γ(β0)θα01(1θ)β01
n_=α0+β02n_α01
π(θ)=Γ(α0+β0)Γ(α0)Γ(β0)θα0-1(1-θ)n_-(α0-1)f(y|θ),
wo f(y|θ) ist die Wahrscheinlichkeitsfunktion.

Dies kann Ihnen einige Hinweise geben, wie Sie die vorherigen Parameter auswählen können: In einigen Fällen können Sie beispielsweise sagen, dass Sie hinsichtlich der Fairness einer Münze so sicher sind, als hätten Sie sie beispielsweise 20 Mal geworfen und gesehen 10 Köpfe. Das ist natürlich eine andere Stärke des vorherigen Glaubens, als wenn Sie sich hinsichtlich seiner Fairness so sicher sind, als hätten Sie es 100 Mal geworfen und 50 Köpfe gesehen.

Christoph Hanck
quelle
Hat jedes Konjugat zuvor eine solche Rechtfertigung? Ich bin mir nicht sicher ...
Tim
Meine Lektüre der Bemerkung auf S. 274 von Diaconis und Ylvisaker (1979) legt nahe, dass die Antwort ja lautet.
Christoph Hanck
3

Aufgrund eines Ergebnisses von Diaconis und Ylvisaker (1979) wissen wir, dass lineare Schätzer unter der Annahme einer Wahrscheinlichkeit, dass es sich um eine exponentielle Familie handelt, nur dann Bayes sind, wenn der Prior konjugiert ist.

Dies deutet auf eine grundsätzliche Bedeutung der Verwendung des Konjugats hin, wenn sich herausstellt, dass der Schätzer linear ist.

user795305
quelle
nts: Ich habe dieses Ergebnis in
Kapitel