情報のないベータ事前分布の選択


16

私は、二項プロセス(ヒット/ミス)で機能するベータ分布の情報価値のない事前分布を探しています。最初は、均一なPDFを生成する、またはJeffrey以前のを使用することを考えました。しかし、事後結果に最小限の影響しか与えない事前分布を実際に探しています。そして、不適切な事前分布を使用することを考えました。ここでの問題は、少なくとも1つのヒットと1つのミスがある場合にのみ、事後分布が機能することです。これを克服するために、ような非常に小さな定数を使用して、後部のおよびがなるようにすることを考えました。α=1,β=1α=0.5,β=0.5α=0,β=0α=0.0001,β=0.0001αβ>0

このアプローチが受け入れられるかどうかは誰にも分かりますか?私はこれらの事前を変更することの数値的効果を見ますが、誰かがこのような小さな定数を事前として置くことの一種の解釈を私に与えることができますか?


1
ヒットとミスが多い大きなサンプルの場合、違いはほとんどありません。小さなサンプルの場合、特に少なくとも1つのヒットと1つのミスがない場合、大きな違いが生じます。「非常に小さな定数」のサイズでさえ、大きな影響を与える可能性があります。私はあなたのための重要な思考実験は、どのような事後の可能性を示唆しているのサンプルサイズの後に理にかなって:これは、あなたを説得する可能性があるジェフリーのようなもの前には、合理的である1
ヘンリー・

そして、紙ケルマーンは、B、1/3&1/3を示唆があります
ビョルン

「事後結果に対する最小効果」とはどういう意味ですか?何と比較して?
ウィル

質問の書式とタイトルを改善しました。編集を元に戻したり変更したりしてください。
ティム

回答:


32

まず第一に、情報価値のない事前のようなものはありません。以下に、異なるデータが与えられた5つの異なる「情報価値のない」事前分布(プロットの下で説明)から生じる事後分布を示します。明確にわかるように、「情報価値のない」事前分布の選択は、特にデータ自体が多くの情報を提供しなかった場合、事後分布に影響しました。

Posteriors from uninformative priors

以下のための「情報価値のない」事前分布、ベータ分布の共有プロパティその、対称分布にどのリードα 1 β 1は、一般的な選択肢は:均一である(ベイズラプラス)の前(α = β = 1)、ジェフリーズ前(α = β = 1 / 2)、 "中立"の前(α = β = 1 / 3)ケルマン(2011)によって提案され、ホールデン前(α = β = 0α=βα1,β1α=β=1α=β=1/2α=β=1/3α=β=0)、またはその近似値(ε > 0での)(Wikipediaすばらしい記事も参照してください)。α=β=εε>0

ベータ事前分布のパラメーターは一般に、成功()および失敗(β)の「擬似カウント」と見なされます。これは、n回の試行でy回の成功を観察した後のベータ二項モデルの事後分布がαβyn

θyB(α+y,β+ny)

α,βα=β=1n

一見すると、Haldane事前は、最も平均的な情報になります。これは、事後平均につながるため、最尤推定値とまったく同じです。

α+yα+y+β+ny=y/n

y=0y=n

「情報価値のない」事前事態のそれぞれについて賛否両論があります(Kerman、2011; Tuyl et al、2008を参照)。たとえば、Tuyl et alによって議論されたように、

101

一方、小さなデータセットに均一な事前分布を使用することは、非常に影響力があります(疑似カウントの観点から考えてください)。このトピックに関するより多くの情報と議論は、複数のペーパーとハンドブックにあります。

申し訳ありませんが、単一の「最良」、「最も情報価値の低い」、または「1つのサイズにすべて適合」の事前事項はありません。それらはそれぞれ、モデルに情報をもたらします。

カーマン、J。(2011)。中立的な非情報および有益な共役ベータおよびガンマ事前分布。Electronic Journal of Statistics、5、1450-1470。

Tuyl、F.、Gerlach、R.およびMengersen、K.(2008)。Bayes-Laplace、Jeffreys、およびその他の事前分布の比較。アメリカ統計学者、62(1):40-44。

弊社のサイトを使用することにより、あなたは弊社のクッキーポリシーおよびプライバシーポリシーを読み、理解したものとみなされます。
Licensed under cc by-sa 3.0 with attribution required.