ベイジアンはコルモゴロフの公理を受け入れますか?


24

通常、確率論はコルゴモロフの公理で教えられます。ベイジアンもコルモゴロフの公理を受け入れますか?


8
ベイズ理論は、確率の標準公理、したがってコルモゴロフ公理から得られます。
西安14年

3
@ Xi'an:主観的な信念の程度は確率で表すことができることはそれほど明白ではありません。
Scortchi -復活モニカ

2
それは私が「客観的」ベイジアンだ理由だと事前分布は、確率論...の基準に従って定義で始まる
西安

2
Cox-Jaynesによる確率の解釈は、ベイジアン確率の厳密な基盤を提供すると考えています。(私の答えを参照)。しかし、それについて西安の意見があれば良いでしょう。
サミット14

1
@サミット:ありがとうございますが、私はこの問題にあまり興味がありません...!
西安14

回答:


25

私の意見では、Cox-Jaynesの確率の解釈はベイズ確率の厳密な基礎を提供します。

  • コックス、リチャードT.「確率、頻度、合理的な期待。」アメリカ物理学会14.1(1946):1-13。
  • ジェインズ、エドウィンT.確率論:科学の論理。2003年ケンブリッジ大学出版局。
  • ベック、ジェームズL.「確率論理に基づくベイジアンシステムの識別」。構造制御とヘルスモニタリング17.7(2010):825-847。

Coxによって導出される確率論理の公理は次のとおりです。

  1. (慣例により)Pr[b|a]0
  2. (P2):(否定関数)Pr[b¯|a]=1Pr[b|a]
  3. (P3):(接続機能)Pr[bc|a]=Pr[c|ba]Pr[b|a]

公理P1〜P3は、次のことを暗示しています(Beck、James L.「確率論理に基づくベイジアンシステムの識別。」構造制御およびヘルスモニタリング17.7(2010):825-847):

  1. (P4):a)。B)のPr [ ¯ B | B C ] = 0 ; c)Pr [ b | C ] [ 0 1 ]Pr[b|bc]=1Pr[b¯|bc]=0Pr[b|c][01]
  2. (P5):a)、B)のPr [ | C B ] = Prの[ B | C B B手段そのAPr[a|cab]Pr[b|cab]Pr[a|c(ab)]=Pr[b|c(ab)]aba含まれる、及びBという意味に相当するBcabab
  3. (P6):Pr[ab|c]=Pr[a|c]+Pr[b|c]Pr[ab|c]
  4. (P7):命題が命題b 1b Nの1つだけが真である と述べていると仮定すると、cb1,,bN
    • a)周辺化定理:Pr[a|c]=n=1NP[abn|c]
    • b)総確率定理:Pr[a|c]=n=1NPr[a|bnc]Pr[bn|c]
    • c)ベイズの定理:Pr [ b k | C ] = Prの[ | bはKC ] のPr [ BのK | c ]k=1,,NPr[bk|ac]=Pr[a|bkc]Pr[bk|c]n=1NPr[a|bnc]Pr[bn|c]

それらは、コルモゴロフの論理の声明を暗示しており、これは特別なケースと見なすことができます。

ベイズの視点の私の解釈では、すべてが常に(暗黙的に)私たちの信念と知識に基づいています。

次の比較は、ベック(2010)から取られています。確率論理に基づくベイジアンシステムの識別

ベイジアンの視点

確率は、指定された情報に基づいたステートメントの妥当性の尺度です。

  1. 確率分布は、システムと現象に関する固有の特性ではなく、システムと現象に関するもっともらしい知識の状態を表します。
  2. モデルの確率は、セット内の他のモデルに対する妥当性の尺度です。
  3. 自然の固有のランダム性によるものであるという主張なしに、情報の欠落による不確実性を実用的に定量化します。

周波数主義者の視点

確率は、長期的に本質的にランダムなイベントが発生する相対的な頻度です。

  1. 確率分布は、ランダム現象に固有の特性です。
  2. 限定された範囲。たとえば、モデルの確率に意味がない。
  3. 固有のランダム性が想定されますが、証明できません。

上記の公理からコルモゴロフの公理を導き出す方法

以下では、[Beck、James L.「確率論理に基づくベイジアンシステムの識別」のセクション2.2。構造制御とヘルスモニタリング17.7(2010):825-847。

以下では、有限集合XのサブセットAの確率測定を使用します。Pr(A)AX

  1. [K1] Pr(A)0,AX
  2. [K2]:Pr(X)=1
  3. [K3] 場合ABは互いに素です。Pr(AB)=Pr(A)+Pr(B),A,BXAB

propositonの導入確率論の公理、[ベック2010]から誘導される(K1-K3)に順に状態は、そのX Xおよび指定確率モデルX。[ベック2010]さらに、紹介のPr A = Prの[ X A | π ]πxXxPr(A)=Pr[xA|π]

  • P1は、とK1を意味しおよびC = πb={xA}c=π
  • K2から、次 ; P4()、およびπ状態すなわちX XPr[xX|π]=1πxX
  • ABxAxB Pr(xAB|π)=Pr(xA|π)+Pr(xB|π)

5
あなたのK3からはに得ることができるPr=1nA==1nPrA (有限の加法性)コルモゴロフの第3公理ではなく、 Pr=1A==1PrA (可算加算性)が Aの要素は σフィールド、および有限集合の単なるサブセットではありません。
スコルチ-モニカの復職

2
@Scortchi K.R.Koch in his introduction to Bayesian Statistics cites Bernardo and Smith (1994), Bayesian Theory, p. 105, as a source that shows how to address countable infinity. I have not checked it, but as a reference it may as well be given here.
gwr

12

確率論の開発後、「確率」の名前に答えるよりゆるい概念が、彼らがインスピレーションを与えた厳密に定義された概念まで測定されたことを示すことが必要でした。「主観的には」ベイズ確率はラムジーによりかつ独立に比較&コヒーレンスの制約への信仰対象の程度の定量化は、(誰が作ることができない場合は自分の信念がコヒーレントであることが示されたFinetti、デ考えられていたオランダの書物あなたに対して)をしなければなりません確率である。

公理化の違いは、主に何が定義され、何が派生するかに関する好みの問題です。しかし、可算加算は、コルモゴロフの1つであり、コックスやフィネッティの派生物ではなく、物議をかもしている。一部のベイジアン(例えば、デ・フィネッティ&サベージ)は有限の加法性で停止するため、コルモゴロフの公理のすべてを受け入れません。彼らは、不正なしに無限の間隔で均一な確率分布を置くことができます。また、Villegasに続き、単調な連続性を想定し、そこから数え切れないほどの相加性を得る人もいます。

ラムジー(1926)、「真実と確率」、ラムジー(1931)、数学の基礎およびその他の論理的エッセイ

デ・フィネッティ(1931)、「確率論的確率論」、数学の基礎17、pp 298 – 329

Villegas(1964)、「定性的確率について σ-環」、アン。数学。Statist。 35、4。


3
Why should my answer only deal with 'objective Bayesian' probabilities? The seminal work of Cox (1946) explicitly addresses the issue of subjectivity! It is a very interesting - and easy to read paper. I do not think that it makes sense to distinguish between 'subjective' and 'objective' Bayesian probabilities: Everything is always implicitly conditioned to the person performing the analysis -> and in this regard 'subjective'.
サミット14

concerning the derivation of the axioms stated Kolmogorov's from Cox's: I am satisfied by the way it is done in section 2.2 of Beck, James L. "Bayesian system identification based on probability logic." Structural Control and Health Monitoring 17.7 (2010): 825-847.
Summit

1
@Summit:(1)そのとおりです。むしろ、Ramsey&de Finettiの確率に関する気質観は、それらを「主観的な」陣営に真っ向から置き、Coxの方がより一般的に適用可能であるということです。(2)可算加法性 Coxの仮定から推定できると言っていますか?
Scortchi-モニカの復職

私は答えを拡張し、あなたのコメントを楽しみにしています。
サミット14

1
@Summit:ありがとう-私も私の半分を徹底する時間を見つけたいと思っています。コックスの定理と「完全な」コルモゴロフの公理からどこにたどり着くことができるかについてのギャップを指摘し、それは特に質問と密接な関係があると思います(最初に答えたときは完全に忘れていましたが)。ジェインズは、このBTWについておもしろいことを言っていました。
スコルチ-モニカの復職
弊社のサイトを使用することにより、あなたは弊社のクッキーポリシーおよびプライバシーポリシーを読み、理解したものとみなされます。
Licensed under cc by-sa 3.0 with attribution required.