ガウスRVの合計とガウス混合の関係


13

ガウスの合計がガウスであることを知っています。それでは、ガウス分布の混合物はどのように異なっていますか?

つまり、ガウス分布の混合は、ガウス分布の総和(各ガウス分布にそれぞれの混合係数を掛ける)だけですよね?


7
ガウス分布の混合は、ガウス確率変数の加重和ではなく、ガウス密度の加重和です。
確率論的

回答:


7

加重和ガウスランダム変数 あるガウス確率変数:もし 、次いで P Σ I = 1 β I X Iバツ1バツp

=1pβバツ
β TX 1... XはPN 1β T μ β T Σ β
バツ1バツpNpμΣ
βTバツ1バツpN1βTμβTΣβ

ガウスの混合物密度はガウスの加重和として与えられる密度有する密度:そのは、ほぼ常にガウス密度と等しくありません。たとえば、下の青い推定混合密度を参照してください(黄色の帯は推定混合の変動性の尺度です)。

f;θ==1pωφ;μσ
ここに画像の説明を入力してください

[出典:Marin and Robert、ベイジアンコア、2007年]

確率変数この密度を有する、ように表すことができる ここおよびは:バツf;θ

バツ==1pZ=バツ=バツZ
バツNpμσZPZ==ω
ZM1;ω1ωp

3

そして、@ Xi'anの答えを補完するいくつかのRコードがあります。

par(mfrow=c(2,1))
nsamples <- 100000

# Sum of two Gaussians
x1 <- rnorm(nsamples, mean=-10, sd=1)
x2 <- rnorm(nsamples, mean=10, sd=1)
hist(x1+x2, breaks=100)

# Mixture of two Gaussians
z <- runif(nsamples)<0.5 # assume mixture coefficients are (0.5,0.5)
x1_x2 <- rnorm(nsamples,mean=ifelse(z,-10,10),sd=1)
hist(x1_x2,breaks=100)

ここに画像の説明を入力してください


1

独立したランダム変数の合計の分布は、その分布の畳み込みです。既に述べたように、2つのガウスの畳み込みはたまたまガウスです。

混合モデルの分布は、RVの分布の加重平均を実行します。(有限の)混合モデルからのサンプルは、コインを反転(またはダイローリング)から描画するためにその分布を決定することにより製造することができる:言う私は2つのRV有する、私はRVを生成するその分布の平均でありますとコインをフリップする場合、ます。尾を着地させる場合、ます。バツYZバツYZ=バツZ=Y


有難うございます。私は次の例が本質的に間違っていることを知っていますが、とにかく興味深いかもしれません:特別な種類の「混合物」(まだそれを「混合物」と呼ぶことができる場合)があるとしましょう。両方とも1に対応していますか?それはガウスRVの合計と同じでしょうか?
-njk

いいえ。この場合、混合rvはガウス分布になりますが、コンポーネントの分布に2つのRVを追加すると、合計RVは混合RVよりも分散が大きくなります。
enthdegree

@enthdegree混合rvはどのようにガウス分布ですか?手段が一致しない場合、それはまだバイモーダルである可能性がありますよね?
学習

@学習、はい、そうです。前を書いたとき。何らかの理由でコメントしましたが、彼らは同じ平均を持っていると思いました。
enthdegree
弊社のサイトを使用することにより、あなたは弊社のクッキーポリシーおよびプライバシーポリシーを読み、理解したものとみなされます。
Licensed under cc by-sa 3.0 with attribution required.