最小分散の不偏推定の理論は大学院で強調されていますか?


18

最近、完全に間違った均一分布のパラメーターの最小分散不偏推定値について、カフスの答えを出したとき、私は非常に恥ずかしかったです。幸いなことに、私はヘンリー枢機andとヘンリーによって直され、ヘンリーはOPに正しい答えを提供しました

これは私に考えさせられました。およそ37年前にスタンフォード大学の大学院数学統計クラスで、最も公平な推定量の理論を学びました。ラオ・ブラックウェルの定理、クラマー-ラオの下限、レーマン・シェッフェの定理を思い出します。しかし、応用統計学者として、私は日々の生活の中でUMVUEについてあまり考えませんが、最尤推定は多く出てきます。

何故ですか?大学院ではUMVUE理論を強調しすぎていますか?私はそう思う。まず第一に、公平性は重要な財産ではありません。多くの完全に良いMLEには偏りがあります。スタイン収縮推定量は偏っていますが、平均二乗誤差損失の観点から不偏MLEを支配しています。これは非常に美しい理論(UMVUE推定)ですが、非常に不完全であり、あまり有用ではないと思います。他の人はどう思いますか?


5
(+1)これはメインサイトにとって良い質問になり、賛成になると思います。これは、やや主観的であるので、それは可能性がある CWの質問として最も良いです。(また、当惑する理由はありません。)
枢機

2
一般的に、この種の推定が強調されすぎるとは思わない。私の教授は、UMVUEが「愚かな」例にもっと集中していたことを覚えています。安全のために、一般的な理論に属する点推定器を使用する傾向がありますが、方程式を推定する完全な理論があります。彼らは宿題の難しい問題の良い源であるため、一部の教授はUMVUEに焦点を当てています。バイアスの低減は、UMVUE(常に存在するとは限らない)を見つけるよりも、現在ではより一般的で有用な理論だと思います。

2
UMVUEには多くの質問がありますが、それは良い宿題の問題になるからです。たぶん、これは博士課程プログラムよりも学部レベルと修士レベルの統計プログラムの問題です。
マイケルR.チャーニック

3
まあ、UMVUの推定は古典的なアイデアなので、その理由でおそらく教えられるべきでしょうか?そして、それは公平性などの基準を議論/批評するための良い出発点です!彼らが実際にあまり使われていないからといって、それ自体は彼らに教えない理由にはなりません。
kjetil bハルヴォルセン

3
重点は、時間と部門によって異なる可能性があります。私の学部は、初年度の数学統計コースで資料を発表しますが、それ以降は廃止されているため、過度に強調されていると合理的に言うことはできませんでしたベイズ推定とミニマックス推定、許容性、および多変量推定の時間)、バイアスが有用な理由であり、したがって不偏推定が不必要に極端なパラダイムである理由をより強調したいのですが。

回答:


3

私達はことを知っています

もしからランダムサンプルであってもいずれかのために、次に UE、P 、O 、I 、S 、S 、O 、N λ α 0 1 T α = α ˉ X + 1 - α S 2 λバツ1バツ2バツnPossonλα01 Tα=αバツ¯+1αS2λ

したがって、 UEは無限に存在します。ここで、どれを選択すべきかという疑問が生じます。だからUMV​​UEを呼び出します。偏りのないことは良い特性ではありませんが、UMVUEは良い特性です。しかし、それはあまり良くありません。λ

もしからのランダムサンプルである、フォームの最小MSE推定とパラメータのであり、 ただし、最小MSEの点では最適ですが、UMVUEではないという偏りがあります。 N μ σ 2T α = α S 2N - 1 S 2 = Σ N iが= 1X I - ˉ X2 σ 2 N - 1バツ1バツ2バツnNμσ2Tα=αS2n1S2==1nバツバツ¯2σ2n1n+1S2=1n+1=1nバツバツ¯2

ラオ・ブラックウェルの定理によると、UMVUEを見つけるに 、十分な統計量の関数であるUEにのみ集中できるということに注意してください。したがって、UMVUEは必然的に十分な統計量の関数です。

MLEとUMVUEは両方の観点から優れています。しかし、それらの1つが他より優れているとは決して言えません。統計では、不確実でランダムなデータを扱います。したがって、常に改善の余地があります。MLEやUMVUEよりも優れた推定量が得られる場合があります。

私たちは大学院でUMVUE理論を過度に強調しすぎないと思います。それは純粋に私の個人的な見解です。卒業段階は学習段階だと思います。そのため、卒業した学生は、UMVUEおよびその他の推定量について適切な基礎を保持する必要があります。


1
推論の有効な理論は知っておくと良いと思います。公平性は良い特性ですが、バイアスは必ずしも悪いわけではありません。UMVUEに重点を置くと、「最適性」がUMVUEに起因する傾向があります。しかし、不偏推定量のクラスには、非常に優れた推定量がない場合があります。精度は重要であり、バイアスと分散の両方が関係します。MLEの方が優れているのは、漸近的に効率的であることが示される条件があることです。
マイケルR.チャーニック

Rao-Blackwellの定理は、偏った推定量を改善するためにも使用でき、同じバイアスで改善された推定量を生成できることに注意してください。
kjetil bハルヴォルセン

2

おそらく、ブラッド・エフロンの論文「最大尤度と決定理論」はこれを明らかにするのに役立つでしょう。Bradは、UMVUEの主な難点の1つは、一般に計算が難しく、多くの場合存在しないことだと述べました。

弊社のサイトを使用することにより、あなたは弊社のクッキーポリシーおよびプライバシーポリシーを読み、理解したものとみなされます。
Licensed under cc by-sa 3.0 with attribution required.