スピアマンの相関係数の差に関する有意性検定


13

(迅速な対応に感謝します!私は質問をするのが下手だったので、再試行させてください。)

2つのスピアマンの相関の差が統計的に有意であるかどうかを調べる方法がわかりません。私はそれを見つける方法を知りたいです。

私が見つけたかった理由は、ガブリロビッチとマルコビッチによる自然言語処理のためのウィキペディアベースの意味解釈Journal of Artificial Intelligence Research 34(2009)443-498)です。

表2(p。457)で、著者は自分の方法(ESA-Wikipedia)が他の方法よりも高い統計的に有意なスピアマンの相関関係を達成していることを示しています。いくつかの問題の方法。

私は彼らがどのように統計的有意性を計算したのか知りません、そして私は知りたいです。この論文の著者は、スピアマンの順位相関はピアソンの相関として扱われていると述べました。それが正しい方法かどうかはわかりません。私は2つのスピアマンの相関があり、それらの差が統計的に有意であるかどうかを知りたいです。

http://faculty.vassar.edu/lowry/rdiff.htmlなどのWebサイトが、2つのピアソンの相関関係の違いを取得するためのオンライン計算機を提供していることを認識しています。2つのスピアマンの相関関係の違いについて、同様のオンライン計算機を見つけることができません。

Peter Flomが提供するリンクのソリューション

注:手順では、0.6未満のスピアマンの相関関係のみがサポートされています。

  1. ましょ =フィッシャー組の観察された相関の変換AZ B =フィッシャー組の観察された相関の変換BzAAzBB

  2. 以下のための、聞かせて、Y Aは、I = N 、Z A - N - 1 Z A '、IZ A ' iはフィッシャーセットの変換であるAにより得られた一左アウト相関のx iy i)の削除 、再ランキング、および相関の再計算。(各Z A ' iが に基づいて、N -=1nyA=nzAn1zAzAAバツyzAペア; 各削除は一時的なものであり、iのみであり、永続的ではありません。)セット Bについて繰り返します。n1B

  3. フィッシャー変換ジャックナイフれます。セットBについて繰り返します。y¯A=yA/nB

  4. の分散である ˉ Y A。セット Bについて繰り返します。vy¯A=yAy¯A2/nn1y¯AB

  5. 異分散(Welch-Satterthwaite)使用して、2つのジャックナイフされた推定値を比較します。t

ここで、nAnBは、それぞれセットABのサンプル数です。

t=y¯Ay¯Bvy¯A+vy¯Bdf=vy¯A+vy¯B2vy¯A2nA1+vy¯B2nB1
nAnBAB

最初の編集の前に

私は、人間がランク付けしたランキング(人間のランキング)、現在使用されている人気のあるメソッド(現在のランキング)によって生成されたランキングのセット、最終的に私の目的のメソッド(MY-RANKING)によって生成されたランキングのセットを取得しました。

人間の放牧と現在の放牧との間のスピアマンの相関を計算しました。これをHUMAN-PRESENT-SPEARMANと呼びましょう。

それから私は人間の放牧と私の放牧の間にスピアマンの相関関係を見つけました。私はこれを呼んでみましょう:HUMAN-MY-SPEARMAN。

HUMAN-MY-SPEARMANとHUMAN-PRESENT-SPEARMANの違いが統計的に有意であるかどうかを確認するにはどうすればよいですか?


2
パトリックへようこそ。私は同じ問題に苦しんでいますが、Pearson r。私のエントリをチェックすると、何ができるのかがわかるでしょう。
アデッシュジョシュ

統計用語でこの質問を組み立てるのは難しいかもしれませんが、あなたが興味を持っているものを正確に知っていると便利です。相関関係の近さ(スコアが互いにどれだけ密接に予測するか)または関係の存在に興味がありますかチャンス以上。ランク付けされたデータが時間内に繰り返されているように見えることを考えると、クラス内相関係数の読み取りを行うと役立つ場合があります。私がその権利を持っていることを願っています、質問は完全に明確ではありません。
ロッサー

Adheshとrosserに感謝します。質問の説明が下手で申し訳ありません。書き直しました。それが理解できる質問になったことを願っています。
パトリックチャン

こんにちは!私は現在、同じ問題に取り組んでいます。あなたの提案を実装するコードが用意されていますか?また、相関値が0.6未満の場合にのみ機能するのはなぜですか?
fsociety

回答:


1

あなたが引用した論文は、以下の用語で方法を説明しています:

[...] ESA-Wikipedia(2006年3月26日)バージョンのパフォーマンスとフィッシャーのz変換(Press、Teukolsky、Vetterling、およびFlannery、Numerical)を使用した他のアルゴリズムのパフォーマンスの違いの統計的有意性を示します。Cのレシピ:科学計算の技術。Cambridge University Press、1997、Section 14.5)。

そのリファレンスに従うか、詳細についてはスピアマン係数のウィキペディアのページをご覧になることをお勧めします。


1
ギレルモに感謝します。私は、彼らがスピアマンの順位相関をピアソンの相関として扱い、2つのピアソンの相関の差を計算したのではないかと疑っていました。しかし、私にはそれを行う正しい方法ではないようですので、ここに投稿しています。
パトリックチャン

これがOPの目的であるため、おそらく実用的な実装(できればオンライン)を知っていますか?
chl
弊社のサイトを使用することにより、あなたは弊社のクッキーポリシーおよびプライバシーポリシーを読み、理解したものとみなされます。
Licensed under cc by-sa 3.0 with attribution required.