主観的なランク順の結果をどのようにグラフ化しますか?


17

ノンパラメトリックテストとは別に、主観的なランキングを視覚化する方法を探しています。

12人の参加者に、さまざまな主観的基準(それぞれのランキングを個別にランク付け)に従って8種類のアイテムをランク付けするように依頼しました。ランキングの個々のセットについて、ランキングの高レベルの傾向を視覚化する良い方法を探しています。

私は平均ランキングで棒グラフとレーダープロットの両方を試しましたが、他の人がランキングごとの応答数について散布図/バルーンプロットを使用しているのを見たことがありますが、何が最良の概要を伝えるかはよくわかりません。8つの平均ランキング、またはアイテムごとの各ランキングの8つのカウントを使用できます。

編集:

例:各列はアイテムであり、各行は8つのアイテムのそれぞれの人のランキングです。この例では特に強力な合意ではありませんが、一般的に全体的な傾向を伝える最良の方法を理解したいと考えています。

                        Item:
            A   B   C   D   E   F   G   H
Rater:  
  1         6   8   1   7   3   4   2   5
  2         1   3   8   7   6   5   2   4
  3         5   8   7   6   1   4   2   3
  4         5   8   7   6   4   2   1   3
  5         1   2   8   7   4   3   5   6
  6         1   7   8   5   6   2   4   3
  7         5   1   8   4   7   3   6   2
  8         4   2   8   7   6   1   5   2
  9         6   3   8   4   7   1   5   2
  10        3   2   8   7   4   1   5   6
  11        2   3   7   8   1   5   4   5
  12        8   5   6   7   2   3   1   4

データの一部をリストできると役立つ場合があります。また、どのソフトウェアを使用する可能性がありますか?
GUNG -復活モニカ

サンプルマトリックスを追加しました。Excelでプロットする可能性があります。
ジェシー

アイテムのランクまたは評価者間契約(あるいはその両方)を表示しようとしていますか?
whuber

1
アイテムのランクについて具体的に尋ねましたが、KendallのW以外の評価者間合意を示す良い方法があれば、それでもなお良いでしょう。
ジェシー

各列の経験的CDFをプロットできます。これは、ROC曲線(全体)のように見えます。ただし、これを行うと何が飛び出すかわかりません。
みすぼらしいシェフ

回答:


8

同様のランキングを視覚化するために、似たようなことをしました。私が使用した方法では、ランキングがどのように関連しているかの簡単なスナップショットが得られました。私のソリューションでは、Excel 2010のスパークラインを使用して、ランキングの小数ビューを作成しました(これは他のExcelバージョンでも実行できますが、少し手間がかかります)。また、私は通常、物事をスピードアップするためだけにExcelのテーブル機能を使用します。

  1. 行が評価項目ごとのすべての値を保持するように行列を転置します。
  2. ランク1が最適な場合は、ランクを反転して1 = 8,2 = 7 ...にすると、グラフの列(空白ではなく)を視覚化するのに役立ちます。
  3. 各質問の評価者の結果を合計します。次に、この合計で並べ替えます。これにより、最高の総合スコアが最初に、最悪の総合スコアが最後に表示されます。このランキングは、全体的なパターンが明らかでない場合に視覚的にチャートをランク付けするのに役立ちます(サンプルデータの場合のように)。
  4. データテーブルの横にランキングデータ(合計列なし)を使用してスパークラインを挿入します。視覚的には、バーが多い/大きいほど、全体的なランキングが向上します。

このアプローチについて特に分析的なものはありませんが、データを視覚化する非常に迅速な方法です。

主観的ランキング

Excel 2010をお持ちでない場合、ほぼ同じように見える行ごとに、セルサイズが削減されたセルサイズの縦棒グラフを作成できます。または、サードパーティのアドオンを使用して作成できます。

編集:Gungの平均測定値の提案を利用した表とグラフ。指摘したように、スケールは類似しているため、追加の比較ポイントとしてチャートに追加されました(生のデータプロットと区別するためにグレーを使用しました)。

ここに画像の説明を入力してください


3
+1、これはこの状況に対応する非常に優れたシンプルなソリューションです。私が行う小さな提案の1つは、ステップ3で合計の代わりに平均を使用することです。これは実際には何も変更しませんが、合計を元のスケールに戻すため、値の解釈が容易になります。
GUNG -復活モニカ

@gung、フィードバックをありがとう。平均を使用することは本当に上手くいくと思います(上記のように)。合計を使用することは好きではありませんでしたが、良い選択肢にあまり考えを入れていませんでした。
ダブ

2

これは、バンプチャートの形で行います。それはかなり雑然としているように見えるので、私は色を使ってこれを助けようとします。

@davが示唆したスパークラインは、製品間の比較を実際に許可しません。

ここに画像の説明を入力してください


このチャートは、ドットサイズを8(最小)から1(最大)の逆順でスケーリングした場合に優れていると思います。トレンドはもっとそのように飛び出すかもしれないと思います。
ブランドンバーテルセン


1

この質問は7年前のもので、ポスターがAWOLであることがわかりますが、データを含む質問には感謝しています...

製品評価の傾向は個々の評価者の傾向ではなく問題であるように思えます。その場合、各製品の平均と信頼区間をプロットすることにより、高レベルの傾向を把握できます。

ここに画像の説明を入力してください

少なくとも、CとDは他のものよりも悪いように見えます(8が最悪のランクであると仮定)。たぶん、A、B、Cは他のものよりも意見の相違がある。

個々の評価者が伝えることが重要な場合、各評価者のドットに異なるマークと色を使用できます。

弊社のサイトを使用することにより、あなたは弊社のクッキーポリシーおよびプライバシーポリシーを読み、理解したものとみなされます。
Licensed under cc by-sa 3.0 with attribution required.