web-dev-qa-db-ja.com

適切な評価システムを選ぶには?

現在、組織内の1つのチームが使用するWebアプリケーションを作成しています。このアプリケーションを使用して、他のユーザーが行った作業の品質を追跡したいと考えています。 (品質保証)

問題は、クライアントがどのように評価したいのか正確に知らないことです。 -/ 0/+を使用することも、1/2/3/4/5(または1〜10)を使用することもできます。他のアイデアもチーム内で思い付きました。

クライアントが適切な評価システムを見つけるのを手伝いたいのですが、最適なシステムを選択する方法に関する知識があまりありません。どのシステムをいつ使用するかに関する一般的なルールはありますか?

1

単極vs双極

単極スケール

1..5からのシステムはユニポーラです。これは、Amazonがレビューに使用するシステムです。

5は「優れている」、1は「本当に悪い」を表しますが、3はあいまいです-必ずしも中立を表すわけではありません。一部の人々は製品が好きですが、2つの短所のために2つのスタートを推定します。

ユニポーラスケールはどの程度良いのか(または他の形容詞)を尋ねる傾向がありますが、明確なニュートラルカットは提供しません。

このタイプのスケールは、たとえば、誰かの作品にマークを付ける場合に適しています-マーカーが「私はこの作品の品質に中立です」と実際に投票することができず、大きさを選択する必要があります。

A screen grab showing Amazon's 5 start rating control

双極スケール

一方、-2..2から実行しているシステムは、悪い範囲、良い範囲、および中立的なマークを明確に示します。

このタイプのスケールは、中立であるオプションを使用してどのように良いか悪いかを尋ねます。

1を取得する(1..5からのスケール)と比較して、-2(-2..2からのスケール)のようなマークには、潜在的に少し多くの負の強化があることに注意する価値があります。 3(1..5)と比較して0(-2..2)の平均マークの同上。

An image showing likert scale, with options being strongly disagree, disagree, undecided, agree, strongly agree

その真ん中の選択

A toilet sign showing a figure whose left is male right is female

奇数の選択、特に双極スケールでは、中立的な選択が可能です。

私たちの感情的な潜在意識が決定を下さなければならないのに対し、優柔不断は意識のある脳が負荷を減らすために近道をとった結果であるという議論があります。言い換えれば、私たちが何を言おうと、私たちは選択肢の1つに寄りかかる好みを持たなければなりません。

さらに、中立的な見方は必ずしもビジネスに役立つとは限りません。

選択肢の量

バイナリの選択(yesまたはno)は、学位を与える場所を提供しません。これは、「今夜は出かけましょうか」などの場合に適しています。

学位を認める尺度は学位を含むものに適しています-「今日のトイレはどれくらいきれいでしたか?」

覚えておく価値があるのは、より多くのオプションがあることです。

  • より多くの人々が彼らの選択について考えなければならない、つまり増加した認知負荷を意味します。
  • それぞれの選択肢の意味がぼやけているほど、7は1つには良いと見なされますが、別の場合には非常に悪いと見なされます。

イギリスの学部のマーキング

A photo showing 3 British graduates hugging in their graduation ceremony

おそらくこれの良い例は、多くの英国の大学の マーキングスキーム です。作品は0-100%のスケールでマークされる場合がありますが、1..16の間のマークも付与されます。これは4つのバンドに分割されます。

  • 最初(1..4、90%-100%)
  • 上位秒(5..8、80%-89%も)
  • 下位秒(9..12、これも70%-79%)
  • 3番目(13..16、また60%-69%)

これは複雑すぎるように見えますが、実際にはまずバンド内に作品を配置し、次に1..4、5..8などを使用して微調整するのは非常に簡単です。

パーセンテージとしてマークを付ける必要があるのは、スケールが巨大であり、それを分解する方法についての実際の概念がないため、問題があります。

複数の人物が作品にマークを付けた場合、彼らが別のバンドを選択することはほとんどありませんが、パーセンテージでは、マークが10%以上離れているのが一般的です。

概要

各オプションの意味をすべての人が非常に明確に、同意し、理解しない限り、最も簡単な推奨は長いスケールを選択しないことだと思います。

私は単に単極4つ星システムを選びます。

4
Izhaki