web-dev-qa-db-ja.com

小規模サンプル研究用のアンケート(5〜7ユーザー)

私は現在、論文に取り組んでおり、実際のユーザーとのチャットボット体験に関するユーザー調査を実施しています。現在、3つの異なるチャットボットプロトタイプをテストしてテストします。

(1)プロトタイプごとに、約5〜7人のユーザーをテストしてテストします

(2)各プロトタイプをテストするために、最初にそれらをインタビューし(チャットボット、バックグラウンドなどの使用法を知るため)、次にユーザビリティテスト(タスクを与える)を行い、最後にいくつかのメトリックを使用して、どれほど優れているかを測定しますプロトタイプ。

(3)チャットボットアプリの使いやすさを測定するための指標を誰かが推奨しているのでしょうか。私は現在、SUSアンケートを使用する予定でした。チャットボットを評価するためにそれを使用していくつかの論文を見つけましたが、少数のサンプル(5ユーザー)で動作するかどうかはわかりません。

誰かがいくつかの異なるアプローチを推奨していますか?

1
CASA_DE_BS

ユーザビリティテストを実施する場合、 タスク完了率 標準のユーザビリティ測定と組み合わせると、通常は十分なデータになります。標準のユーザビリティ測定では、SUSは確実に機能しますが、代わりに MUX-lite を使用することがよくあります。これは2つの質問のみであり、=に変換できますSUS確実にスコアを付けます。

SUSに必要なユーザー数については、このスレッドに適切な答えがあります。 SUSを実行して有効な結果を取得するには、何人のユーザーが必要ですか? =

1
brad

TLDR;前の質問があります 私はいくつかの方法論を提案しましたが、以下のリソースにはより大きな代替案があります。

私も論文研究を行い、最初に Tullis&Albert、2013 からすべての方法論とメトリックを書き留めるように始めました。以下にいくつかのソースがあります。必要に応じて共有できます。

調査の方法と依存する指標は、この特定の方法に従って形成する必要があります。つまり、必要なものと必要でないものを完全に理解するために、それらすべてを調査して、使用したいすべてのテクニックを理解する必要があります。

簡単なスタートでなくても、すべての可能性に満足できれば、残りの作業を完了しやすくなります。そうでなければ、それはあなたがその特定の方法論を選択する目的を完全に理解していないかもしれないいくつかの他の人々からの提案にすぎません。

1
Erhan Yaşar