web-dev-qa-db-ja.com

ユーザーテスト/ベータテストのテスト対象者への支払い

フォーカスグループは、生活のためにフォーカスグループの「回路」を扱うプロのフォーカスグループが集まるため、ユーザー調査を実施するのに適した方法ではないことを読んだことがあります。一般的なユーザーをランダムにサンプリングするのではなく、「専門家」の意見を得ているため、これには明らかに大きな欠点があります。さらに、人がフォーカスグループに定期的に参加したり、生計を立てたりしている場合、そのフィードバックは過去のセッションの影響を受ける可能性があります。

しかし、私はこの問題をユーザーのテストと何ら変わりはないと考えています。ベータテストへの参加やユーザーテスターに​​なるためのお金を提供する広告をよく目にします。 usertesting.comのようなサイトは、テストサイトにサインアップしたユーザーに現金報酬(サイトあたり10ドル)を提供します。そのため、おそらく彼らのテスト対象者は、より多くのお金を稼ぐために多くの研究に参加している「プロフェッショナル」ユーザーテスターに​​なるでしょう。 。 UserZoomのような他の会社は、ユーザーの募集を「専門のパネル会社」に調達しています。

では、ユーザーテスターに​​お金を払うのは良い習慣なのでしょうか、それとも、そこから得られるデータが損なわれるのでしょうか。それが良い方法ではない場合、偏見のない被験者を多数取得するための代替策はありますか?抽選はより効果的ですか?

多くのサイトでは、ユーザーテストに参加するビジターをランダムに選択しているだけです。しかし、十分なベータテスターを採用するのに十分なトラフィックがない新しいサービスのユーザビリティテストを実施するために雇われている場合はどうでしょうか。

12
Lèse majesté

UIの問題の90%を最初の5人程度のテストユーザーが発見できるという最近の調査について読みました。 (残念ながらリンクを思い出せません。誰か他の人が覚えているかもしれません)これは私の経験にも表れますが、トリックは、前述のように、ユーザーがUIと意図に慣れていないことを確認し、それらはプロセス全体を通して汚染されていません。

あなたはそれほど多くを必要としないので、友人や両親の5-10人の友人を見つけること、または(上記のように)感謝し、後で素敵なランチを提供することができることは何も難しくないはずです。実際の現金支払いは、不必要なストレスと期待をプロセスに追加しますが、これは最終的な通常のユーザーが経験することではありません。理想的には、テストはかなりカジュアルな場所でも行われるので、ある種のインテリジェンステストとしてステージを恐れたり考えたりせず、通常の場合よりもよくある質問などに注意を向けません。

4
spongefile

代表的なサンプルの選択は難しい問題です。いずれにしても、テスターあたり10ドルという予算では解決できません。これはallポーリングに影響します。

必要なのは、実際にはnot一般的な人口を代表するサンプルです。ユーザーを表すサンプルが必要です。それははるかに簡単です。サンプルにバイアスがない必要はありません。テスト対象のシステムに関連する側面にバイアスがある必要はありません。

このように考えてください。いくつのサイトについて、これまでコンピュータにアクセスしたことがない中国の稲作農家を含める必要がありますか?何百万ものそれらが存在する必要がありますが、それでも、あなたはそれらを必要としません。 (申し訳ありませんが、李さん、あなたをステレオタイプ化してくれました)

では、考えてみてください。潜在的なユーザーは何ですか?どのように人々はあなたのシステムを使っていますか?一般的なユーザーのユースケースはありますか?その中から代表的な架空のユーザーを選びます。例:

  • 「ガジェットジャンキーパワーユーザー」
  • 「Luddite CEO」
  • 「彼の上司は彼を作り、彼はそれが好きではありません。」

その代表を探すようにしてください。 CEOである必要はありませんが、多くのことを頭に置いてコンピューターに精通しているわけではありません。 (お母さん?それはあなたですか?)


最終的な質問について:

しかし、十分なベータテスターを募集するのに十分なトラフィックがない新しいサービスのユーザビリティテストを実施するために雇われている場合はどうなりますか?

友達に聞いて、後で夕食に誘ってください。

8
peterchen

あなたの最後の質問に関して、家族や友人は別として、無料の求人広告サービスを使用しています。 craigslist 潜在的なユーザーをランダムに検索します。

重要なのは、filterに興味のある応募者に(電話をかける前に)方法に関連するいくつかの重要な質問(オンライン調査または電話)を尋ねることです。サンプルを「グループ化」します。たとえば、「以前にオンライン登録を完了したことがありますか?」などの質問。新しい登録フローの有効性を測定する場合は、非常に重要です。テストの目的や対象読者に応じて、その単純な質問に基づいて最初のフィルタリングを行うことができます。

この方法は、より個人的なものであり、テスト対象のサービスについて宣伝する機会にもなります。これは、新しいサービスであると想定した場合に特に役立ちます。

私は通常、参加者にギフトカードを授与しました。はい、私は彼らに前もって話しました。

8
moey

学術研究では、一連の研究参加者を獲得することも同様に問題であり、簡単な答えはありません。本質的に、何らかの外部報酬を提供すると、報酬に惹かれるある種の人々を惹きつけます。報酬を提供しない場合、あなたは何もせずにあなたを助ける用意がある人々だけを引き付けるでしょう。

唯一の本当の答えは、あなたのためにどんな方法でも人を集める必要があるということですが、サンプルの考慮事項に基づいて結論を出すようにしてください。

2