UX研究の回答者を遞択する際の埮劙さ





こんにちは、Habr 私の名前はナタリア・スプロギスです。Mail.RuGroupでUX研究の指揮を執りたす。 今日は、私たちがプロゞェクトを支揎できなかった人々に぀いお話をしたいず思いたす。 UX研究の参加者を芋぀けるこずは、むベント党䜓の成功の瀎です。 たた、「どのように回答者を探しおいたすか」ずいう質問の数から刀断するず、私たちの研究者が䌚議で受け取るこずは、これは関連するトピックです。 誰が呌び出される必芁があるか、いく぀あるべきか、そしおそれらを芋぀ける方法を把握しおみたしょう。 䞻に質の高い研究、特に䜿いやすさのテストのために募集するこずです。



パヌト1。誰ですか



誰が研究に招埅したすか



おそらく最も重芁なこずは、研究に正確に必芁な人を決定するこずです。 これは、有胜なスクリプトず同じくらい重芁です。 補品を近隣の郚眲のプログラマヌず母芪に芋せるず、たったく異なる結果が埗られたす。 さらに、お母さんにはもっず問題があるず思いたすが、これは問題があなたが本圓に修正する必芁のある問題になるずいうこずを意味するものではありたせん。 あなたの母芪ずプログラマの隣人の䞡方が単にあなたのナヌザヌではないかもしれないからです。



人口統蚈に基づいお構築しないでください。 倚くの堎合、最初に補品を䜿甚し、マネヌゞャヌずテストの察象者に぀いお話し合うず、ナヌザヌの次のような肖像がわかりたす。「女性は60、ほずんどが25〜35歳のMail.Ruナヌザヌです」。 これは䟡倀があり有甚なデヌタですが、研究プロファむルにはなりたせん。 Mail.Ru Webメヌルでレタヌを䜜成するためにペヌゞのデザむンをテストするこずにしたず想像しおください。 そしお、統蚈によるず性別ず幎霢別に配垃されたMail.Ruにメヌルボックスを持っおいるナヌザヌのテストを呌びかけたした。 おそらく、そのうちの1人はたったく手玙を曞かず、郵送のみを受け取り、誰かがモバむルクラむアントのみを䜿甚し、誰かがこのボックスをメむンにしないこずが刀明したす。 これらの人々の経隓は圹に立たないでしょう。 これは、人口統蚈に関する知識を完党に無芖する必芁があるこずを意味するものではなく、これらの基準は基本的なものではありたせん。



私たちは研究課題から出発したす。 回答者を遞択するための䞻なパラメヌタは、調査察象の補品たたは機胜の経隓です。 この特性によれば、3぀のグルヌプが私たちにずっお興味深いかもしれたせん。





Kino Mail.RuプロゞェクトでオンラむンTVプログラムの新しいデザむンをテストするずしたす。 珟圚のバヌゞョンのプロゞェクトのナヌザヌを招埅しお、䜿い慣れたスクリプトを快適に実行できるようにするこずが重芁です。 たた、競争力のあるオンラむンテレビ番組のナヌザヌにも興味があるかもしれたせん。 さらに、新聞や雑誌で番組を芋おいる人、぀たりそのようなオンラむンサヌビスの䜿甚経隓がない人を芋るのも良いこずです。



「補品䜓隓」だけではありたせん。 採甚を成功させるには、「補品ナヌザヌ」の意味を指定する必芁がありたす。 このテストに最適なナヌザヌを説明すればするほど、興味深い結果が埗られる可胜性が高くなりたす。 たず、アクティビティ呌び出し頻床、セッション時間、さたざたな機胜の䜿甚および補品の䜿甚機胜に぀いお考えたす。 たずえば、テレビ番組のテストに関する䞊蚘の䟋では、さたざたなテレビの関心を持぀人々に電話するこずが重芁だず考えたした。 たずえば、テレビ番組を定期的に芖聎する人には、いく぀かのシナリオずむンタヌフェむス芁件がありたす。芋逃したシリヌズの説明を読んで、リプレむがい぀行われるかを芋぀けたす。 そしお、スポヌツ攟送を芋おいる人は完党に異なるものを持っおいたす倜に攟送がありたす、それが面癜いずきに芋逃さないこず、リマむンダヌを持぀こずが重芁です。



経隓の浅いナヌザヌには泚意しおください。 倚くの堎合、経隓の浅いナヌザヌがどのように補品を操䜜しおいるかを確認するこずが重芁です。 結局のずころ、これは、新しい聎衆のプロゞェクトに最初に䌚った瞬間をシミュレヌトしたす。 したがっお、「経隓の浅い」聎衆も思慮深く遞ばなければなりたせん。 理想的には、これらは珟圚の補品を䜿甚しない人だけではありたせん。 そしお、朜圚的にそれを必芁ずしおいる人々。 たずえば、か぀おOdnoklassnikiでの登録テストに倱敗したした。 参加者はタスクの完了を拒吊したした。 圌女はビッグブラザヌの支配を恐れおおり、テストでもこれを行う準備ができおいないため、圌女は意図的に゜ヌシャルネットワヌクに登録しおいないこずが刀明したした。 もちろん、これは極端なケヌスです。 しかし、察象分野にたったく関心のない人に電話をかけるず、おそらく圌らの仕事は機械的なものになりたす。 だから、圌らはあなたにはるかに少ない知識をもたらすでしょう。 たずえば、着信メヌルを自動的に゜ヌトできるMail.Ru Mailの「ボックスの解䜓」サヌビスをテストするために、メヌルに倚数のサブスクリプションが散らばっおいるずいう事実に苊しんでいる人々を意図的に呌び出したした。 ナヌザヌは、自分甚に䜜成されたテストボックスではなく、独自のボックスを解析したした。 したがっお、実際の䟋で、サヌビスが郵䟿物に関する問題を本圓に解決するかどうかを確認し、各フォヌムの明瞭床を機械的にチェックするだけではありたせんでした。



その他の䞀般的なパラメヌタヌ。 あなたが持っおいる研究参加者のその他の芁件は、垞に特定のタスクに䟝存したす。 経隓ず人口統蚈に加えお、次のこずもよくありたす。





友人や同僚のテスト



時々、研究者は次のように蚀う顧客に遭遇したす。 お金をかけお同僚をテストしないようにしたしょう。」 このアむデアは非垞に魅力的で、同僚や友人が無料であなたを助けおくれるので、簡単に採甚できたす。 最終的に、それらの䞭には、䜿甚䞭の経隓のパラメヌタに埓っお私たちに合った人さえいたす。 このようなテストは、特に䞭間テストずしお、生呜の資栌がありたすが、次の危険に留意する必芁がありたす。





それにもかかわらず、たったくテストしないよりも、同僚や友人に電話する方が良いです。 このようなテストは通垞​​、高速で安䟡であり、間違いなくプラスです。 䞻なものは、補品の芖聎者に可胜な限り近い人々を芋぀けようずするこずであり、たた、蚀葉や栌付けにあたり泚意を払わず、問題や行動に集䞭するこずです原則ずしお、あらゆるテストに関連したす。



パヌト2。



倚くの人が心配する質問調査結果を信頌できるようにするために、回答者を䜕人ずるべきか



「ほんの䞀握りのナヌザヌ」



ナヌザビリティの第䞀人者であるゞェむコブ・ニヌルセンは、20幎以䞊前に、5人ですべおのナヌザビリティ・テストに十分であるずいう考えを広め始めたした Jakob Nielsen and Thomas Landauer 、1993。 この声明は倚くの頭にしっかりず根ざしおいたす。 タスクに関係なく、誰かが垞に5人を連れ始めたした。 他のナヌザヌは、このような小さなサンプルの調査に基づいおいるため、すべおのナヌザビリティ調査に懐疑的になりたした。



マゞックナンバヌ5がどこから来たのか芋おみたしょう。 実践が瀺すように、ナヌザビリティテストの最初の数人の参加者の埌、新しく発芋された問題の数は枛少したす。 Nielsenは、5人のサンプルがむンタヌフェヌスの問題の85を怜出できるず仮定しおいたす5人のナヌザヌでテストするだけでよい理由 。 ぀たり、より倚くの人を連れお行くのは実際的ではないかもしれたせん。



実際、ニヌルセンが話す85が最も深刻で頻繁な問題です聎衆の31に圱響を䞎える問題に぀いおはその数が圓おはたりたす。 䜕らかのむンタヌフェむスを䜿甚する堎合、倚くのナヌザヌが遭遇する倚くの呚波数の問題たずえば、ゲヌムに登録するずきの問題、およびさたざたな䜎い呚波数ですが、非垞に重倧な問題が含たれおいる可胜性がありたす。 たずえば、5人の芖聎者の15が盎面しおいる問題は、すでに50の確率で怜出されたす。 サンプルサむズを倧きくするず、問題の発生頻床が䜎くなる可胜性が高くなりたす。 䜿いやすさの統蚈的重芁性の問題に積極的に取り組んでいるゞェフ・サりロは、圌の蚘事「 なぜ5人のナヌザヌでテストするだけでよいのか」説明でこの問題に぀いお詳しく議論しおいたす 。



5人の回答者の申し立おの人気にもかかわらず、倚くの研究者は、より倚くの参加者を調査に参加させるこずを奜みたす。 2012幎にゞェフサりロは、圌のブログの玄100人の読者にアンケヌトを実斜したした。 圌は、実際にさたざたな䌁業の研究に招埅された回答者の数を調べようずしたした。 調査では、研究の81以䞊が5人以䞊䞭倮倀10のサンプルに基づいおいるこずが瀺されたした 実際にテストしおいるナヌザヌの数は 。



人数を決定するもの



5人で十分な堎合。 小さなサンプルでは、​​最も重芁な問題を芋぀けるこずが重芁であり、テストに含めるこずができる機胜の量が少ない堎合、プロトタむプず抂念をテストするこずをお勧めしたす。 確かに、プロトタむプをテストするずきは最も明らかな問題のみが識別されるため、実装埌に远加のテストが必芁になるこずを芚えおおく必芁がありたす。 たた、3〜5人のサンプルは、反埩テストでうたく機胜したす。機胜をテストし、修正のために送信しおから、再床テストしたす。 これは䞀般的に、進行䞭の研究チヌムを持぀システムにずっお非垞に効果的な監査方法です。 したがっお、各反埩で、以前に芋぀かった問題が修正されたかどうかを確認し、新しい䜕かを芋぀ける機䌚がありたす。



もっず人が必芁なずき。





無理をしないでください。 サンプルを増やすこずを支持しお倚くの議論を行ったので、反察の極端にぶ぀からないように譊告したす。 質の高い研究宀の研究に぀いお話しおいるこずを忘れないでください。 たれに、このようなプロゞェクトで実際に24人以䞊が必芁になるこずがありたす。 平均しお、聎衆の䞻芁なグルヌプをカバヌし、ほずんどの問題を芋぀けるには10〜12人で十分です。 たずえば、人口統蚈孊的パラメヌタヌによっおサンプリングが倧幅に増加するこずはほずんどありたせん。



神話ず恐怖



「軜薄な研究 。 」 5人の回答者が垞に十分ずは限らないこずに気づきたしたが、UX研究は匕き続き高品質でした。 倚くの堎合、研究結果は倖郚の人々からの懐疑論に䌚いたす。 実際、数十人ずの䌚話に基づいお、費甚のかかる補品の倉曎を行うこずが提案されおいたす。 この点で、私は1冊の本で読んだ議論が次のように聞こえるのが本圓に奜きです。「このドアのデザむンを倉曎する䟡倀があるものを10人に尋ねるず、おそらく10の異なる答えが埗られたす。 10人にこのドアを通っお出お行くように頌むず、それがそこから明確であるかどうかがわかりたす。それを匕くか抌す必芁がありたす。 事実、UX研究は人々の意芋を研究するのではなく、圌らの行動を研究するずいうこずです。 私たちにずっお意芋を埗るこずが重芁な堎合、「たくさんの人がいお、たくさんの意芋がありたす」ので、十数人のナヌザヌはそれをするこずができたせん。 補品ずの盞互䜜甚の問題を芋぀けたい堎合は、少数の人々が、倚くのナヌザヌに特城的な行動䞊の問題や特城を特定するこずを蚱可したす。



「そしお、あなたの回答者がばかだずしたら」ナヌザヌが䜕らかのタスクに苊劎しおいる、たたは䜕らかの面で非識字を瀺しおいる堎合、テストを芋おいるチヌムはしばしば質問を提起したす。他の人は普通ですか答えは簡単です物議を醞す行動のすべおの偎面を他の人に確認する必芁がありたす。 1人ではなく、倚くの人が「愚か」であるこずが刀明するず、疑念は消えたす。 そのため、゜ヌシャルネットワヌクにリンクを投皿するサヌビスチヌムのテストの1぀で、倚くのナヌザヌがブラりザヌからリンクをコピヌする方法を知らないのはショックでした。 ゜ヌシャルネットワヌクで蚘事を共有するために、テスト参加者は蚘事の党文をコピヌするか、スクリヌンショットを共有するか、単に名前をコピヌしお、「じゃあ、友達がむンタヌネットで芋぀けたす」ず蚀った。 最初のそのような人はただ疑問を提起したしたおそらくそのような未経隓は圌の特城です。 しかし、5番目のナヌザヌの埌、すべおの疑念は消えたした。



パヌト3.方法



怜玢方法



調査に招埅するナヌザヌの数ずナヌザヌを理解したした。 しかし、どのようにそれらを探したすか オプションずは䜕か、それらの特別な点は䜕ですか



特別募集代理店



この方法は、研究者自身にずっお非垞に䟿利です。倚くの頭痛の皮を取り陀くからです。 ただし、萜ずし穎がありたす。 たず、代理店の仕事を支払わなければならないため、かなり倧きな予算を䜿い果たす必芁がありたす。 さらに、間違いなく「歩行者」の問題に遭遇したす。 垂堎調査は叀くから行われおいたす。 そしおこの業界では、䞖論調査やフォヌカスグルヌプなどに行っお生蚈を立おようずする人々の局党䜓が圢成されおいたす。これらの人々にずっお、最も重芁なこずは報酬を埗るこずです。 倚くの堎合、圌らはクォヌタに適応するために自分の経隓に぀いおうそを぀きたす。 そしお、テスト自䜓では、圌らはあなたを喜ばせるように振る舞いたすそしお再びあなたはそれらを呌び出したす。 その結果、圌らは研究目暙を理解しおいないため、圌らは䞀生懞呜に賞賛したり、補品を激しくoldったりし始めたす。 圌らがどのように振る舞いを埮調敎するかはそれほど重芁ではありたせん。 䞻なこずは、それが䞍自然になるこずです。 これらの人々に察凊する方法は、別の蚘事に専念できたす。 以䞋にいく぀かの提案を瀺したす。





パネル



あなたがオンラむン調査をしおいるなら、あなたはパネルを通しお募集に頌るこずができたす。 これらのサヌビスには、オンラむンアンケヌトに定期的に回答するか、オンラむンテストを受ける登録ナヌザヌの膚倧なプヌルがありたす。 あなたの仕事は、詊隓参加者を募集するスクリヌニングアンケヌトを䜜成するこずです。 代理店ず同様に、パネルメンバヌも芁件に適応しようずする可胜性があるため、これらの質問を適切に䜜成するこずが重芁です。 故意に誀った回答存圚しない補品などを含めお、それを遞択した人を切り捚おるこずが圹立぀堎合もありたす。 パネルメンバヌにずっお、あなたの研究はほずんど仕事であるこずを忘れないでください。 結局のずころ、圌らは1日にいく぀かの䞖論調査を通過したす。 これらのナヌザヌの䞭には、投祚をクリックしお報酬を埗ようずする「ハッカヌ」もいたす。 これらは、タスクの速さ、未解決の質問に察する回答の䞍足などによっお蚈算できたす。これらの機胜にもかかわらず、パネルを䜿甚するず、迅速に募集し、回答ず地理的範囲の倧芏暡なデヌタベヌスを取埗できたす。



自己募集



自分でナヌザヌを募集できたす。 これは骚の折れる䜜業であるこずを理解するこずが重芁です。 来る準備ができおいる人を芋぀けたずしおも、基準を明確にするために電話をかけ、郜合の良い時間、説明、リマむンダヌなどに同意するために倚くの努力ず時間が費やされたす。





フィヌルドリクルヌティング



15分以内の簡単で迅速なテストでは、混雑した堎所ですぐに採甚ず調査を行うこずができたす。 カフェやショッピングセンタヌにするこずができたす。 このオプションは、かなり幅広いナヌザヌがいる堎合に適しおいたす。 たずえば、ショッピングセンタヌで、1぀のプロゞェクトのさたざたな名前のバリ゚ヌションを持぀若者の関連付けを芋぀けたした。 補品で蚱可されおいる堎合、タヌゲットオヌディ゚ンス専甚の混雑した堎所を探すこずができたす。 たずえば、コンピュヌタヌクラブで小芏暡なゲヌム研究を行いたした。 より少ない倱敗を聞くために、小さな報酬お金たたはお土産を準備しおください。



組織の瞬間



回答者をどのように探しおも、芚えおおくべき組織䞊の問題がいく぀かありたす。 些现なこずでも面接を混乱させるこずがありたす。





おわりに



研究のための回答者の怜玢は、垞にむベント党䜓の䞭で最も面倒な郚分です。 しかし、これは「チヌト」するこずは絶察に䞍可胜な郚分であり、それがより少ないほうがたさしくそのケヌスはより良いです。 研究者が時間の取り決めに぀いおの心配を捚お、回答者に秘曞や機関を思い出させるのは、たったく普通のこずです。 ただし、必芁な人の蚈画段階ず回答者のスクリヌニングを決しお無芖しないでください。 .



All Articles