狠狠撸

狠狠撸Share a Scribd company logo
Chapter 3 - Planning
IWASAKI, Yusuke
発表者について
こんにちは
要するに
ユーザビリティ調査の設計手法を説明する。
(主にどんな指標を設定すればよいかの解説)
● 調査目的の設定
● ユーザーゴールの設定
● 測定指標の設定
● 評価手法の設定
● その他の設定(予算/スケジュール、関係者、データ収集?抽出手法)
↑これらを(体系的に)紹介するのが第3章の内容。
調査目的の設定
ユーザーゴールの設定
測定指標の設定
調査手法の設定
その他の設定
調査目的の設定
ユーザーゴールの設定
測定指標の設定
調査手法の設定
その他の設定
Formative / Summative
調査目的の設定
2種類に大別される
● Formative(形成的ユーザビリティ調査)
● Summative(総括的ユーザビリティ調査)
調査目的の設定 - 2 ways of approaches
Formative(形成的)
● 開発途中のプロダクトを定期的
に評価し、最高のものに仕上げ
ていく目的。
● いわゆる中間試験、期末試験み
たいなもの。Formative Testに近
い。
Summative(総括的)
● 完成したプロダクト(全体また
は一部)の目標達成度合いを評
価する目的。
● いわゆる総まとめテスト、全国
統一学力テストみたいなもの。
Summative Testみたいな。
調査目的の設定 - 目的設定例
Formative(形成的)
● ユーザーがよくやる誤りを知り
たい
● 何がユーザーを満足させ、何が
ユーザーをいらだたせるのかを
知りたい
● 開発工程でのデザイン修正は効
果が有ったのかを知りたい
● リリース後も発生するであろう
課題を知りたい
Summative(総括的)
● ユーザビリティ上の目的が達成
されたのかを知りたい
● 全体的なユーザビリティを評価
したい
● 競合と比較してどうなのかを知
りたい
● 追加リリースの効果を知りたい
調査目的の設定
ユーザーゴールの設定
測定指標の設定
調査手法の設定
その他の設定
Formative / Summative
Performance / Satisfaction
ユーザーゴールの設定
計測する指標は2種類に大別される
● 客観的に計測可能な指標(Performance)
● 客観的に計測できない指標(Satisfaction)
ユーザーゴールの設定 - 客観的/主観的指標
Performance - 客観的指標
● プロダクトとのinteractionを通し、
実際に行ったことに関連する指
標
● 使い道が明らか/選択の余地が
無いプロダクトでは重要
● 完了できたか/時間/クリック
数/エラー件数/…
※Ch.4で詳しく説明
Satisfaction - 主観的指標
● そのユーザーが感じること、発
言する事に関連する指標
● 大半のWebサービス、ソフトウ
ェア、消費者向けプロダクトに
重要
● 使いやすさ/わかりやすさ/有
効性/満足度/学びやす
さ、???
※Ch.6で詳しく説明
ユーザーゴールの設定 - 客観的/主観的指標
PerfomanceとSatisfactionに相関関係はあるか
└相関関係があるなら、片方の指標だけ取れば良いとなる
→ありそうだけど断言は出来ないから両方の指標を見る
▼User Satisfaction vs. Performance Metrics
http://www.nngroup.com/articles/satisfaction-vs-performance-metrics/
調査目的の設定
ユーザーゴールの設定
測定指標の設定
調査手法の設定
その他の設定
Formative / Summative
Performance / Satisfaction
(10 sample scenarios)
測定指標の設定
具体的に測定指標を決める上で、
10種類の典型的な調査シナリオ毎の例を紹介する(省略)。
処理手続きの完了 プロダクト比較
同一プロダクトの頻繁な使用の評価 ナビゲーション/IAの評価
認識度合いの向上 問題の発見
ユーザビリティの最大化 全体的にポジティブなUXの提供
細かい変更による影響度合い評価 代替デザインの比較
評価指標の設定
(Measuring the User Experience Second Edition, P46)
評価指標の設定
↑意識していないですが、過去に実施したテストで該当する
項目は(自分の場合)おおよそこんな感じでした
←ABテストで実はよく利用していました
←新規プロダクトの開発で使用
←UI改善を目的とした評価で使用
←UI改善を目的とした評価で使用
←UI改善を目的としたユーザテストで使用
調査目的の設定
ユーザーゴールの設定
測定指標の設定
調査手法の設定
その他の設定
Formative / Summative
Performance / Satisfaction
(10 sample scenarios)
Moderated / Unmoderated / Online Surveys
調査手法の設定
大まかに3種類
● ラボ型テスト
● オンライン型テスト
● オンライン型调査
調査目的の設定
ユーザーゴールの設定
測定指標の設定
調査手法の設定
その他の設定
Formative / Summative
Performance / Satisfaction
(10 sample scenarios)
Moderated / Unmoderated / Online Surveys
Budgets / Schedule / Recruiting / Data Processing
その他の設定
● 予算とスケジュール
o 一般的なビジネスマナーで何とかなる
? 大規模になればなるほど綿密に
? オンライン調査は設計とデータクレンジング?
分析に時間を割かれる
その他の設定
● 参加者
o 形成的アプローチでは6~8人で良い
? グループが複数存在する場合、各グループ4人程
度
o 包括的アプローチでは50~100人程度
? 20人程度でも良いが、当然ながら精度は落ちる
? 細かいデザインの変更の場合は100人程度必要
←詳細はこれを読みましょう
● “Observing the User Experience - A
Practitioner’s Guide to User Research
(Second Edition)”
o 前回の勉強会でやりました
? ソヨンさんによるレポート:
http://goo.gl/mMoyUz
? Kindleで読めます
その他の設定
● データの収集
o 少人数ラボテストはスプレッドシートやエクセルで
十分
? 最近はOffice OnlineでExcelファイルもクラウドで編集可能
? 簡単に結果の記入が出来るようにカスタマイズすると便利
o 大人数を対象としたテストは自動化できるように
? データのexport/importの手段も備える
その他の設定
● データのクレンジング
o rawデータをそのまま解析に持ち込む前にデータの
洗浄や正当性の確認を行う。
o 基本的に行うのは以下。
? フィルタリング、新しい変数の作成、回答内容の検証、一貫性の
確認、データの移行
? メトリクスが少なければ1hで終わる。
? メトリクスが多く、かつオンライン調査の場合は確認の手間がか
かるためより時間がかかる。2週間に及ぶ場合も。
? 利用するツールの動作が適切かも確認したほうが良い
調査目的の設定
ユーザーゴールの設定
測定指標の設定
調査手法の設定
その他の設定
Formative / Summative
Performance / Satisfaction
(10 sample scenarios)
Moderated / Unmoderated / Online Surveys
Budgets / Schedule / Recruiting / Data Processing
所感
● 基本的な要素なので本来は全て覚えるべきだと思われる。
● 社内に落とし込む場合、デザイナー、特にインタラクションデザイン担当
に対して共有するのが第一。その後実務レベルまで落としこみノウハウを
形成???の流れになりそう。
● ユーザ調査を行う上で10の典型例は参考として役に立つ。調査設計の段階
で典型例を眺める→合致しそうなものをピックアップ→具体的に検討を行
う、というプロセスを踏む事で(自分の様な)経験の浅い人に対する指針
として有効。
o 新規プロダクト開発時に細かくラボテストを繰り返してUIの改修を図
るというプロセスを良く行うのですが、その時に利用している指標が
大きく乖離していなくて個人的には安心しました
● Planningという側面だとスケジュール設定や調査手法の項目がこの章では
大きく欠落しているので、他の資料による補足が必要。
おわり
(ご静聴ありがとうございました)

More Related Content

Featured (20)

2024 Trend Updates: What Really Works In SEO & Content Marketing
2024 Trend Updates: What Really Works In SEO & Content Marketing2024 Trend Updates: What Really Works In SEO & Content Marketing
2024 Trend Updates: What Really Works In SEO & Content Marketing
Search Engine Journal
?
Storytelling For The Web: Integrate Storytelling in your Design Process
Storytelling For The Web: Integrate Storytelling in your Design ProcessStorytelling For The Web: Integrate Storytelling in your Design Process
Storytelling For The Web: Integrate Storytelling in your Design Process
Chiara Aliotta
?
Artificial Intelligence, Data and Competition – SCHREPEL – June 2024 OECD dis...
Artificial Intelligence, Data and Competition – SCHREPEL – June 2024 OECD dis...Artificial Intelligence, Data and Competition – SCHREPEL – June 2024 OECD dis...
Artificial Intelligence, Data and Competition – SCHREPEL – June 2024 OECD dis...
OECD Directorate for Financial and Enterprise Affairs
?
How to Leverage AI to Boost Employee Wellness - Lydia Di Francesco - SocialHR...
How to Leverage AI to Boost Employee Wellness - Lydia Di Francesco - SocialHR...How to Leverage AI to Boost Employee Wellness - Lydia Di Francesco - SocialHR...
How to Leverage AI to Boost Employee Wellness - Lydia Di Francesco - SocialHR...
SocialHRCamp
?
2024 State of Marketing Report – by Hubspot
2024 State of Marketing Report – by Hubspot2024 State of Marketing Report – by Hubspot
2024 State of Marketing Report – by Hubspot
Marius Sescu
?
Everything You Need To Know About ChatGPT
Everything You Need To Know About ChatGPTEverything You Need To Know About ChatGPT
Everything You Need To Know About ChatGPT
Expeed Software
?
Product Design Trends in 2024 | Teenage Engineerings
Product Design Trends in 2024 | Teenage EngineeringsProduct Design Trends in 2024 | Teenage Engineerings
Product Design Trends in 2024 | Teenage Engineerings
Pixeldarts
?
How Race, Age and Gender Shape Attitudes Towards Mental Health
How Race, Age and Gender Shape Attitudes Towards Mental HealthHow Race, Age and Gender Shape Attitudes Towards Mental Health
How Race, Age and Gender Shape Attitudes Towards Mental Health
ThinkNow
?
AI Trends in Creative Operations 2024 by Artwork Flow.pdf
AI Trends in Creative Operations 2024 by Artwork Flow.pdfAI Trends in Creative Operations 2024 by Artwork Flow.pdf
AI Trends in Creative Operations 2024 by Artwork Flow.pdf
marketingartwork
?
Skeleton Culture Code
Skeleton Culture CodeSkeleton Culture Code
Skeleton Culture Code
Skeleton Technologies
?
PEPSICO Presentation to CAGNY Conference Feb 2024
PEPSICO Presentation to CAGNY Conference Feb 2024PEPSICO Presentation to CAGNY Conference Feb 2024
PEPSICO Presentation to CAGNY Conference Feb 2024
Neil Kimberley
?
Content Methodology: A Best Practices Report (Webinar)
Content Methodology: A Best Practices Report (Webinar)Content Methodology: A Best Practices Report (Webinar)
Content Methodology: A Best Practices Report (Webinar)
contently
?
How to Prepare For a Successful Job Search for 2024
How to Prepare For a Successful Job Search for 2024How to Prepare For a Successful Job Search for 2024
How to Prepare For a Successful Job Search for 2024
Albert Qian
?
Social Media Marketing Trends 2024 // The Global Indie Insights
Social Media Marketing Trends 2024 // The Global Indie InsightsSocial Media Marketing Trends 2024 // The Global Indie Insights
Social Media Marketing Trends 2024 // The Global Indie Insights
Kurio // The Social Media Age(ncy)
?
Trends In Paid Search: Navigating The Digital Landscape In 2024
Trends In Paid Search: Navigating The Digital Landscape In 2024Trends In Paid Search: Navigating The Digital Landscape In 2024
Trends In Paid Search: Navigating The Digital Landscape In 2024
Search Engine Journal
?
5 Public speaking tips from TED - Visualized summary
5 Public speaking tips from TED - Visualized summary5 Public speaking tips from TED - Visualized summary
5 Public speaking tips from TED - Visualized summary
SpeakerHub
?
ChatGPT and the Future of Work - Clark Boyd
ChatGPT and the Future of Work - Clark Boyd ChatGPT and the Future of Work - Clark Boyd
ChatGPT and the Future of Work - Clark Boyd
Clark Boyd
?
Getting into the tech field. what next
Getting into the tech field. what next Getting into the tech field. what next
Getting into the tech field. what next
Tessa Mero
?
Google's Just Not That Into You: Understanding Core Updates & Search Intent
Google's Just Not That Into You: Understanding Core Updates & Search IntentGoogle's Just Not That Into You: Understanding Core Updates & Search Intent
Google's Just Not That Into You: Understanding Core Updates & Search Intent
Lily Ray
?
How to have difficult conversations
How to have difficult conversations How to have difficult conversations
How to have difficult conversations
Rajiv Jayarajah, MAppComm, ACC
?
2024 Trend Updates: What Really Works In SEO & Content Marketing
2024 Trend Updates: What Really Works In SEO & Content Marketing2024 Trend Updates: What Really Works In SEO & Content Marketing
2024 Trend Updates: What Really Works In SEO & Content Marketing
Search Engine Journal
?
Storytelling For The Web: Integrate Storytelling in your Design Process
Storytelling For The Web: Integrate Storytelling in your Design ProcessStorytelling For The Web: Integrate Storytelling in your Design Process
Storytelling For The Web: Integrate Storytelling in your Design Process
Chiara Aliotta
?
How to Leverage AI to Boost Employee Wellness - Lydia Di Francesco - SocialHR...
How to Leverage AI to Boost Employee Wellness - Lydia Di Francesco - SocialHR...How to Leverage AI to Boost Employee Wellness - Lydia Di Francesco - SocialHR...
How to Leverage AI to Boost Employee Wellness - Lydia Di Francesco - SocialHR...
SocialHRCamp
?
2024 State of Marketing Report – by Hubspot
2024 State of Marketing Report – by Hubspot2024 State of Marketing Report – by Hubspot
2024 State of Marketing Report – by Hubspot
Marius Sescu
?
Everything You Need To Know About ChatGPT
Everything You Need To Know About ChatGPTEverything You Need To Know About ChatGPT
Everything You Need To Know About ChatGPT
Expeed Software
?
Product Design Trends in 2024 | Teenage Engineerings
Product Design Trends in 2024 | Teenage EngineeringsProduct Design Trends in 2024 | Teenage Engineerings
Product Design Trends in 2024 | Teenage Engineerings
Pixeldarts
?
How Race, Age and Gender Shape Attitudes Towards Mental Health
How Race, Age and Gender Shape Attitudes Towards Mental HealthHow Race, Age and Gender Shape Attitudes Towards Mental Health
How Race, Age and Gender Shape Attitudes Towards Mental Health
ThinkNow
?
AI Trends in Creative Operations 2024 by Artwork Flow.pdf
AI Trends in Creative Operations 2024 by Artwork Flow.pdfAI Trends in Creative Operations 2024 by Artwork Flow.pdf
AI Trends in Creative Operations 2024 by Artwork Flow.pdf
marketingartwork
?
PEPSICO Presentation to CAGNY Conference Feb 2024
PEPSICO Presentation to CAGNY Conference Feb 2024PEPSICO Presentation to CAGNY Conference Feb 2024
PEPSICO Presentation to CAGNY Conference Feb 2024
Neil Kimberley
?
Content Methodology: A Best Practices Report (Webinar)
Content Methodology: A Best Practices Report (Webinar)Content Methodology: A Best Practices Report (Webinar)
Content Methodology: A Best Practices Report (Webinar)
contently
?
How to Prepare For a Successful Job Search for 2024
How to Prepare For a Successful Job Search for 2024How to Prepare For a Successful Job Search for 2024
How to Prepare For a Successful Job Search for 2024
Albert Qian
?
Trends In Paid Search: Navigating The Digital Landscape In 2024
Trends In Paid Search: Navigating The Digital Landscape In 2024Trends In Paid Search: Navigating The Digital Landscape In 2024
Trends In Paid Search: Navigating The Digital Landscape In 2024
Search Engine Journal
?
5 Public speaking tips from TED - Visualized summary
5 Public speaking tips from TED - Visualized summary5 Public speaking tips from TED - Visualized summary
5 Public speaking tips from TED - Visualized summary
SpeakerHub
?
ChatGPT and the Future of Work - Clark Boyd
ChatGPT and the Future of Work - Clark Boyd ChatGPT and the Future of Work - Clark Boyd
ChatGPT and the Future of Work - Clark Boyd
Clark Boyd
?
Getting into the tech field. what next
Getting into the tech field. what next Getting into the tech field. what next
Getting into the tech field. what next
Tessa Mero
?
Google's Just Not That Into You: Understanding Core Updates & Search Intent
Google's Just Not That Into You: Understanding Core Updates & Search IntentGoogle's Just Not That Into You: Understanding Core Updates & Search Intent
Google's Just Not That Into You: Understanding Core Updates & Search Intent
Lily Ray
?

Measuring the User Experience, Chapter 3