#72 Виды юзабилити-тестирований. Вводная

2,240 views
2,195 views

Published on

Какие основания есть для классификации, в чем отличия и когда что применить. Вводная

Published in: Technology
0 Comments
2 Likes
Statistics
Notes
  • Be the first to comment

No Downloads
Views
Total views
2,240
On SlideShare
0
From Embeds
0
Number of Embeds
0
Actions
Shares
0
Downloads
127
Comments
0
Likes
2
Embeds 0
No embeds

No notes for slide

#72 Виды юзабилити-тестирований. Вводная

  1. 1. Юзабилити-тестирование: типология, часть 1<br />72 вебинар UX Russia<br />АндрейСикорский<br />29 апреля 2010 года<br />
  2. 2. История вопроса<br />Мы уже говорили о немодерируемых удаленных исследованиях<br />Повышается интерес к пользовательской оценке<br />Периодически возникают вопросы «какие тестирования бывают» или «какой тип нам выбрать»<br />
  3. 3. Дисклеймер<br />Типизаций много (в зависимости от основания)<br />Есть много методов, которые часть специалистов формально относят к тестированиям, но эти методы таковым по факту не являются<br />Например, эвристическая оценка или Critical Incident Technique Analysis (CIT)<br />В конечном счете вопрос не в типах, а в том, чтобы все-таки провести оценку <br />
  4. 4. Что такое юзабилити-тестирование?<br />Экспериментальный метод, построенный на интервьюировании пользователей по заранее составленному сценарию и направленный на выяснение того, как пользователи используют продукт.<br />4<br />
  5. 5. Метрики тестирования<br />На основе ISO 9241-11<br />Эффективность<br />Продуктивность<br />Удовлетворенность<br />На основе деятельностного подхода<br />Эффективность деятельности (результаты)<br />Экономичность деятельности (затраты и ресурсы)<br />Надежность и безопасность деятельности (устойчивость, риски, негативные последствия)<br />Удовлетворенность деятельностью (отношение пользователя)<br />5<br />
  6. 6. Виды тестирования<br />6<br />
  7. 7. Два подхода к тестированию<br />7<br />
  8. 8. Методы тестирования<br />Эвристическая оценка (Heuristic Evaluation)<br />Удаленное (модерируемое) тестирование (Remote Testing)<br />Совместное обучение (Co-discovery Learning)<br />Коучинг (Coaching Method)<br />Измерение производительности (Performance Measurement)<br />Вопрос-ответ (Question-asking Protocol)<br />Ретроспективное тестирование (Retrospective Testing)<br />С комментатором (Shadowing Method)<br />Обучение (Teaching Method)<br />«Поток сознания» (Thinking Aloud Protocol)<br />8<br />
  9. 9. Remote Testing (moderated)<br />Цель:<br />Получить обратную связь при отсутствии прямого доступа к пользователям<br />Способ<br />Тестирующий и пользователь работают раздельно (в разных местах и/или в разное время)<br />Необходимые технологии:<br />Журналирование действий пользователя<br />Видеокамеры и голосовая связь или запись<br />Средства удаленного воспроизведения экрана пользователя<br />9<br />
  10. 10. Performance Measurement<br />Цель<br />Получить метрические характеристики качества приложения (для сравнения между версиями, продуктами)<br />Алгоритм<br />Определить цели тестирования в терминах критериев Usability<br />Выбрать наиболее важные показатели<br />Определить как эти показатели будут оцениваться количественно<br />
  11. 11. Метрики для performance measurement<br />Время, затраченное на выполнение задачи<br />Количество задач разного типа, которые можно выполнить в ограниченное время<br />Отношение успешных и ошибочных действий<br />Время, потраченное на восстановление после ошибки<br />Количество пользовательских ошибок<br />и т. д.<br />
  12. 12. Thinking Aloud Protocol<br />Цель<br />Получить представление о том, что пользователь думает и переживает в процессе работы<br />Способы<br />Critical response — пользователь должен озвучивать выполнение только заранее определенных задач<br />Periodic report — в случае, если задача трудна сама по себе, пользователь рассказывает о её выполнении после окончания.<br />12<br />
  13. 13. Question-asking Protocol<br />Цель<br />Собрать конкретную информацию по интересующим вопросам<br />Способ<br />Помимо того, что пользователи озвучивают свою работу, им задаются заранее подготовленные вопросы о продукте<br />Например, «Как Вы могли бы послать email из этой программы?»<br />13<br />
  14. 14. Shadowing Method<br />Цель<br />Не пропустить специфичные для предметной области проблемы<br />Не заставлять пользователя говорить<br />Способ<br />Один пользователь выполняет задания<br />Второй (эксперт в предметной области) комментирует usability-тестеру его работу.<br />14<br />
  15. 15. Retrospective Testing<br />Цель<br />Получить максимум обратной связи, изучить поведение – при этом не оказывать влияния на производительность<br />Способ<br />Пользователи обсуждают с usability-тестером видеозапись тестирования<br />Отвечают на вопросы, возникшие у тестера во время тестирования<br />Пользователь объясняет, что он делал, чего пытался добиться по видеозаписи<br />15<br />
  16. 16. Co-discovery Learning<br />Цель<br />Проверить, насколько просто научиться использовать продукт<br />Способ<br />Задания выполняют сразу два пользователя, помогающие друг другу<br />Пользователи должны быть знакомы и иметь предварительный опыт совместной работы<br />16<br />
  17. 17. Teaching Method<br />Цель<br />Проверить, насколько понятны примененные модели и насколько легко можно обучиться продукту<br />Способ<br />Один пользователь осваивает продукт<br />А потом объясняет новичку, как им пользоваться<br />17<br />
  18. 18. Coaching Methods<br />Цель<br />выявить трудности обучения продукту и проблемы документации<br />Выявить, какая информация необходима пользователям<br />Способ<br />Один тестер выступает в роли тренера, обучающего пользователя<br />Второй тестер наблюдает за общениемпользователя и первого тестера<br />18<br />
  19. 19. Вопросы определителя<br />Есть пользователи для проведения тестирования?<br />Доступны ли пользователи непосредственно?<br />Оцениваем производительность, а не впечатления людей?<br />Могут ли пользователи говорить (комментировать свою работу)?<br />Может ли другой пользователь комментировать работу пользователя, выполняющего тестовые задания?<br />Является ли юзабилити-специалист экспертом в предметной области?<br />19<br />
  20. 20. Определитель (1/3)<br />Heuristic Evaluation<br />Есть пользователи для <br />проведения тестирования<br />?<br />Доступны ли пользователи <br />ДА<br />НЕТ<br />непосредственно<br />?<br />ДА<br />НЕТ<br />Оцениваем производительность<br />, <br />Remote Testing<br />а не впечатления<br />?<br />ДА<br />НЕТ<br />Performance <br />Measurement<br />Могут ли пользователи говорить <br />(<br />комментировать свою работу<br />)<br />?<br />20<br />
  21. 21. Определитель (2/3)<br />Могут ли пользователи говорить <br />(<br />комментировать свою работу<br />)<br />?<br />Thinking Aloud <br />НЕТ<br />Protocol<br />ДА<br />Может ли другой пользователь <br />комментировать работу <br />Question<br />-<br />asking <br />пользователя<br />, <br />выполняющего <br />Protocol<br />тестовые задания<br />?<br />Shadowing<br />ДА<br />НЕТ<br />Method<br />Retrospective <br />Является ли тестер экспертом в <br />Testing<br />предметной области<br />?<br />21<br />
  22. 22. Определитель (3/3)<br />Является ли тестер экспертом в <br />предметной области<br />?<br />Co<br />-<br />discovery <br />ДА<br />НЕТ<br />Learning<br />Coaching <br />Method<br />Teaching <br />Method<br />22<br />
  23. 23. Материалы для освоения<br />Rubin, Jeffrey (1994) Handbook of Usability Testing. John Wiley and Sons, New York, NY<br />Dumas, JS, and Redish, Janice, A. (1999) Practical Guide to Usability Testing, Intellect Books.<br />http://www.usabilitynet.org/<br />http://otal.umd.edu/guse/testing.html<br />http://www.usabilityhome.com/FramedLi.htm<br />
  24. 24. Спасибо за внимание<br />

×