Доклад про сравнительное юзабилити-тестирование, который я рассказывала на конференции SQADays-16 в ноябре 2014 года. В докладе я рассказывала о том, как проводить сравнительное юзабилити-тестирование и использовать его для сравнения одного интерфейса с другим. Как с помощью этой методики можно сравнивать разные варианты одного и того же интерфейса, разные варианты дизайна, работающую версию интерфейса с прототипом, свой интерфейс с интерфейсом конкурентов и многое другое. В конце доклада я показывала живой пример проекта.

1. Выбирай
или
проиграй
Сравнительное юзабилити тестирование

2. Сравнение — великая движущая сила,
которая побуждает нас к соревнованию и
самосовершенствованию.
Александр Вертинский

3. Зачем?
• Сравнить себя нового с
собой в прошлом
• Выбрать между
несколькими
вариантами
• Сравнить себя с
другими

4. Что сравниваем?
• Новый интерфейс со
старым
• Разные варианты
прототипов одного
интерфейса
• Сравнение интерфейса
с конкурентами

5. Кого тестируем?
Несколько групп:
• Существующие
пользователи
• Новые пользователи
• Лояльные и не лояльные
• Опытные/неопытные

6. Особенности
тестирования?
• 1 сценарий на 2 интерфейса
• Рекомендую 2 интерфейса
на 1 пользователя
• Если сравнивается более 2
интерфейсов или
тестирование длинное, то 1
человек – 1 интерфейс
Миленько

7. Сколько человек?
• Чем больше тем лучше, но не меньше 8 человек на
один интерфейс

8. Если 1 пользователь 2 интерфейса
Чередуем интерфейсы
АВ ВА АВ ВА АВ ВА
(контрбалансировка)

9. Критерии сравнения?
• Успешность выполнений заданий
• Количество ошибок юзабилити
• Количество непонятных формулировок
• Время выполнения заданий
• Удовлетворенность
• Семантический дифференциал
*Можно спросить конечно, какой интерфейс больше понравился, но одного
этого вопроса недостаточно

10. Успешность выполнения заданий
= сколько человек выполнили задание в
интерфейсе 1 и в интерфейсе 2
Если разница велика, то это знак

11. Количество ошибок интерфейса
Фиксируем проблемы. Ранжируем по критичности.
Ошибке присваиваем вес:
• 1 – незначительная
• 2 – значительная
• 3 – критичная, приведшая к невыполнению задания

12. Время выполнения заданий
• Параметр измеряется там, где
важна скорость выполнения
заданий. Чем быстрее, тем лучше
• На развлекательных сайтах
ситуация может быть обратной.
Чем дольше остается на сайте тем
лучше. Здесь время не измеряем.

13. Удовлетворенность
• После каждого задания
• В конце тестирования
Оцените удобство по 5-балльной шкале
Оцените достаточность информации по 5-
балльной шкале
Оцените сложность интерфейса по 5-балльной
шкале и др.

14. Семантический дифференциал?
Удобный Неудобный
Современный Устаревший
Простой Сложный
Дружелюбный Безразличный
* Рекомендуется к применению на большой выборке пользователей

15. Живой пример:
Сайт знакомств.
Какой вариант профиля лучше?

16. vs
1 2

17. vs ЛУЧШЕ
1 2

18. «…Мы имеем право
сравнивать себя
лишь с собою
вчерашним,
соперничать с самим
собою…»

19. Мария Чайкина mchaykina@gmail.com
http://www.slideshare.net/fayona
Зима близко…
Группа UX-единомышленников, увлеченных своим делом
UXIFY.IT
www.uxify.it