Нюансы проведения пользовательских тестирований мобильных приложений: как записать происходящее на экране, опыт тестирования прототипов, давать ли респонденту тестовый телефон, польза мобильного айтрекинга и проведение исследований в естественных условиях.

1. Пользовательские исследования
мобильных приложений
Наталия Спрогис, Mail.Ru Group

2. Наталия Спрогис, Руководитель
направления UX-исследований в
Mail.Ru Group
Занимаюсь пользовательскими
исследованиями более 5 лет

3. UX лаборатория Mail.Ru

4. Сегодня мы
поговорим про
UX исследования
Картинка Ben Aslett

5. В чем отличие от классических
тестирований?

6. 1
Свой телефон
или наш?

7. Раньше было критично

8. iPhone

9. Важна платформа

10. Размер имеет значение

11. 2
Тестирование
прототипов

12. Тестирование прототипов
•
•
•
•
Найти проблемы на ранней стадии
Протестировать концептуальные решения
Проверить понятность иконок
Исправлять итеративно

13. Пример: прототип Моего Мира
Кликабельный прототип создан дизайнером проекта
в Fireworks, открывали в режиме FullScreen в браузере

14. Расположение блоков

15. Спорные иконки

16. Подсказки

17. 3
Как записать
экран?

18. Почему не поступить как на ПК?

19. Почему не поступить как на ПК?

20. А как же жесты?

21. Приложения для iOs
$49.99 – Unlimited Access
UX RECORDER
$7.99 – 5 sessions
$59.99 – Unlimited pack

22. Приложения для iOs
Плюсы
• Не нужно дополнительное оборудование
• Комфортно для респондента
• Запись лица пользователя (picture in picture)
• Отображение базовых действий (нажатия на ссылки и скролл)
• Цена (есть бесплатная пробная версия)
Минусы
• Только для сайтов (UX Recorder), со сложностями для
приложений (Magitest)
• Записывает не все действия пользователя
• Технические сложности (тормозит, греется, долго выгружает,
ест батарею)
• Пока только iOs

23. Монтаж камеры к телефону

24. Сделай сам

25. Варианты самоделок

26. Готовое решение
Mr Tappy
$300 + камера

27. Монтаж камеры к телефону
Плюсы
• Хорошая картинка
• Недорого, если делать самим
Минусы
• Неудобно держать, особенно в одной руке
• Мешает респонденту
• Сложно сделать достаточно легким
• Чаще всего ограничивает возможность поворота телефона
при тесте, доступен только портретный вид

28. Document camera

29. Document camera
Плюсы
• Простая установка
• Более комфортно для респондента, можно держать
телефон в одной руке
Минусы
• Чуть хуже картинка, если респондент меняет угол
телефона к камере
• Респонденты часто предпочитают класть телефон на стол

30. Наш вариант

31. Наш вариант

32. Вторая камера

33. На выходе

34. Важные нюансы
Уменьшайте яркость телефона при записи

35. Важные нюансы
Следите за освещением, лампы создают
блики на экране

36. 4
Eye Tracking для
мобильных

37. Tobii Mobile device stand

38. Как это работает?
Камера
Eye tracker
Подставка для телефона
или планшета

39. Что на выходе?

40. Наглядное подтверждение
Искомая
кнопка
Респондент долго не
может найти, как
добавить фото.
Он дважды смотрит на
нужную иконку, но не
нажимает на нее.

41. Другие достоинства
• Не заставляем респондента
«мыслить вслух», более
естественно для человека
• Не задаем лишних
вопросов
• Все понимают, что
происходит, даже если
респондент «завис»
• Наглядно для наблюдателей
• Проще вовлечь заказчика

42. Нюансы
Из презентации Tommy Strandvall из
Tobii. Потенциальные проблемы
калибровки
Some eyes ?
scratches & shape
droppy eye lids
dirt &
smudges
mascara
bifocal
s
Pupil size
Some lenses

43. 5
А как же контекст
использования?

44. А как же контекст?

45. Забавное решение: LiliPUT

46. GoPro

47. Что мы делали:
• Тест базовых сценариев (15 минут)
• Прогулка по офису — имитируем естественный
контекст
• Естественные отвлечения (шум, лифты,
сотрудники)
• Модератор с респондентом, помощник в
другом месте

48. Со стороны

49. Естественные ограничения
С соком телефон
пришлось держать
одной рукой

50. «Живые» задания

51. Проблемы со связью
Как отреагирует
пользователь на это?
В следующий раз
будем отключать Wi-fi
на тесте

52. Выводы
• Отличное дополнение к
лабораторным тестам
• Более естественная обстановка
• Короткие тесты 5-15 минут
• Только базовые сценарии
• Хорошая проверка доступности
элементов интерфейса

53. Спасибо!
Наталия Спрогис
n.sprogis@gmail.com
n.sprogis@corp.mail.ru