Lviv MD Day 2015 Олександр Дзюба "Користувацьке тестування додатків – що дає і як проводити"

1. Користувацьке тестування додатків -
що дає і як проводити

2. 4% ігор
заробляють
Electronic Entertainment
Design and Research
Geoffrey Zatkin,
president

3. 60% бюджету
витрачається
на переробки
Electronic Entertainment
Design and Research
Geoffrey Zatkin,
president

4. ефективні
інвестиції

5. Зустріч з
реальністю
неминуча

6. Бізнес - це
клієнти.
Ви запитуєте
їхню думку?

7. Всі
роблять
ЦЕ!

8. Запитай
у юзера!

9. Де знайти
юзера?
Місця потенційного
скупчення
Які інтереси мають?
Де бувають?
Де і з ким спілкуються?

10. Планування проекту
Дослідження ринку
Актуальність проблематики
Вибір та опис ЦА
Споживацькі практики
Канали інформування
Референсні групи
Оцінка та вибір рішення
Драйвери, трігери, бар’єри
Бачення ідеального додатку

11. Фокусоване
групове
інтерв’ю
4-8 респондентів
90-120 хвилин
План бесіди, модератор

12. Експрес інтерв’ю
(масове опитування)
від 200 респондентів
замір якісних показників

13. Експертне
інтерв’ю
Концентрат знань
Допомагає зробити ОК

14. Нічого
показувати в
прототипі?

15. Стратегічні
рішення
прийняті
Ідея додатку
Основна механіка
Набір супутніх задач
Доречні інтеграції
Модель управління
Манера взаємодії
Уточнення ЦА

16. α, β, реліз
User Interface
Навігація
Керування
Функціонал
Налаштування
Інтеграції
Прогноз ретеншн
Монетизація

17. Плейтест
- замір оцінок ЦА

18. Формати плейтеста
Хол-тест
Хоум-тест

19. Формування досвіду
Список
завдань

20. Анкетування
Методи збору даних

21. Методи збору даних
Невключене
спостереження

22. Методи збору даних
Інтерв’ювання

23. Методи збору даних
Думки вголос

24. Методи збору даних
Ранжування

25. Методи збору даних
Відеореєстрація

26. Обмеження методики
-не очікувати ідей
-тривалість до 2 годин
-оцінювати лише побачене

27. Без ТЗ - результат ХЗ
Обмеження методики

28. Tехнічне
завдання
Оцінка рекламних матеріалів для Appstore
(які очікування формують)
Визначити корисність туторіалу
(чи дає розуміння задачі і вигоди)
Виявити драйвери та бар’єри першої сесії
Оцінка навігації

29. Логіка побудови анкети
Час
користув
ання
Етап
формування
досвіду
Про що питаємо
0 хвилин Відсутній
Дані респондента (прізвище, ім’я, вік, стать, інтереси, використовувані
додатки, інше)
0 хвилин Очікування
Бажання встановити додаток, почати користування, очікування від додатку
(завдання, функціонал, для кого). Сформовані маркетинговими
матеріалами - іконка, назва, опис у сторі, скріншоти
2 хвилини Перший досвід
Чи розібрався з керуванням, чи зручне керування (коротко). Туторіал.
Наскільки справдилися очікування.
10 хвилин
Перший значний
досвід
Комфорт керування, звикання до керування. Якість розв’язання ключової
задачі.
30 хвилин Значний досвід
Якість реалізації задуму, інтеграцій, придатність для використання на ходу
та розв’язання комплексних задач, адаптованість под мобільний девайс,
60 хвилин Повний досвід
Головні питання, винесені на плейтест. Зручність нотифікейшнів.
Готовність рекомендувати друзям, ділитися у соцмережах. Бажання
залишити у девайсі. Монетизація.

30. Типи питань
Закриті питання
кількісна оцінка якості об’єкта
- Номінальні шкали
- з одиничним вибором альтернативи
- з множинним вибором альтернатив
- Порядкові (або рангові) шкали
- Метричні шкали
Відкриті питання
місце для розгорнутого коментаря, думки, ідеї

31. Самі лише відкриті питання - зло
- Користувач не обмежений
у висловлюваннях
- Легше готувати
інструментарій
- Складно формулювати
думки
- Важко обробляти дані, треба
кодувати
- Важко отримати кількісні
показники
- Важко порівнювати відповіді
різних респондентів
- Більшість лінуються писати,
відповіді односкладні,
малозмістовні

32. З вибором однієї альтернативи
В Google Forms тип питання - З варіантами , Список, Сітка, Шкала
Номінальні шкали

33. Відповіді ранжовані за певною ознакою
В Google Forms тип питання - З варіантами , Список, Сітка, Шкала
Порядкові (рангові) шкали

34. З множинним вибором альтернатив
В Google Forms тип питання - Прапорці
Номінальні шкали

35. Біполярна оціночна шкала з градаціями
В Google Forms тип питання - Шкала, Таблиця
Метод семантичного диференціалу

36. Порядкова шкала, в якій для кожного об’єкту
порівняння гравцю важливо визначити ранг за
інтенсивністю певної характеристики
В Google Forms тип питання - Шкала, Таблиця
Ранжування

37. Однозначність формулювання питань
Одне питання за раз
Нейтральність питань
Уточнюючі питання
Основні правила
формулювання питань

38. Респондент має точно знати, про що саме ви запитуєте
- Наскільки зрозуміла для Вас специфіка
використання навігації?
Про що саме ми питаємо?
+ Чи очевидно, що маршурт враховує дорожній
трафік?
+ Чи зрозуміло, що є можна оптимізувати час,
відстань, та оплату проїзду?
Однозначність
формулювання питаннь

39. Одне питання за раз

40. Питання необхідно розділити
на два питання

41. Слід уникати питань, що схиляють респондента до
певної відповіді.
Формулювання мають бути нейтральними.
- Оцініть, наскільки Вам подобається додаток?
+ Дайте вашу оцінку додатку
- Чи цікаво було б мати внутрішній чат з іншими
користувачами?
+ Виберіть зі списку можливих апдейтів один,
найбільш критичній на ваш погляд
Нейтральність питань

42. Важливі питання слід перепровірити на
уважність та правду
Уточнюючі питання
Перепитуємо, використовуємо “пастки”

43. Деякі наші Клієнти
KEEP
CALM
AND
DO
PLAYTEST
Alexander Dzyuba
alexander.d@playtestix.com
www.playtestix.com