SlideShare a Scribd company logo
Когда пользователи
далеко
Познакомимся?
Нужны цифры
Нет доступа к пользователям
Удаленное
немодерируемое
тестирование
Общий процесс
0
Оценка навигации
Применение
• Проверка того, что
спроектированная структура
навигации понятна пользователю.
• Несколько видов:
– Тестирование дерева
• Списком (текстовый)
– Тестирование экранов
Процедура
• Показать страницу/экран
– Для удаленной оценки нужно пронумеровать
интерактивные объекты, чтобы пользователь
выбирал «правильный» номер.
• Задать вопросы о том, где находится информация:
– «Вам нужно узнать погоду на завтра. Где вы
будете её искать?»
– «В каком разделе находятся неподписанные
документы?»
1 2 3 4
5 6 7 8
9 1
0
1
1
1
2
Оценка восприятия дизайна
(бренда)
Применение
• Используется для оценки
нескольких вариантов дизайна;
• Нужно выбрать тот, который
лучше других будет вызывать у
пользователей нужные,
«целевые» эмоций.
Необходимо оценить сайт по
каждой паре прилагательный
Процедура
• Задать список прилагательных, с которыми
должен ассоциироваться дизайн и их
антонимов
• Нарисовать несколько макетов
• На основании прилагательных и их
антонимов сформировать шкалы
• Провести тест с пользователями, которые по
шкалам оценивает дизайн
• Обработать результат
Оценка контента
Рассмотрим пример
• Цель исследования: Сравнение пользовательских качеств основного сайта и
промо-сайта продукта
• Существует специальный промо-сайт, созданный для продвижения
отдельного продукта. В настоящее время он активно фигурирует в рекламных
материалах компании, в связи с чем растёт его посещаемость и доля в общем
трафике.
Необходимо понять, насколько визуальные решения, используемые на этом
сайте, удобны для пользователей и позволяют им получать необходимую им
информацию.
Необходимо проверить:
1. Удобство меню и навигации.
2. Полнота предоставляемой информации.
3. Общая удовлетворённость сайтом.
23
Процедура удаленного
тестирования
Перед началом тестирования пользователи должны заполнить небольшую анкету, позволяющую
идентифицировать их. Анкета позволяет определить, входят ли пользователи в целевую аудиторию, и было
ли им отправлено персональное приглашение к участию в тестировании:
Тестирование
Сформулированное задание с полем для ввода ответа
Сайт
Метрики
_________________________________
(место для проставления грифа конфиденциальности)
ОАО «Мобильные ТелеСистемы», г. Москва, ул. Марксистская, д.4
Удобство меню и навигации
Основной сайт 7,3
Сайт продукта 3,5
Полнота предоставляемой информации
Основной сайт 8,09
Сайт продукта 4,60
Понятное описание услуг и технологий
Основной сайт 7,97
Сайт продукта 4,49
Скорость загрузки страниц и сайта
Основной сайт 7,42
Сайт продукта 5,09
Общая удовлетворенность сайтом
Основной сайт 7,53
Сайт продукта 3,77
После тестирования 140 пользователей оценивали пять показателей по
результатам работы с основным сайтом по 10 бальной шкале, 140
пользователей – с сайтом продукта.
Ниже приведены усредненные значения по каждому показателю по 140
пользователям.
Задача
Эффективность, %
Продуктивность*
(мин : сек)
Удовлетворенность
(шкала от 1 до 5)
Сайт
продукта
Основной
Сайт
продукта
Основной Сайт продукта Основной
Задание 1 44,4% 93,3% 4:09 мин 2:10 мин 2,3 3,7
Задание 2
88,8% /
74,8%
100% /
68%
2:41 мин 2:23 мин 2,3 3,22
Задание 3 90% 87% 1:38 мин 2:11 мин 3,6 3,7
Задание 4 71,6% 93,27% 3:08 мин 2:09 мин 2,6 3,7
Задание 5
72,2% 95,76% 3:3 мин 2:53 мин 2,3 3,5
Задание 6
72,2% 94,92% 1:49 мин 2:17 мин 2,8 4
Семантический дифференциал
После выполнения всех заданий респондентам
предлагалось отменить расположение тестируемого сайта
на семи биполярных шкалах:
«Вечер добрый!
Пишу Вам, т.к. при прохождении теста
не было предусмотрено поля для устного
комментария.
Дело в том, что при пользовании
сайтом некоторые задания я не смог
выполнить по причине того, что
навигация по сайту нарушена.
Помимо этого хочется поделиться
впечатлениями о сайте. Сайт нацелен
на молодежь. Возможно я рано
состарился, но все-таки мне 23 и я, вроде
как, молод. Так или иначе, буду говорить
за себя.
Ощущение от внешнего оформления
сайта у меня отвратительное.
Возникает впечатление, что он создан
для юных гопников, у которых напрочь
отсутствует вкус и которые
пользуются словарным запасом, схожим
по размерам со словарем Элочки Людоед
(только входят в него слова вроде
"круто", "чувак" и прочее). Дело здесь,
конечно, не в словах (которыми я и сам
пользуюсь), а в ощущении, что тебя
считают за тупого ПРИМИТИВА.
Еще возникает ощущение, что дизайнеры
пытались создать некую другую
реальность (виртуальную), и она
получилась какой-то недоброй,
инфернальной, в ней все работает по
каким-то нечеловеческим законам и
образы в ней какие-то демонические.
Если будут еще вопросы, пишите или
звоните.
С уважением, Сергей»
Спасибо=)
Вопросы?

More Related Content

Similar to Удаленные тестирования

Usability testing methods overview (SQA Days’13)
Usability testing methods overview (SQA Days’13)Usability testing methods overview (SQA Days’13)
Usability testing methods overview (SQA Days’13)
Tatyana Tabakova
 
Presentacion Ruso
Presentacion RusoPresentacion Ruso
Presentacion Ruso
ProstOpros.ru
 
Presentacion Ruso
Presentacion RusoPresentacion Ruso
Presentacion Ruso
ProstOpros.ru
 
125. Экспертная оценка: часть 2. Виды
125. Экспертная оценка: часть 2. Виды125. Экспертная оценка: часть 2. Виды
125. Экспертная оценка: часть 2. Виды
Andrew Sikorskiy
 
чмв лекция №7
чмв   лекция №7чмв   лекция №7
чмв лекция №7student_kai
 
Как улучшить удобство продукта минимальными затратами?
Как улучшить удобство продукта минимальными затратами?Как улучшить удобство продукта минимальными затратами?
Как улучшить удобство продукта минимальными затратами?
Oleg Karapuzov
 
Deadline management
Deadline managementDeadline management
Deadline management
Eugene Sheretov
 
Usability ppt-last-140313103534-phpapp01
Usability ppt-last-140313103534-phpapp01Usability ppt-last-140313103534-phpapp01
Usability ppt-last-140313103534-phpapp01
Nickola14
 
Продукт с нуля
Продукт с нуляПродукт с нуля
Продукт с нуля
ITCP Community
 
Kux— измеряем Годзиллу. Как и для чего измерять UX в цифрах. Анна Бирюкова
Kux— измеряем Годзиллу. Как и для чего измерять UX в цифрах. Анна БирюковаKux— измеряем Годзиллу. Как и для чего измерять UX в цифрах. Анна Бирюкова
Kux— измеряем Годзиллу. Как и для чего измерять UX в цифрах. Анна Бирюкова
ПрофсоUX
 
Виды QA: Всё что вы не знали и боялись спростить
Виды QA: Всё что вы не знали и боялись спроститьВиды QA: Всё что вы не знали и боялись спростить
Виды QA: Всё что вы не знали и боялись спростить
GoIT
 
Знакомство с Online Test Pad
Знакомство с Online Test PadЗнакомство с Online Test Pad
Знакомство с Online Test Padgilraenanarion
 
Эффективные ретроспективы
Эффективные ретроспективыЭффективные ретроспективы
Эффективные ретроспективы
Boris Volfson
 
Usability_testing
Usability_testingUsability_testing
Usability_testing
Iryna Kutsevych
 
чмв лабораторная №4
чмв   лабораторная №4чмв   лабораторная №4
чмв лабораторная №4student_kai
 
SQA Days 2009: Контроль качества интерфейсных решений на всех этапах процесса...
SQA Days 2009: Контроль качества интерфейсных решений на всех этапах процесса...SQA Days 2009: Контроль качества интерфейсных решений на всех этапах процесса...
SQA Days 2009: Контроль качества интерфейсных решений на всех этапах процесса...
Yury Vetrov
 
Дмитрий Пиликов - Юзабилити тестирование
Дмитрий Пиликов - Юзабилити тестированиеДмитрий Пиликов - Юзабилити тестирование
Дмитрий Пиликов - Юзабилити тестированиеqasib
 
Кровь, пот и слезы ваших пользователей. Уроки, вынесенные из юзабилити исслед...
Кровь, пот и слезы ваших пользователей. Уроки, вынесенные из юзабилити исслед...Кровь, пот и слезы ваших пользователей. Уроки, вынесенные из юзабилити исслед...
Кровь, пот и слезы ваших пользователей. Уроки, вынесенные из юзабилити исслед...
Tanya Zavialova
 
андрей дмитриев взгляд со стороны разработчика
андрей дмитриев взгляд со стороны разработчикаандрей дмитриев взгляд со стороны разработчика
андрей дмитриев взгляд со стороны разработчикаAlexei Lupan
 

Similar to Удаленные тестирования (20)

Usability testing methods overview (SQA Days’13)
Usability testing methods overview (SQA Days’13)Usability testing methods overview (SQA Days’13)
Usability testing methods overview (SQA Days’13)
 
Presentacion Ruso
Presentacion RusoPresentacion Ruso
Presentacion Ruso
 
Presentacion Ruso
Presentacion RusoPresentacion Ruso
Presentacion Ruso
 
125. Экспертная оценка: часть 2. Виды
125. Экспертная оценка: часть 2. Виды125. Экспертная оценка: часть 2. Виды
125. Экспертная оценка: часть 2. Виды
 
чмв лекция №7
чмв   лекция №7чмв   лекция №7
чмв лекция №7
 
Как улучшить удобство продукта минимальными затратами?
Как улучшить удобство продукта минимальными затратами?Как улучшить удобство продукта минимальными затратами?
Как улучшить удобство продукта минимальными затратами?
 
Deadline management
Deadline managementDeadline management
Deadline management
 
Deadline management
Deadline managementDeadline management
Deadline management
 
Usability ppt-last-140313103534-phpapp01
Usability ppt-last-140313103534-phpapp01Usability ppt-last-140313103534-phpapp01
Usability ppt-last-140313103534-phpapp01
 
Продукт с нуля
Продукт с нуляПродукт с нуля
Продукт с нуля
 
Kux— измеряем Годзиллу. Как и для чего измерять UX в цифрах. Анна Бирюкова
Kux— измеряем Годзиллу. Как и для чего измерять UX в цифрах. Анна БирюковаKux— измеряем Годзиллу. Как и для чего измерять UX в цифрах. Анна Бирюкова
Kux— измеряем Годзиллу. Как и для чего измерять UX в цифрах. Анна Бирюкова
 
Виды QA: Всё что вы не знали и боялись спростить
Виды QA: Всё что вы не знали и боялись спроститьВиды QA: Всё что вы не знали и боялись спростить
Виды QA: Всё что вы не знали и боялись спростить
 
Знакомство с Online Test Pad
Знакомство с Online Test PadЗнакомство с Online Test Pad
Знакомство с Online Test Pad
 
Эффективные ретроспективы
Эффективные ретроспективыЭффективные ретроспективы
Эффективные ретроспективы
 
Usability_testing
Usability_testingUsability_testing
Usability_testing
 
чмв лабораторная №4
чмв   лабораторная №4чмв   лабораторная №4
чмв лабораторная №4
 
SQA Days 2009: Контроль качества интерфейсных решений на всех этапах процесса...
SQA Days 2009: Контроль качества интерфейсных решений на всех этапах процесса...SQA Days 2009: Контроль качества интерфейсных решений на всех этапах процесса...
SQA Days 2009: Контроль качества интерфейсных решений на всех этапах процесса...
 
Дмитрий Пиликов - Юзабилити тестирование
Дмитрий Пиликов - Юзабилити тестированиеДмитрий Пиликов - Юзабилити тестирование
Дмитрий Пиликов - Юзабилити тестирование
 
Кровь, пот и слезы ваших пользователей. Уроки, вынесенные из юзабилити исслед...
Кровь, пот и слезы ваших пользователей. Уроки, вынесенные из юзабилити исслед...Кровь, пот и слезы ваших пользователей. Уроки, вынесенные из юзабилити исслед...
Кровь, пот и слезы ваших пользователей. Уроки, вынесенные из юзабилити исслед...
 
андрей дмитриев взгляд со стороны разработчика
андрей дмитриев взгляд со стороны разработчикаандрей дмитриев взгляд со стороны разработчика
андрей дмитриев взгляд со стороны разработчика
 

More from Margarita Titova

Оценка эффективности интерфейсных решений и нового функционала
Оценка эффективности интерфейсных решений и нового функционалаОценка эффективности интерфейсных решений и нового функционала
Оценка эффективности интерфейсных решений и нового функционала
Margarita Titova
 
История новой Главной onlinetours.ru
История новой Главной onlinetours.ruИстория новой Главной onlinetours.ru
История новой Главной onlinetours.ruMargarita Titova
 
Юзабилити сайтов трэвел-агентств
Юзабилити сайтов трэвел-агентствЮзабилити сайтов трэвел-агентств
Юзабилити сайтов трэвел-агентствMargarita Titova
 
Про лояльность
 Про лояльность Про лояльность
Про лояльностьMargarita Titova
 
Взаимодействие пользователя и системы. ПрофсоUX
Взаимодействие пользователя и системы. ПрофсоUXВзаимодействие пользователя и системы. ПрофсоUX
Взаимодействие пользователя и системы. ПрофсоUXMargarita Titova
 
Проектирование плеера 3D панорам. Процесс
Проектирование плеера 3D панорам. ПроцессПроектирование плеера 3D панорам. Процесс
Проектирование плеера 3D панорам. ПроцессMargarita Titova
 

More from Margarita Titova (6)

Оценка эффективности интерфейсных решений и нового функционала
Оценка эффективности интерфейсных решений и нового функционалаОценка эффективности интерфейсных решений и нового функционала
Оценка эффективности интерфейсных решений и нового функционала
 
История новой Главной onlinetours.ru
История новой Главной onlinetours.ruИстория новой Главной onlinetours.ru
История новой Главной onlinetours.ru
 
Юзабилити сайтов трэвел-агентств
Юзабилити сайтов трэвел-агентствЮзабилити сайтов трэвел-агентств
Юзабилити сайтов трэвел-агентств
 
Про лояльность
 Про лояльность Про лояльность
Про лояльность
 
Взаимодействие пользователя и системы. ПрофсоUX
Взаимодействие пользователя и системы. ПрофсоUXВзаимодействие пользователя и системы. ПрофсоUX
Взаимодействие пользователя и системы. ПрофсоUX
 
Проектирование плеера 3D панорам. Процесс
Проектирование плеера 3D панорам. ПроцессПроектирование плеера 3D панорам. Процесс
Проектирование плеера 3D панорам. Процесс
 

Удаленные тестирования

  • 3.
  • 5. Нет доступа к пользователям
  • 8. 0
  • 10. Применение • Проверка того, что спроектированная структура навигации понятна пользователю. • Несколько видов: – Тестирование дерева • Списком (текстовый) – Тестирование экранов
  • 11. Процедура • Показать страницу/экран – Для удаленной оценки нужно пронумеровать интерактивные объекты, чтобы пользователь выбирал «правильный» номер. • Задать вопросы о том, где находится информация: – «Вам нужно узнать погоду на завтра. Где вы будете её искать?» – «В каком разделе находятся неподписанные документы?»
  • 12. 1 2 3 4 5 6 7 8 9 1 0 1 1 1 2
  • 14. Применение • Используется для оценки нескольких вариантов дизайна; • Нужно выбрать тот, который лучше других будет вызывать у пользователей нужные, «целевые» эмоций.
  • 15. Необходимо оценить сайт по каждой паре прилагательный
  • 16. Процедура • Задать список прилагательных, с которыми должен ассоциироваться дизайн и их антонимов • Нарисовать несколько макетов • На основании прилагательных и их антонимов сформировать шкалы • Провести тест с пользователями, которые по шкалам оценивает дизайн • Обработать результат
  • 17.
  • 20. • Цель исследования: Сравнение пользовательских качеств основного сайта и промо-сайта продукта • Существует специальный промо-сайт, созданный для продвижения отдельного продукта. В настоящее время он активно фигурирует в рекламных материалах компании, в связи с чем растёт его посещаемость и доля в общем трафике. Необходимо понять, насколько визуальные решения, используемые на этом сайте, удобны для пользователей и позволяют им получать необходимую им информацию. Необходимо проверить: 1. Удобство меню и навигации. 2. Полнота предоставляемой информации. 3. Общая удовлетворённость сайтом.
  • 21.
  • 22.
  • 23. 23 Процедура удаленного тестирования Перед началом тестирования пользователи должны заполнить небольшую анкету, позволяющую идентифицировать их. Анкета позволяет определить, входят ли пользователи в целевую аудиторию, и было ли им отправлено персональное приглашение к участию в тестировании:
  • 24. Тестирование Сформулированное задание с полем для ввода ответа Сайт
  • 25.
  • 26.
  • 27. Метрики _________________________________ (место для проставления грифа конфиденциальности) ОАО «Мобильные ТелеСистемы», г. Москва, ул. Марксистская, д.4 Удобство меню и навигации Основной сайт 7,3 Сайт продукта 3,5 Полнота предоставляемой информации Основной сайт 8,09 Сайт продукта 4,60 Понятное описание услуг и технологий Основной сайт 7,97 Сайт продукта 4,49 Скорость загрузки страниц и сайта Основной сайт 7,42 Сайт продукта 5,09 Общая удовлетворенность сайтом Основной сайт 7,53 Сайт продукта 3,77 После тестирования 140 пользователей оценивали пять показателей по результатам работы с основным сайтом по 10 бальной шкале, 140 пользователей – с сайтом продукта. Ниже приведены усредненные значения по каждому показателю по 140 пользователям.
  • 28. Задача Эффективность, % Продуктивность* (мин : сек) Удовлетворенность (шкала от 1 до 5) Сайт продукта Основной Сайт продукта Основной Сайт продукта Основной Задание 1 44,4% 93,3% 4:09 мин 2:10 мин 2,3 3,7 Задание 2 88,8% / 74,8% 100% / 68% 2:41 мин 2:23 мин 2,3 3,22 Задание 3 90% 87% 1:38 мин 2:11 мин 3,6 3,7 Задание 4 71,6% 93,27% 3:08 мин 2:09 мин 2,6 3,7 Задание 5 72,2% 95,76% 3:3 мин 2:53 мин 2,3 3,5 Задание 6 72,2% 94,92% 1:49 мин 2:17 мин 2,8 4
  • 29. Семантический дифференциал После выполнения всех заданий респондентам предлагалось отменить расположение тестируемого сайта на семи биполярных шкалах:
  • 30. «Вечер добрый! Пишу Вам, т.к. при прохождении теста не было предусмотрено поля для устного комментария. Дело в том, что при пользовании сайтом некоторые задания я не смог выполнить по причине того, что навигация по сайту нарушена. Помимо этого хочется поделиться впечатлениями о сайте. Сайт нацелен на молодежь. Возможно я рано состарился, но все-таки мне 23 и я, вроде как, молод. Так или иначе, буду говорить за себя. Ощущение от внешнего оформления сайта у меня отвратительное. Возникает впечатление, что он создан для юных гопников, у которых напрочь отсутствует вкус и которые пользуются словарным запасом, схожим по размерам со словарем Элочки Людоед (только входят в него слова вроде "круто", "чувак" и прочее). Дело здесь, конечно, не в словах (которыми я и сам пользуюсь), а в ощущении, что тебя считают за тупого ПРИМИТИВА. Еще возникает ощущение, что дизайнеры пытались создать некую другую реальность (виртуальную), и она получилась какой-то недоброй, инфернальной, в ней все работает по каким-то нечеловеческим законам и образы в ней какие-то демонические. Если будут еще вопросы, пишите или звоните. С уважением, Сергей»