Освоить инструмент для проведения first click тестирования не сложно. Здесь мы покажет как это сделать. Компетенции нужны на этапе формирования гипотез и анализа результатов - здесь то и проявляется основная магия юзабилити-специалиста.
Юзабилити лаборатория: от eye-tracker к юзабилити-процессамДмитрий Силаев
Юзабилити-зрелость - это внутренняя оценка заказчика с точки зрения процессов разработки и того, насколько учитываются пользовательские требования на этапе разработки интерфейсов.
В какой-то момент Заказчик влюбляется в идею создания собственной юзабилити-лаборатории и здесь надо понимать, что это не только комнатка с eye-tracker, но и процессы, регламенты, компетенции, контроль качества и профессиональный рост юзабилити-специалистов.
8 из 15 банков улучшили интерфейс, 7 - полностью поменяли интерфейс. В новых интерфейсах встречаются уже новые проблемы, некоторые не очевидны и часть из них критичны. Даже такое небольшое изменение, как замена иконки, может сыграть злую шутку. Не стоит забывать об устоявшихся и привычных решениях.
Все банки постоянно дорабатывают интерфейсы, функциональность наращивается ежемесячно. Появляются решения, которые могут изменить пользовательское поведение.
79,1% проблем доступности интерфейса для людей с ограниченными возможностями связан с качеством кода. Часть исправлений этих ошибок займет у ИТ-специалиста от 1 до 8 часов. Более экономичным вариантом будет включение требований по доступности в ТЗ.
Презентация систематизирует виды потребительского опыта , рассматривает горизонтальную и вертикальную диффузию - перетекание и трансформацию опыта ;
дает идеи по "оцифровке" величины Customer Expereince в денежном выражении и тактике взаимного преобразования рейтинга СeX в Revenue и обратно.
Юзабилити лаборатория: от eye-tracker к юзабилити-процессамДмитрий Силаев
Юзабилити-зрелость - это внутренняя оценка заказчика с точки зрения процессов разработки и того, насколько учитываются пользовательские требования на этапе разработки интерфейсов.
В какой-то момент Заказчик влюбляется в идею создания собственной юзабилити-лаборатории и здесь надо понимать, что это не только комнатка с eye-tracker, но и процессы, регламенты, компетенции, контроль качества и профессиональный рост юзабилити-специалистов.
8 из 15 банков улучшили интерфейс, 7 - полностью поменяли интерфейс. В новых интерфейсах встречаются уже новые проблемы, некоторые не очевидны и часть из них критичны. Даже такое небольшое изменение, как замена иконки, может сыграть злую шутку. Не стоит забывать об устоявшихся и привычных решениях.
Все банки постоянно дорабатывают интерфейсы, функциональность наращивается ежемесячно. Появляются решения, которые могут изменить пользовательское поведение.
79,1% проблем доступности интерфейса для людей с ограниченными возможностями связан с качеством кода. Часть исправлений этих ошибок займет у ИТ-специалиста от 1 до 8 часов. Более экономичным вариантом будет включение требований по доступности в ТЗ.
Презентация систематизирует виды потребительского опыта , рассматривает горизонтальную и вертикальную диффузию - перетекание и трансформацию опыта ;
дает идеи по "оцифровке" величины Customer Expereince в денежном выражении и тактике взаимного преобразования рейтинга СeX в Revenue и обратно.
Как интернет вещей «убьет» известные нам методики проектирования интерфейсовAlexey Kopylov
Устоявшаяся методика проектирования взаимодействия основана на персонажах и сценариях. Эта методика плохо работает на массовых продуктах с большим количеством уникальных видов деятельности и вариантов использования. Также она плохо учитывает гетерогенности современных информационных продуктов и услуг.
На помощь нам приходят картирование услуг (в частности Customer Journey Map) и такие методики, как Jobs to Be Done и Agile/Lean варианты. Однако, неизбежно грядущий интернет вещей делает и эти методики морально устаревшими.
Что дальше? Какую метододлогическую базу мы должны построить, чтобы быть встретить новый дивный мир во всеоружии?
Микромоменты: руководство по успешному мобильному маркетингуAIC
Микромоменты — спонтанные моменты, когда пользователи испытывают желание или потребность найти информацию, подходящее место, заказать товар или услугу и используют для этого мобильный телефон. Эти критически важные точки контакта с брендами случаются постоянно, и компаниям следует выработать для них особую стратегию поведения.
Google представляет подробное руководство по новой модели маркетинга, подкрепленное статистикой, наблюдениями и успешными примерами из разных областей бизнеса.
Обзорный материал о применяемых методиках работы над цифровыми продуктами. Лекция проведена в рамках интенсива по продуктовому дизайну в Британской Высшей Школе Дизайна (Москва).
Ксения Стернина, Дизайн-решения. Проверено экспериментомMail.ru Group
Речь пойдет о поиске и обобщении закономерностей в исследуемой работоспособности наборов традиционных решений. Выступление будет содержать интерактивную часть.
Хитрости UX-дизайна: ключевые лайфхаки, которые должен знать разработчикNick Grachov
UX-design: main life hacks every engineer should know
Nick explained how beautiful design can be even worse than ugly one and explain:
• what is UX and where is its place in the design
• what is the difference between usability and UX
• what are the levels and stages of the UX
• what tools and techniques are used in the UX
Glib Rybalko, GlobalLogic’s Test Lead, consultant and trainer was among 26 known Ukrainian and international experts who took a word on IT Weekend Ukraine 2013. Glib discussed features of automated software testing, benefits and feasibility of using this approach on various projects. During his speech, Glib pointed all necessary steps of automated testing implementation and gave homework for those who were interested in this field and wanted to implement it in their projects.
Как интернет вещей «убьет» известные нам методики проектирования интерфейсовAlexey Kopylov
Устоявшаяся методика проектирования взаимодействия основана на персонажах и сценариях. Эта методика плохо работает на массовых продуктах с большим количеством уникальных видов деятельности и вариантов использования. Также она плохо учитывает гетерогенности современных информационных продуктов и услуг.
На помощь нам приходят картирование услуг (в частности Customer Journey Map) и такие методики, как Jobs to Be Done и Agile/Lean варианты. Однако, неизбежно грядущий интернет вещей делает и эти методики морально устаревшими.
Что дальше? Какую метододлогическую базу мы должны построить, чтобы быть встретить новый дивный мир во всеоружии?
Микромоменты: руководство по успешному мобильному маркетингуAIC
Микромоменты — спонтанные моменты, когда пользователи испытывают желание или потребность найти информацию, подходящее место, заказать товар или услугу и используют для этого мобильный телефон. Эти критически важные точки контакта с брендами случаются постоянно, и компаниям следует выработать для них особую стратегию поведения.
Google представляет подробное руководство по новой модели маркетинга, подкрепленное статистикой, наблюдениями и успешными примерами из разных областей бизнеса.
Обзорный материал о применяемых методиках работы над цифровыми продуктами. Лекция проведена в рамках интенсива по продуктовому дизайну в Британской Высшей Школе Дизайна (Москва).
Ксения Стернина, Дизайн-решения. Проверено экспериментомMail.ru Group
Речь пойдет о поиске и обобщении закономерностей в исследуемой работоспособности наборов традиционных решений. Выступление будет содержать интерактивную часть.
Хитрости UX-дизайна: ключевые лайфхаки, которые должен знать разработчикNick Grachov
UX-design: main life hacks every engineer should know
Nick explained how beautiful design can be even worse than ugly one and explain:
• what is UX and where is its place in the design
• what is the difference between usability and UX
• what are the levels and stages of the UX
• what tools and techniques are used in the UX
Glib Rybalko, GlobalLogic’s Test Lead, consultant and trainer was among 26 known Ukrainian and international experts who took a word on IT Weekend Ukraine 2013. Glib discussed features of automated software testing, benefits and feasibility of using this approach on various projects. During his speech, Glib pointed all necessary steps of automated testing implementation and gave homework for those who were interested in this field and wanted to implement it in their projects.
Как улучшить удобство продукта минимальными затратами?Oleg Karapuzov
Эта презентация рассчитана на людей связанных с IT , которые занимаются разными проектами. Презентация поможет людям задуматься над тем что они делают и для кого. Думаю просмотрев презентацию вы сможете сделать свои проекты лучше!
QA Fes 2016. Анастасия Асеева. Роль тестирования в DevopsQAFest
В своем докладе я расскажу, как мы внедряли devops в банке, а конкретнее какую роль в этом процессе сыграло тестирование. Также расскажу с какими проблемами столкнулись, и как мы их устраняли. И да, каких результатов смогли добиться уже через полгода. А самое интересное, покажу как мы смогли добиться того, чтоб у нас pull request долетал до боя за 3 часа со всеми этапами тестирования.
Доклад будет содержать большое количество лайфхаков и обзоров инструментария, который мы использовали.
Практический доклад о том, как мы внедряли devops в банке, а конкретнее какую роль в этом процессе сыграло тестирование.
В докладе рассмотрены основные проблемы, с которыми команда столкнулась при внедрении и способы их устранения.
Продемонстрированы результаты, которых смогли достичь в течении полугода.
Доклад содержит большое количество лайфхаков и обзоров инструментария, который использовался для достижения цели.
Как Mail.Ru и AT Consulting перевели профили абонентов Beeline на Tarantool /...Ontico
РИТ++ 2017, Web-scale IT Сonference
Зал Владивосток, 6 июня, 17:00
Тезисы:
http://webscaleconf.ru/2017/abstracts/2553.html
Платформа виртуализации данных на основе Tarantool - система, созданная в Mail.Ru Group в прошлом году. Cовместно с АТ Consulting было создано и запущено в production решение для хранения 100 млн. профилей абонентов компании Beeline, выдерживающее значительные нагрузки.
...
В статье рассмотрен ряд вопросов связанных с тестированием 64-битного программного обеспечения. Обозначены сложности, с которыми может столкнуться разработчик ресурсоемких 64-битных приложений, и пути их преодоления.
Слады для выступления на GDG DevFest Бишкек, 2014.
https://plus.google.com/events/cgschph5k60ua1ldq0b06i3o3r8
Выступление сделано по книжке "Как тестируют в Google"
Similar to First click тестирование. История одного теста. (20)
Юзабилити-рейтинг интернет-банков 2017 для физических лицДмитрий Силаев
21 век- век человека. Это значит, что пользовательские качества сервисов выходят на первый план.
Мы говорим о юзабилити, как о работах, направленных на улучшение пользовательских качеств, даже, когда обсуждаем функциональность. Облегчает ли функциональность человеку жизнь в рамках определенных задач, сокращает ли она трудоемкость, сохраняет ли человеку время. Если да, начинаем заниматься интерфейсов:
- легко найти
- легко понять как воспользоваться
- понятен результат деятельности
Вот те моменты, на которые стоит акцентировать внимание при разработке.
Метод парных сравнений: выбор лучшего варианта дизайнаДмитрий Силаев
При выборе варианта графического дизайна почти все скатываемся на уровень нравится/не нравится. Расскажем о том, как этой оценке добавить объективности при помощи количественного опроса, использую ту же технологию "нравится/не нравится".
Расскажем про требования к сервису и тесту. Делимся ссылкой на тест, где можно посмотреть на формат, а также варианты дизайна главной страницы нового сайта USABILITYLAB.
ЦБ, USABILITYLA, РосБанк, Сбербанк делятся своими наработками.
Дополнительная ссылка от 13.05.2017 - рекомендации ЦБ, которые получили банки - http://www.cbr.ru/…/bank_supervi…/2017-05-12_in-03-59_20.pdf.
PS ссылка на презентации докладчиков https://yadi.sk/d/q1yZSJ0H3GJCKn
Приложения банков 2017: что на что стоит обратить внимание_юзабилити, функцио...Дмитрий Силаев
Юзабилити-рейтинг приложений будет готов в июне 2017, а сейчас мы расскажем на какие решения стоит обратить внимание:
– экраны становятся все более информативные
– идет деление информации о финансах, действий и информационного блока
– БПСБ историю операций сделали в виде timeline и объединили платежи одному контрагенту. Часть задач PFM это решает, например, можно узнать сколько ты потратил на такси в этом месяце
– обратная связь и общение в банком становится доступнее. Надеемся отрабатывать эти сообщения будут оперативно
На слайде 12 можно посмотреть реестр юзабилити-ошибок, который станет результатом экспертной юзабилити-оценки всей функциональности приложения в качестве индивидуального отчета.
Доступность:
– пользователи выбирают банк не по ставкам, а по наличию возможности управлять своими финансами
– ЦБ активно продвигает тему доступности и 15.05ю2017 должны разослать свои рекомендации
– корректная верстка с точки зрения электронных дикторов должна сойти в культуру разработчиков и в ТЗ банков-Заказчиков
– 7 банков из 15 рассмотренных значительно изменили интерфейс базовой функциональности. Будем тестировать на пользователях.
Июнь 2017 - анонс юзабилити-рейтинга приложений банков.
Доступная цифровая среда: РИФ_КИБ_разработчики с неограниченными возможностямиДмитрий Силаев
Доступные сервисы это
1. инициатива и зона ответственности регуляторов (будь то ЦБ, госуслуги и правительство или отдельные министерства)
2. культура разработчиков и верстка с учетом того, что интерфейс будет прочитан "диктором"
3. социальная ответственность руководства компаний: ретейл, агрегаторы и сервисные сайты
PS есть хорошие примеры адаптированных сайтов, которые делают честь командам-владельцам.
Программы лояльности банков глазам пользователей. Usabilitylab 2017Дмитрий Силаев
С активным развитием программ лояльности мы смотрим на опросы, конкурентов, соревнуемся "кто вкуснее представит предложение". В такой ситуации легко заиграться и упустить из виду цели. В борьбе за "самое лучшее предложение" программы становятся все более хитрые, а представление - сложное.
В презентации проведем юзабилити-оценку представлений программ лояльности. Юзабилити и пользовательские качества представления программы лояльности могут стать не менее сильным аргументом в конкурентной борьбе, наравне с самим предложением.
PS Основные барьеры для пользователей
- отсутствие привычки платить картой
- не всегда понятны условия бонусной программы
- нет желания разбираться в сложных схемах программы лояльности
Accessibility-оценка мобильных приложений банков. 2017 Дмитрий Силаев
Исследования доступности (accessibility) и примеры найденных проблем. За более полной информацией обращайтесь: info@usabilitylab.net
Мысль №1. 3,5 млн.человек в России имеют нарушения зрения (данные АМИ-ТАСС). Но! Кажется, что банки должны нести социальную ответственности. Для ключевых банков России вопрос не должен ставиться "насколько бизнес выиграет, если система будет более человечной".
Мысль №2. Среди знакомых, как правило, не часто встречаются люди, например, с тотальной слепотой. Мы мало о них знаем и не очень хотим задумываться. Да потому что "страшно". Им приходится приспосабливаться и учиться жить с этими ограничениями, покупая дорогое оборудование. Думаю, отчасти это и не позволяет "драйвить" это вопрос.
Мысль №3. Интересно, что одним из основных и наиболее продвинутых, с т.з. accessibility, устройств является iPhone с ПО VoiceOver (ридер). Но даже эта дорогая и необходимая вещь не является панацеей, т.к. он зачитывает не все элементы на экране, а только то, что правильным образом реализовано на этапе верстки.
Не затрагивая понятия юзабилити или сложности текстов,
поговорим о том, какие проблемы встречаются у незрячих пользователей iPhone (ридера VoiceOver).
Это самое полное исследование по юзабилити ДБО, которое мы только делали. Помимо юзабилити-тестирований частотных пользовательских задачи в этом году мы хотим оценить юзабилити всей функциональности.
Отчет по функциональности интересен данными о востребованности функций, что позволяет делать план развития ДБО. Наиболее актуальный и открытый чек-лист функциональности (fr.usabilitylab.ru) поддерживается благодаря экспертам банковской среды.
Еще одна потрясающая новость: в отчет войдут рекомендации по улучшению мобильных приложений банков для незрячих. И тут важным моментом является то, что речь идет не об отдельном приложении, а о корректной верстке и работоспособности приложения для различных ридеров.
Говорим об успешности ДБО 2017. Какие цифры являются показательными, на какие критерии стоит обратить внимание, какие принципы взаимодействия пользователей ДБО вы не сможете игнорировать. Примеры из ежегодного юзабилити-исследования и сравнение функциональности интернет-банков и мобильных приложений.
Оценка востребованности пользователями функционала ДБО и сравнительное юзабилити-исследований позволит более взвешенно смотреть на конкурентов и внутреннюю статистику активности в ДБО . Зачем?
– Конкуренция растет: банки, ИТ-стартапы, телеком, Сбербанк и государство, технологии. Важно отслеживать лучшие решения, которые работают;
– Потребность пользователей увеличивается с ростом безналичных платежей, пользователи становятся все более ленивые. Только исследования пользовательского поведения дает шанс вырваться вперед в конкурентной борьбе.
– основной задачей банка остается вовлечение пользователей. И тут надо четко знать, что мешает "новичкам", как работают с ДБО "опытные", какой функционал может стать драйвером "активации" клиентов.
Взвешенная оценка по развитию ДБО позволит сократить издержки на разработку и увеличить бизнес-эффективность своих каналов.
PS приглашаем на мероприятия по Accessibility, где мы поделимся данными из проектов по оценке "доступности" веб-сайта, его мобильной версии, а также iOs мобильных приложений банков.
Интернет-банки 2016: востребованность функционала и юзабилити. Исследования и...Дмитрий Силаев
При развитие интернет банка решаются не только технические вопросы. Приоритет внедрения функционала и проектирование интерфейса имеют такой же вес. Из этого складывается пользовательский опыт. Исследование востребованности функционала интернет банков 2016, а также сравнительное исследование юзабилити поможет создать действительно человекоориентированный сервис.
Конкурентный анализ 2016: игра на опережениеДмитрий Силаев
Время, когда вы уже не хотите идти в терминал для
оплаты сотовой связи, когда вас государство
вынуждает записываться в ГАИ и п/к через сайт
госуслуг, когда вас не сильно удивляет
аутентификация по отпечатку пальцев и вы слышите
тучи пожеланий от коллег по реализации
необходимого функционала — это время, когда самой
сложной задачей становится не придумать
функционал, а расставить приоритеты и правильно
его преподнести пользователям.
Семинар ориентирован на то, чтобы отработать навыки проведения конкурентного анализа.
Примеры из исследований, практические задания и отличная возможность коллегам подружиться.
Ожидания пользователей от приложений банков 2016: функционалДмитрий Силаев
Исследование востребованности функционала мобильных приложений банков 2016 по методу КАНО.
Оценивались не только реализованные функции, но и те, что стоят на ближайшие релизы.
Презентация подготовлена для банков Казахстана.
UX конкурентный анализ. Функционал против людей.Дмитрий Силаев
Когда речь заходит про лучшие решения, по сути вопрос сводится к конкурентному анализу, сравнению и даже вопросу жизни сервиса.
Мобильные приложения банков.
С одной стороны идет функциональная война среди банков (у кого больше, тот и первый в рейтинге), с другой - бытует мнение "моно-функциональное приложение first". Как определить оптимальный набор фукнций, с кем и как конкурировать. Мы поговорим о том, как UX специалисты проводят конкурентный анализ, что поможет принимать оптимальные управленческие решения при развитии сервиса. Как смотреть на конкурентов через пользовательский опыт.
Модель КАНО, юзабилити-рейтинг, понятия "профиль", "отношение", "параметры" - все это в презентации.
Аппаратные методы оценки юзабилити и востребованностиДмитрий Силаев
Можно ли на ранних стадиях создания сервиса/продукта оценить аппаратными методами его востребованность, пользовательские качества? На этапе идеи, прототипа, B-версии или только готового продукта. За и против каждого метода.
Простое сравнение приложений банков по наличию функциональности вам не поможет ответить на вопрос, какой функционал наращивать для увеличения бизнес-эффективности решения. Вот чек лист - http://fr.usabilitylab.ru/.
Однако, если у вас есть данные о том, какой функционал востребован и ялвяется желанным для пользователей - вы обладаете сокровищем, который не только сэкономит вам бюджет, но и поможет обосновать варту развития приложения.
Проделана огромная работа для того, чтобы вывереть все формулировки, для того, чтобы определить понятие "функция" и "параметр", для того, чтобы получить рейтинг функциональности, который имеет практическую ценность для банка.
С 1 июня 2016 годы мы стартуем сравнительное юзабилити-исследование интернет-банков. Помимо базового функционала мы протестируем фичи и 1-2 дополнительные пользовательские задачи (которые нас попросит банк-участник).
В презентации вы найдете список участников, методологию, метрики, описание результата и ценности. Пишите нам и включайте в исследование ваше решение, ваш банк.
Много компании декларируют, что сотрудники и есть их актив. Странно, что отзывы по проектам получает компания, а не специалисты. Попробую провести эксперимент и получить отзыв и на компанию и на специалиста.
Задумываясь об исследовании мы держали в фокусе несколько критерев:
- результат должен иметь практическую значимость для рынка и развития каналов ДБО;
- результат должен помочь повысить пользовательские качества приложений, улучшив повседневну жизнь людей.
Более 90% общих юзабилити-проблем были наследованны из 2015 года. Мы стандартизировали все: методологию, метрики, требования к респондентам, требования к приложениям (история операций, кличество продуктов), мы даже исследователей стандартизировали (4 респондентов тестировал один специалист, 4 - другой). Исследование показало, что пользователи становятся все более требовательными и даже "капризными".
Также, мы протестировали более 15 дополнительных задач и фич. Кроме оценки юзабилити были получены "маркеры" того, готова ли аудитория к данному функционалу. Про количественную оценку востребованности функционала, смотрите в другой презентации (исследование по методу КАНО).
Никому не надо доказывать перспективность развития мобильного канала взаимодействия с клиентами. Функциональность, скорость работы, визуальная привлекательность, безопасность и юзабилити - это базовые критерии для пользователей при выборе решения, а для некоторых и банка. Опыт пользователей постоянно меняется, меняя его отношение и восприятие "привычного". То, что вы сделали хорошее решение ранее, сейчас может не получить "высший балл". Не развивая приложение банки начинают отставать. Мелкие проблемы сейчас - завтра оцениваются пользователями как критичные. Единый юзабилити-рейтинг мобильных приложений банков, iOs.
PS исследование проводилось на неклиентах банка. Можно сделать вывод о том, что он показывает, насколько легко и безболезненно новые пользователи и клиенты других банков смогут перейти на ваше решение. Будет ли их первый опыт положительным.
Приложение к презентации по сравнительному юзабилити-исследованию мобильных приложений банков iOs 2016. Показаны версии протестированных приложений и, конечно, результаты рейтингования.
1. First-Click тестирование как инструмент
для быстрого улучшения интерфейсов
История одного теста (FCT) за 5 минут:
процесс, инструменты, аналитика
Вебинар для agile-команд
и юзабилити-специалистов
2. 2
Наш опыт тестирования банковских
приложений
Коллеги из Альфа-банка придумали тест для
поиска специалистов в штат.
При тестировании Альфа-Банка для рейтинга
приложений оказалось, что красная кнопка
вызывает сложности у пользователей и
увеличивает время выполнения задачи
Результаты тестов подтвердил и FCT
с пользователями из Facebook.
Описание дизайна
приложения
3. 3
Что такое First-Click Testing?
First-Click Testing (FCT) показывает, куда
пользователи нажмут в первую очередь
Преимущества этого метода
тестирования
Помогает принять решение в дизайне
Проверка гипотез о работе виджетов
Проверка гипотез по схеме А/B-
тестирования
Быстрый тест легко встроить в agile-
процесс
87% пользователей успешно
справляются с задачами,
если с первого раза
нажимают на нужную кнопку
Jeff Sauro
4. Я попросил сделать
варианты для сравнения
и проверить результаты
на аудитории в FB.
Давайте посмотрим
какой вариант лучше…
1 Текущее решение 2 Вариант для теста 3 Вариант для теста
5. Ваше решение
33 секунды успех 0,71 22 секунды успех 0,79 8 секунд успех 0,61
Карта кликов показала,
что большинство
«неуспешных»
пользователей нажимали
на «текущий счет», т.е.
искали его через продукт.
Минимальная
рекомендация: добавить
функцию оплаты через
счет.
Особенно, если Альфа-
Банк не готов отказаться
от красной кнопки.
1 Текущее решение 2 Вариант для теста 3 Вариант для теста
6. 6
Подготовка и запуск FCT
Шаг -1. Формирование гипотез для проверки
Поиск узких мест, проблем в существующих
интерфейсах и предложение способов их
решения
Шаг 0. Выбор инструмента для проведения
тестирования
Мы использовали Google Analytics и Axure
+ бонус в конце презентации
Сравнение инструментов для FCT
Шаг 1. Реализация сфомированных гипотез
Отрисованные макеты, изменённые прототипы
или внесение изменений в макеты
Шаг 2. Настройка аналитики,
достаточной для проверки гипотез
Шаг 3. Запуск и проведение тестирования
с использованием выбранного инструмента,
наличие связки с панелью
Шаг 4. Авто-выгрузка аналитики
Шаг 5. Анализ результатов
Выбор верной гипотезы без ошибок разного рода
7. 7
#1 AXURE, МЕТРИКА И GOOGLE
ANALYTICS
Инструменты
Реализация гипотез
Настройка аналитики
Проведение исследования
8. 9
Подготовка прототипа в Axure
Важно в структуре отразить страницы,
которые будут участвовать в тестировании
На скриншоте структура страниц для
тестирования приложений:
Альфа-Банка,
БСПБ,
Сбербанк
NB: не забываем продумать вопрос
мотивации для участников. В нашем случае
это данный вебинар :)
РЕАЛИЗАЦИЯ ГИПОТЕЗ
Шаг 1.1. 60 минут
11. 12
НАСТРОЙКА
АНАЛИТИКИ
Яндекс.Метрика
Создание счётчиков
на сервисах Яндекс.Метрика
Необходимо ввести URL сайта
с Axshare для отслеживания
Подключить карту кликов для
просмотра непопаданий по цели
Подключить Вебвизор
для сохранения визитов
пользователей и их просмотра
Шаг 2.3. 1 минута
14. 15
ПРОВЕДЕНИЕ ИССЛЕДОВАНИЯ
Поиск респондентов
Специфика пользователей зависит
от вашего ресурса и того, какие
гипотезы
вы хотите проверить.
Требования к респондентам
Могут включать в себя соцдем-
параметры, опытность пользователя и
т.д.
Помочь сформировать требования
к респондентам и посчитать выборку
может юзабилити-специалист.
Шаг 3. ___минут
Поиск респондентов для FCT
ИТОГО
50+ респондентов
< 10 минут на исследование
15. 16
АВТО-ВЫГРУЗКА АНАЛИТИКИ
После проведения эксперимента с нужным
количеством респондентов в GA и Метрике
можно мониторить результаты
Шаг 4. 0 минут
Шаг 5. 10 минут
АНАЛИЗ РЕЗУЛЬТАТОВ
В Google Analytics отображается успешность
каждого теста и время его выполнения
Вебвизор для более подробной информации
по поведению пользователей на сайте Google Analytics Отчёт «Страницы»
16. 17
Шаг 5. 10 минут
АНАЛИЗ РЕЗУЛЬТАТОВ
Тепловая карта
кликов
Яндекс.Метрика покажет тепловую
карту кликов для понимания причин
ошибок
Google Analytics и Яндекс.Метрика
предоставляют достаточно
данных, но анализ этих измерений
может выполнить UX-специалист
17. 18
AXURE + GOOGLE ANALYTICS + ЯНДЕКС.МЕТРИКА
Преимущества:
• Реализация гипотез происходит там же, где
и запускается FCT. Большая гибкость
инструмента прототипирования
• Быстрая интеграция веб-аналитики в
готовые прототипы
• Плагин с аналитикой достаточно один раз
подключить и будет работать
Недостатки:
• Лицензия Axure от 29$ в месяц
• Необходимо знание Axure
Проектирование Настройка теста Тестирование Выгрузка Анализ
1,5 часа1 час 6 минут 10 минут 0 минут 10 минут
19. 20
Реализация гипотез
Необходимо знание основ HTML,
CSS и JS
Время для реализации гипотез
будет зависеть от умения верстать,
сложности макета
Большой выбор инструментов
Можно использовать практически
любой текстовый редактор или
редактор кода с подсветкой и
автодополнением
Шаг 1. 80—120 минут
20. 21
НАСТРОЙКА
АНАЛИТИКИ
Шаг 2. 6 минут
ЗАПУСК И ПРОВЕДЕНИЕ
ТЕСТИРОВАНИЯ
Шаг 3. 10 минут
АВТО-ВЫГРУЗКА
АНАЛИТИКИ
Шаг 4. 0 минут
Шаг 5. 10 минут
АНАЛИЗ РЕЗУЛЬТАТОВ
Перечисленные шаги
проводятся аналогично
описанному процессу
с Axure и занимают
столько же времени
21. 22
HTML вместо AXURE
Преимущества:
• Для реализации гипотезы подойдёт любой
бесплатный редактор (например, Brackets)
• Проще интегрировать веб-аналитику
• Вёрстку можно использовать для готового
продукта
Недостатки:
• Необходимы знания вёрстки
• Загрузка файлов на хостинг сложнее, чем
загрузка проекта в Аxshare
• Необходимо наличие домена
Проектирование Настройка теста Тестирование Выгрузка Анализ
3,5 часа3 часа 6 минут 10 минут 0 минут 10 минут
23. 25
Chalkmark
Добавьте задания для тестирования
и картинки, выделите верные области
клика
Добавление картинки
Выбор областей клика
Шаг 1.2. 2 минуты
Инструмент делает интерактивные прототипы
только из готовых макетов – проектировать
«внутри» нельзя
24. Chalkmark
Настройте параметры тестирования:
Возможность пропускать задания, их
перемешивание и количество заданий для
каждого участника
Корректная настройка теста
влияет на результаты, поэтому
важно запускать готовить
тестирование со специалистами
Шаг 1.3. <1 минуты
25. Chalkmark
Добавьте примечания к процессу
тестирования
Добавьте опросник после тестирования
Опрос необходимо создать в самом
приложении, поскольку нет интеграции с
Google Forms
Добавьте персонализацию: логотип
компании, задайте цвет фона
Эти шаги не являются обязательными Нельзя ссылку сделать «красивой»
Шаг 1.4. <1 минуты
26. 28
Настройка происходит
в рамках создания теста
Остальные шаги занимают
столько же времени, сколько
при работе с Google
Analytics и
Яндекс.Метрикой
НАСТРОЙКА
АНАЛИТИКИ
Шаг 2. 5 минута
ЗАПУСК И ПРОВЕДЕНИЕ
ТЕСТИРОВАНИЯ
Шаг 3. 10 минут
АВТО-ВЫГРУЗКА
АНАЛИТИКИ
Шаг 4. 0 минут
Шаг 5. 10 минут
АНАЛИЗ РЕЗУЛЬТАТОВ
27. 29
Chalkmark
Преимущества
• Достаточно картинки – можно отметить
области кликов
• Аналитика встроена: не нужно
задумываться об URL и копировании кода
• Возможность добавить опрос перед или
после прохождения тестов
• Возможность запрашивать контакты
респондентов
Недостатки
• 166$ в месяц (в бесплатной версии: 10
респондентов, 3 задания – не достаточно
для исследования)
• Нельзя изменить текст ссылки на более
«красивую»
Проектирование Настройка теста Тестирование Выгрузка Анализ
2 часа5 минут +
создание макета
от 1 часов
5 минут 10 минут 0 минут 10 минут
31. 3333
Настройка происходит
в рамках создания теста
Остальные шаги занимают
столько же времени, сколько
при работе с Google
Analytics и
Яндекс.Метрикой
НАСТРОЙКА
АНАЛИТИКИ
Шаг 2. минута
ЗАПУСК И ПРОВЕДЕНИЕ
ТЕСТИРОВАНИЯ
Шаг 3. минута
АВТО-ВЫГРУЗКА
АНАЛИТИКИ
Шаг 4. 0 минут
Шаг 5. 10 минут
АНАЛИЗ РЕЗУЛЬТАТОВ
33. 35
Usabilityhub
Преимущества
• Достаточно картинки – можно отметить
области кликов
• Аналитика встроена: не нужно
задумываться об URL и копировании кода
• Возможность добавить опрос перед или
после прохождения тестов
Недостатки
• Стоимость от 79$ в месяц
(в бесплатной версии нельзя запускать опрос)
• Нет быстрых результатов: области кликов
отмечать можно только после тестов
• Нет функционала запроса контактов
респондентов
Проектирование Настройка теста Тестирование Выгрузка Анализ
2 часа5 минут +
время на
создание макета
(от 1,5 часов)
5 минут 10 минут 0 минут 10 минут
34. 36
Поделитесь в комментариях
своим опытом
Дмитрий Силаев
+7 (926) 492 05 50
d.silaev@usabilitylab.net
rating.usabilitylab.ru
+ 7 (495) 933-01-37
info@usabilitylab.net
36. 38
Сравнение инструментов FCT
Axure + Метрика +
GA
HTML + Метрика +
GA
Chalkmark Usabilityhub
Формирование
гипотез для
проверки
–
Реализация
сфомированных
гипотез
Лицензия Axure от
29$ в месяц
Бесплатное
тестирование
Быстрое создание
переходов
Быстрое создание
экранов
Сложная
интеграция
сервисов
Требуются навыки
верстальщика
Бесплатное
тестирование
Долгая реализация
переходов
Долгая реализация
страниц
Простая интеграция
сервисов
166$ в месяц
Быстрое
создание теста
Нельзя
создавать
экраны внутри
Аналитика
интегрирована
79$ в месяц
Нет ограничения
на кол-во тестов
Быстрое
создание теста
Нельзя создавать
экраны внутри
Аналитика
интегрирована
37. 39
Сравнение инструментов FCT
Axure + Метрика +
GA
HTML + Метрика +
GA
Chalkmark Usabilityhub
Запуск и
проведение
тестирования
Дает только ссылку, связки с панелью нет
Добавление опроса Можно добавить
ссылку на Google
Forms
Можно добавить
ссылку на Google
Forms или
реализовать свой
Встроенная
возможность
добавить опрос
Встроенная
возможность
добавить опрос
Поиск
респондентов
Можно поделиться ссылкой на тест
в социальные сети
Предлагает найти
респондентов
Сбор контактов с
респондентов
Можно запросить контакты
через Google Forms
Можно запросить
контакты
Нет возможности
Авто-выгрузка
аналитики
Сразу отображается результат теста,
время выполнения, карта кликов
Анализ
результатов –
Общее время
1,5 часа 3,5 часа 2 часа 2 часа
38. Ни один из этих инструментов
не формулирует гипотезы и не
принимает решения по
внедрению изменений
40
Сравнение инструментов FCT
Формирование гипотез
Ни один из инструментов не помогает в
формировании гипотез, поэтому
к участию даже в FCT необходимо
привлекать юзабилити-специалистов
Только у Usabilityhub есть возможность
рекрутинга респондентов
Анализ полученной информации
Ни один из инструментов не даёт указания
по изменению интерфейсов для повышения
конверсии. Такие рекомендации могут
предлагать только юзабилити-специалисты
Наш выбор
Для прототипов в Axure и статичных экранов
мы используем связку с Яндекс.Метрикой и
Google Analytics