Математический аппарат в UX. Как проверять гипотезы на статистических данныхПрофсоUX
Доклад рассчитан на опытных проектировщиков, которым необходимо подтверждать свои решения фактами.
Доклад направлен на проверку достоверности гипотез по статистическим данным. Я расскажк, какие данные можно собрать и посчитать, какие бывают статистические методы и как их выбирать в зависимости от целей эксперимента и количества участников. Как пользоваться формулами для расчета и как интерпретировать результаты расчетов.
На небольших примерах покажу как, имея две маленьких группы респондентов, подтвердить наличие различий во взаимодействии с интерфейсом (время, скорость реакции и пр.) и быть уверенным, что это различие действительно существует.
Тема 3. Этапы проведения исследования. Этап второй: 1.Определение типа исс...Ирина Галкина
Лекция в презентации.Рассматривается второй этап проведения маркетинговых исследований. Рассказывается о методах получения данных, что влияет на определение типа исследования, различие между первичными и вторичными данными, качественными и количественными методами исследований.
Efectos macroeconómicos del sector energético en la Argentina en el período 2...IADERE
El acelerado crecimiento de la Argentina en la década pasada provocó un fuerte incremento de la demanda de energía. Para satisfacerla, se optó por focalizar la inversión en centrales de generación térmica. Esto trajo consigo un aumento muy importante de la demanda de gas, el cual no fue acompañado por la producción nacional. Así, la importación tanto de gas como de gasoil y fueloil se multiplicó, lo que impactó sobre las cuentas externas y, debido a los subsidios, también sobre las fiscales. El presente artículo analiza el impacto del déficit energético sobre la situación macroeconómica argentina en los últimos años y esboza ciertas líneas de acción para recuperar el equilibrio en la balanza energética.
Математический аппарат в UX. Как проверять гипотезы на статистических данныхПрофсоUX
Доклад рассчитан на опытных проектировщиков, которым необходимо подтверждать свои решения фактами.
Доклад направлен на проверку достоверности гипотез по статистическим данным. Я расскажк, какие данные можно собрать и посчитать, какие бывают статистические методы и как их выбирать в зависимости от целей эксперимента и количества участников. Как пользоваться формулами для расчета и как интерпретировать результаты расчетов.
На небольших примерах покажу как, имея две маленьких группы респондентов, подтвердить наличие различий во взаимодействии с интерфейсом (время, скорость реакции и пр.) и быть уверенным, что это различие действительно существует.
Тема 3. Этапы проведения исследования. Этап второй: 1.Определение типа исс...Ирина Галкина
Лекция в презентации.Рассматривается второй этап проведения маркетинговых исследований. Рассказывается о методах получения данных, что влияет на определение типа исследования, различие между первичными и вторичными данными, качественными и количественными методами исследований.
Efectos macroeconómicos del sector energético en la Argentina en el período 2...IADERE
El acelerado crecimiento de la Argentina en la década pasada provocó un fuerte incremento de la demanda de energía. Para satisfacerla, se optó por focalizar la inversión en centrales de generación térmica. Esto trajo consigo un aumento muy importante de la demanda de gas, el cual no fue acompañado por la producción nacional. Así, la importación tanto de gas como de gasoil y fueloil se multiplicó, lo que impactó sobre las cuentas externas y, debido a los subsidios, también sobre las fiscales. El presente artículo analiza el impacto del déficit energético sobre la situación macroeconómica argentina en los últimos años y esboza ciertas líneas de acción para recuperar el equilibrio en la balanza energética.
Доверие к выборам и необходимость контроля за ними: 01.02.2011ВЦИОМ
1 февраля - Валерий Федоров выступил с докладом «Доверие к выборам и необходимость контроля за ними» на брифинге ассоциаций НКО по защите прав избирателей «Гражданский контроль». Мероприятие было посвящено старту электоральных компаний в регионах России, где 13 марта пройдут выборы в региональные и местные законодательные органы.
Исследования общественного мнения
Омнибус
«Экспресс» - еженедельное
исследование омнибусного типа, что позволяет одновременно включать в одну анкету совершенно разные тематические блоки: от оценки эффективности рекламной кампании банка до оценки эффективности работы органов власти. Омнибус практически универсальный инструмент изучения общественного мнения, география опроса и возраст участников (18+) позволяют с его помощью исследовать маркетинговые, социально-политические и экономические проблемы.
Задачи исследования:
• Определить личное профессиональное участие в президентской кампании 2018 г. и статус участия.
• Раскрыть участие в выборах в роли избирателя.
• Оценить эффективность механизмов направленных на повышение явки избирателей (вирусные ролики,
административная мобилизация, мобилизационные квазиреферендумантарные проекты: "Комфортная городская
среда" и т.д.).
• Оценить избирательные кампании кандидатов в Президенты РФ (эффективность выступления в телеэфирах (дебатах),
баннеры, видеоролики, яркие события в ходе избирательной кампании, решение стратегических и тактических задач
кандидатами и т.д.).
• Оценить работу системы Избиркомов.
• Оценить освещение кампании в СМИ.
• Выявить наиболее яркие события избирательной кампании.
• Определить факторы, влияющие на выбор кандидата при голосовании.
• Выявить влияние этой кампании на политическую систему России.
What Users Want: Methods of Making Successful Apps and Games -- Alexander Dzyuba, Sales Director, Playtestix (White Nights: Mobile Games Conference http://www.wnconf.com/)
Индекс доверия к избирательным процессам в Кыргызстанеsamvel231
Общественный фонд «Общее дело» - некоммерческая организация, созданная для проведения
мониторинга выборов разных уровней в Кыргызской Республике, реализации проектов
гражданского образования, содействия более активному участию граждан в процессах
управления. Данный опрос общественного мнения был проведен в рамках компонента по обучению
избирателей проекта «Независимое наблюдение за выборами в Кыргызской Республике»,
реализуемого Общественным фондом «Общее дело» при поддержке USAID.
Типология и этапы проведения исследованияИрина Галкина
В данной презентации рассматриваются вопросы о типологии маркетинговых исследований, пошагово раскрывается последовательность и содержание этапов маркетинговых исследований по изучению потребителей, рассматриваются виды выборок. Разбирается практика проведения маркетингового исследования.
Подробнее смотрите на сайте learningonline.ru
Тема 3. Этапы проведения исследования. Этап второй: 3.Методы количественного ...Ирина Галкина
Лекция в форме презентации. Посвящена второму этапу организации проведения маркетингового исследования Рассматриваются методы количественного сбора исследовательской информации. Дается характеристика основным видам анкет.
Примеры развичных видов анкет можно посмотреть на сайте http://learningonline.ru
Доверие к выборам и необходимость контроля за ними: 01.02.2011ВЦИОМ
1 февраля - Валерий Федоров выступил с докладом «Доверие к выборам и необходимость контроля за ними» на брифинге ассоциаций НКО по защите прав избирателей «Гражданский контроль». Мероприятие было посвящено старту электоральных компаний в регионах России, где 13 марта пройдут выборы в региональные и местные законодательные органы.
Исследования общественного мнения
Омнибус
«Экспресс» - еженедельное
исследование омнибусного типа, что позволяет одновременно включать в одну анкету совершенно разные тематические блоки: от оценки эффективности рекламной кампании банка до оценки эффективности работы органов власти. Омнибус практически универсальный инструмент изучения общественного мнения, география опроса и возраст участников (18+) позволяют с его помощью исследовать маркетинговые, социально-политические и экономические проблемы.
Задачи исследования:
• Определить личное профессиональное участие в президентской кампании 2018 г. и статус участия.
• Раскрыть участие в выборах в роли избирателя.
• Оценить эффективность механизмов направленных на повышение явки избирателей (вирусные ролики,
административная мобилизация, мобилизационные квазиреферендумантарные проекты: "Комфортная городская
среда" и т.д.).
• Оценить избирательные кампании кандидатов в Президенты РФ (эффективность выступления в телеэфирах (дебатах),
баннеры, видеоролики, яркие события в ходе избирательной кампании, решение стратегических и тактических задач
кандидатами и т.д.).
• Оценить работу системы Избиркомов.
• Оценить освещение кампании в СМИ.
• Выявить наиболее яркие события избирательной кампании.
• Определить факторы, влияющие на выбор кандидата при голосовании.
• Выявить влияние этой кампании на политическую систему России.
What Users Want: Methods of Making Successful Apps and Games -- Alexander Dzyuba, Sales Director, Playtestix (White Nights: Mobile Games Conference http://www.wnconf.com/)
Индекс доверия к избирательным процессам в Кыргызстанеsamvel231
Общественный фонд «Общее дело» - некоммерческая организация, созданная для проведения
мониторинга выборов разных уровней в Кыргызской Республике, реализации проектов
гражданского образования, содействия более активному участию граждан в процессах
управления. Данный опрос общественного мнения был проведен в рамках компонента по обучению
избирателей проекта «Независимое наблюдение за выборами в Кыргызской Республике»,
реализуемого Общественным фондом «Общее дело» при поддержке USAID.
Типология и этапы проведения исследованияИрина Галкина
В данной презентации рассматриваются вопросы о типологии маркетинговых исследований, пошагово раскрывается последовательность и содержание этапов маркетинговых исследований по изучению потребителей, рассматриваются виды выборок. Разбирается практика проведения маркетингового исследования.
Подробнее смотрите на сайте learningonline.ru
Тема 3. Этапы проведения исследования. Этап второй: 3.Методы количественного ...Ирина Галкина
Лекция в форме презентации. Посвящена второму этапу организации проведения маркетингового исследования Рассматриваются методы количественного сбора исследовательской информации. Дается характеристика основным видам анкет.
Примеры развичных видов анкет можно посмотреть на сайте http://learningonline.ru
15.08.2014 Политические предпочтения москвичей накануне выборов в МосгордумуВЦИОМ
Уровень информированности о предстоящих выборах в Мосгордуму превышает 80%, а о своей готовности принять в них участие с уверенностью заявляет каждый третий житель столицы.
Как сформировать состав группы респондентов для проведения дизайн-исследования и получить при этом хороший результат. Видео: http://youtu.be/FHNiTmsP4qs.
Ассоциация региональных социологических центров «Группа 7/89» завершила статистический анализ и обработку результатов инициативного исследовательского проекта «Профессиональный рейтинг исследовательских компаний-2015».
Прошлой осенью слушатели курса ФОМ-Лабс “Исследования в городе: оптика наблюдателя” посетили город Кимры, чтобы понять, как возможны социокультурные проекты в малом городе, который пережил героиновый апокалипсис в начале нулевых. В красочном альбоме собраны фотографии Кимр, заметки участников экспедиции, а также истории героев, которые в меру собственных сил изменяют мир вокруг себя.
1. КАТЕГОРИАЛЬНЫЕ МЕТОДЫ
АНАЛИЗА ДАННЫХ В ЗАДАЧЕ
ПРОГНОЗИРОВАНИЯ ЭЛЕКТОРАЛЬНОГО
ПОВЕДЕНИЯ
к.э.н., доцент Галицкий Е. Б.,
лаборатория анализа данных ФОМ,
кафедра маркетинга фирмы НИУ ВШЭ
1
Доклад на 38-ом заседании международной научной школы-
семинара «Системное моделирование социально-
экономических процессов» имени академика С.С. Шаталина
г. Казань, 2-8 октября 2015 г.
2. Проблемы прогнозирования
поведения больших групп людей
• Примеры ситуаций, когда необходимо прогнозирование
• предупреждение массовых «панических атак» на банки
• возникновение массовых протестных движений
• предвыборная борьба
• Трудность прогнозирования таких ситуаций в том, что многие избиратели
принимают решения спонтанно, сами не могут предсказать, что сделают
через неделю
• Методика прогнозирования электорального поведения применялась в
ФОМе с 2000 года для общероссийских, региональных, городских и т.п.
выборов, а также выборов в Грузии и на Украине
• Методика точнее «работает» на общероссийском уровне, чем на
региональном, т.к. в меньшей степени влияют локальные события, резко
меняющие ситуацию
2
3. Гипотезы, лежащие в основе
прогнозирования
1. Об электоральном поведении всех избирателей можно
судить по ответам небольшого числа «правильно
отобранных» респондентов
2. Респонденты отвечают на вопросы, раскрывая тем
самым свои скрытые (латентные) установки
3. Электоральные установки можно оценить, построив:
• индикатор склонности участвовать в выборах
• индикаторов отношения к каждому кандидату
4. Т.к. индикатор выражает то общее, что проявляется во
всех этих вопросах, анализ ответов на них может
подсказать «правило» построения индикатора
3
5. Вопросы для индикатора отношения
• К кому из этих людей Вы относитесь положительно, с доверием? (Здесь и далее
демонстрируется список кандидатов.)
• А к кому из этих людей Вы относитесь отрицательно, с недоверием?
• За кого из кандидатов на пост губернатора нашей области Вы, скорее всего,
проголосуете?
• Здесь предусмотрены, но не демонстрируются респондентам также и варианты
«испорчу бюллетень», «не пойду на выборы» и «затрудняюсь ответить»
• Если Вам сложно определиться, то возможно, Вы могли бы назвать двух-трёх кандидатов,
из числа которых Вы, скорее всего, будете выбирать?
• Вопрос задаётся только затруднившимся ответить на предыдущий
• Я буду называть имена кандидатов, а Вы скажите, пожалуйста, про каждого, допускаете
ли Вы в принципе возможность проголосовать за него на выборах
• Пять вариантов: «безусловно допускаю», «скорее допускаю», …, «безусловно
исключаю», «затрудняюсь ответить»
• По Вашему мнению, кто из людей, перечисленных на карточке, в принципе мог бы
справиться с обязанностями губернатора области?
• Агитация в пользу каких кандидатов Вам нравится, не вызывает раздражения?
• Предвыборная агитация в пользу каких кандидатов Вам не нравится, вызывает
раздражение?
5
6. Ключевая проблема построения
индикаторов отношения
• Рассмотрим респондента, который сказал
следующее:
• Про одного кандидата:
• назвал в числе тех, кому доверяет
• скорее допускает возможность проголосовать
• Про другого кандидата:
• не назвал в числе тех, кому доверяет
• безусловно допускает возможность проголосовать
• К какому из этих кандидатов индикатор
отношения данного респондента выше?
• Правило построения индикатора должно быть
единым для всех кандидатов
6
7. Данные для построения индикатора
отношения к каждому из k кандидатов
(7 столбцов, 1000*k строк)
1. Доверяете?
(да- 1, нет - 0)
… 6. Допускаете?
(5-балльная)
7. Способен?
(да- 1, нет - 0)
Все респонденты
о 1-ом кандидате
(1000 строк)
…
Все респонденты
о 1-ом кандидате
Все респонденты
о 1-ом кандидате
Все респонденты
о 2-ом кандидате
(1000 строк)
…
Все респонденты
о 2-ом кандидате
Все респонденты
о 2-ом кандидате
… … … …
Все респонденты
о k-ом кандидате
(1000 строк)
…
Все респонденты
о k-ом кандидате
Все респонденты
о k-ом кандидате
7
8. Метод построения индикатора
отношения
• Классический анализ главных компонент
невозможен, т.к. есть ранговые переменные:
• не голосую, буду выбирать, голосую
• безусловно не допускаю, скорее не допускаю и т.д.
• Категориальный анализ главных компонент (CATPCA)
позволяет:
• найти квантификации таких переменных
• построить фактор, объясняющий наибольшую долю
дисперсии
• Фактор преобразуется в шкалу [0;100]
• Выясняется, сколько баллов вносит каждый ответ
8
9. Пример: квантификация вопросов о выборе
из списка кандидатов, баллы
9
0,0
9,4
20,3
не назвал назвал в числе
нескольких возможных
сказал, что проголосует
10. Пример: квантификация вопросов о выборе
из списка кандидатов и участии в выборах, баллы
10
0,0
8,8
19,0 19,0
20,4
не назвал назвал в числе
нескольких
возможных
проголосовал
бы, но не
пойду
проголосовал
бы, но
допускаю, что
не пойду
проголосую,
точно пойду
11. Пример: квантификация вопросов
о возможности голосования за каждого
кандидата по отдельности, баллы
11
0,0 0,5 0,7
11,7
21,9
безусловно не
допускают
скорее не
допускают
затруднились
ответить
скорее
допускают
безусловно
допускают
12. Правило построения индикатора
отношения к кандидату
12
Ответ Баллы
«Безусловно допускаю возможность за него проголосовать» 21,9
«Я за него проголосую» 20,3
«Я ему доверяю» 18,9
«Он мог бы, в принципе, исполнять обязанности губернатора» 17,7
«Агитация в его пользу мне нравится, не вызывает раздражения» 12,0
«Скорее допускаю возможность за него проголосовать» 11,7
«Он один из тех, из которых буду выбирать» 9,4
«Я не могу сказать, что ему не доверяю» 5,1
«Не могу сказать, что агитация его в пользу мне не нравится» 4,1
«Затрудняюсь ответить на вопрос о возможности проголосовать» 0,7
«Скорее не допускаю возможности за него проголосовать» 0,5
«Безусловно не допускаю возможности за него проголосовать» 0
Если ничего не сказал о кандидате – 9,9 балла («нейтраль»)
13. Предварительный (без учёта явки)
прогноз распределения голосов
• Рассчитываются индикаторы отношения к каждому
кандидату и для каждого респондента находится
максимум по всем кандидатам
• Если этот максимум меньше «нейтрали» (респондент
«ругал» всех кандидатов), он испортит бюллетень
• Если максимум равен «нейтрали» («респондент ни про
кого ничего не сказал»), его голос распределяется
пропорционально голосам остальных респондентов
• Если максимум больше «нейтрали», голос респондента
засчитывается кандидату с наибольшими значениями
индикатора
• Если таких кандидатов несколько, голос делится между
ними поровну
13
15. Принципы прогнозирования
участия в выборах
• О вероятности фактического участия респондента в выборах можно
судить по его ответам на соответствующие вопросы анкеты
• Вероятности участия в выборах у респондентов с различными
электоральными предпочтениями могут различаться
• В частности, вероятности участия в выборах тех респондентов, хотя
бы часть голоса которых может отойти кандидату от действующей
власти, может оказаться ниже вероятности участия остальных
респондентов
• Примечание. Это не относится к респондентам с нейтральным
отношением ко всем кандидатам. Вероятность их участия в выборах равна
средней вероятности участия остальных респондентов
• Разные вероятности участия голосующих и не голосующих за власть
позволяют внести «поправку» на социально одобряемые ответы
(большинству респондентов проще декларировать мнение,
которого придерживается большинство - «спираль молчания»
Ноэль Нойман)
• Параметры зависимости вероятности участия в выборах от ответов
респондентов можно оценить по данным о результатах прошедших
выборов
15
16. Для построения индикатора склонности
участвовать в выборах использовались
вопросы:
• Как Вы думаете, большинство Ваших знакомых,
друзей примут или не примут участие в выборах
губернатора?
• 5 вариантов: «безусловно примут», «скорее примут»,
…, «безусловно не примут», «затрудняюсь ответить»
• Посмотрите, пожалуйста, на карточку и
уточните: Вы лично примете или не примете
участие в выборах?
• 6 вариантов демонстрируется респондентам:
• «совершенно точно не приму участия», «вероятнее всего не
приму участия», «скорее не приму, чем приму участие», …,
«совершенно точно приму участие»
• не демонстрируется вариант «затрудняюсь ответить»
16
17. Особенность методики
построения данного индикатора
• Поскольку вопрос о склонности большинства
знакомых респондента участвовать в выборах,
не относится к респонденту напрямую, он
используется только для квантификации
основного вопроса
17
18. Квантификация вопроса о склонности
участвовать в выборах
18
0,0
3,2
10,9
17,8
53,4
71,8
100,0
совершенно
точно не приму
участие
вероятнее
всего не приму
участия
скорее не
приму, чем
приму участие
затрудняюсь
ответить
скорее приму,
чем не приму
участие
вероятнее
всего приму
участие
совершенно
точно приму
участие
19. Поиск вероятности участия в выборах
при каждом значении индикатора
• S-образная кривая вероятности участия респондента
в выборах в зависимости от значений индикатора
отыскивается как интегральная функция
нормального распределения
• Параметры этой функции (среднее значение и
стандартное отклонение) отыскиваются путём
минимизации различий между прогнозами и
результатами прошедших ранее выборов
• Используется эволюционный метод, реализованный в
надстройке MS Excel (http://www.solver.com)
• С весом 0,7 учитывается квадраты расхождений по
голосованию «за власть», с весом 0,3 – расхождения по
явке
19
20. Результаты оптимального подбора
вероятностей
(По горизонтальной оси равноудалённые ответы)
20
18,3 18,8 20,2
21,5
29,1
33,4
40,4
15,0 16,2
19,1
22,0
40,3
51,0
67,0
0
10
20
30
40
50
60
70
80
совершенно
точно не
приму участие
вероятнее
всего не
приму участия
скорее не
приму, чем
приму участие
затрудняюсь
ответить
скорее приму,
чем не приму
участие
вероятнее
всего приму
участие
совершенно
точно приму
участие
ВЕРОЯТНОСТЬУЧАСТИЯ(УМНОЖЕНАНА100)
ОТВЕТЫ РЕСПОНДЕНТА О НАМЕРЕНИИ УЧАСТВОВАТЬ В ВЫБОРАХ
Хотя бы часть голоса - "за власть"
Не голосует "за власть"
*Параметры кривых подбирались по данным 4-х опросов за неделю до выборов 2015 г. и 4 опросов – за месяц.
21. Результаты оптимального подбора
вероятностей
(По горизонтальной оси квантификация ответов)
21
0
10
20
30
40
50
60
70
80
0,00 10,00 20,00 30,00 40,00 50,00 60,00 70,00 80,00 90,00 100,00
ВЕРОЯТНОСТЬУЧАСТИЯ(УМНОЖЕНАНА100)
КВАНТИФИКАЦИЯ ОТВЕТОВ РЕСПОНДЕНТОВ О НАМЕРЕНИИ УЧАСТВОВАТЬ В ВЫБОРАХ
Хотя бы часть голоса - "за власть"
Не голосует "за власть"
*Параметры кривых подбирались по данным 4-х опросов за неделю до выборов 2015 г. и 4 опросов – за месяц.
23. Доли голосов за кандидатов в губернаторы от партии
«Единая Россия» (расчёт и данные ЦИК)
50,1 51,9
70,3
64,2
56,6 56,7
68,8
77,3
50,8 49,6
71,4
60,0
50,6 53,3
70,4
82,1
0,0
10,0
20,0
30,0
40,0
50,0
60,0
70,0
80,0
90,0
Расчёт после оптимизации параметров Данные ЦИК
23
*В регионах, помеченных звёздочкой, опросы проводились за неделю до выборов, а в остальных – за месяц.
24. Расчёт доли голосов, отданных за
кандидатов партии «Единая Россия»
53,0
52,6
76,3
68,4
60,1
63,1
77,5
81,8
50,1
51,9
70,3
64,2
56,6
56,7
68,8
77,3
50,8
49,6
71,4
60,0
50,6
53,3
70,4
82,1
0,0
10,0
20,0
30,0
40,0
50,0
60,0
70,0
80,0
90,0
Расчёт до выборов Расчёт после оптимизации параметров Данные ЦИК
24
26. Выводы
• Многомерные методы анализа категориальных
данных способны помочь в поиске скрытых
даже от самих людей (латентных)
характеристик, от которых зависит их
поведение
• В частности, квантификация категорий вопроса
о намерении участвовать в выборах почти
линеаризует кривую вероятности
26