SlideShare a Scribd company logo
1 of 52
ПРОВЕДЕНИЕ ПРОБНОГО ТЕСТИРОВАНИЯ.  ПОКАЗАТЕЛИ КАЧЕСТВА ТЕСТОВ . Лекция 7
[object Object],[object Object],[object Object]
[object Object],[object Object],[object Object]
№  испытуемого  i   №  задания  j Индивидуальный балл X i 1 2 3 4 5 6 7 8 9 10 1 1 1 1 1 1 1 0 0 0 0 6 2 1 1 0 0 0 0 0 0 0 0 2 3 0 0 0 0 0 0 0 1 0 0 1 4 1 1 0 1 1 1 1 1 1 1 9 5 1 0 1 0 1 1 0 0 0 0 4 6 1 1 1 0 0 0 0 1 0 0 4 7 1 1 1 1 0 1 0 0 0 0 5 8 1 1 1 1 0 0 0 0 0 0 4 9 1 1 1 1 1 1 1 1 1 0 9 10 1 1 1 1 1 0 1 0 0 0 6 Число правильных ответов Y j 9 8 7 6 5 5 3 4 2 1 50
№  испытуемого  i   №  задания  j Индивидуальный балл X i 1 2 3 4 5 6 7 8 9 10 3 0 0 0 0 0 0 0 1 0 0 1 2 1 1 0 0 0 0 0 0 0 0 2 5 1 0 1 0 1 1 0 0 0 0 4 6 1 1 1 0 0 0 1 0 0 0 4 8 1 1 1 1 0 0 0 0 0 0 4 7 1 1 1 1 0 1 0 0 0 0 5 1 1 1 1 1 1 1 0 0 0 0 6 10 1 1 1 1 1 0 0 1 0 0 6 9 1 1 1 1 1 1 1 1 1 0 9 4 1 1 0 1 1 1 1 1 1 1 9 Число правильных ответов Y j 9 8 7 6 5 5 4 3 2 1 50
[object Object],[object Object],[object Object],[object Object]
[object Object],[object Object]
[object Object],[object Object],№  задания  1 ответ 2 ответ* 3 ответ 4 ответ j 0,1 0,7 0,1 0,1
Анализ правдоподобности дистракторов в заданиях закрытой формы с четырьмя ответами № задания Всего Распределение ответов испытуемых 1-й ответ 2-й ответ 3-й ответ 4-й ответ кол. % Кол. % кол. % кол. % 1 96 8 8,2 1 1,0 65 67,0* 22 23,0 2 96 4 4,1 20 21,0 2 2,1 70 72,0* 3 97 19 20,0 29 30,0 24 25,0* 25 26,0 4 93 18 19,0 10 10,0 59 61,0* 6 6,2 5 96 47 48,0 33 34,0* 9 9,3 7 7,2 6 97 0 0,0 6 6,2 91 94,0* 0 0,0 7 90 19 20,0 24 25,0 40 41,0* 7 7,2 8 93 3 3,1 11 11,0 2 2,1 77 79,0* 9 86 31 32,0 1 1,0 22 23,0 32 33,0* 10 97 35 36,0 23 24,0 39 40,0* 0 0,0
Дискриминативность (дифференцирующая способность, различающая способность) задания - это способность задания дифференцировать испытуемых по уровню достижений, на сильных и слабых.  ,[object Object]
[object Object],[object Object],[object Object],[object Object],[object Object]
№  задания P j  для всех испытуемых Группа Индекс r дис P j  для слабой P j  для сильной 1 21,0 6,5 32,0 0,26 2 94,0 90,0 97,0 0,065 3 64,0 42,0 97,0 0,55 4 59,0 68,0 58,0 -0,097 5 27,0 16,0 29,0 0,13 6 70,0 29,0 94,0 0,65 7 30,0 13,0 42,0 0,29 8 12,0 9,7 16,0 0,065 9 33,0 16,0 52,0 0,35 10 73,0 42,0 90,0 0,48
[object Object],[object Object],[object Object],[object Object]
 
[object Object]
[object Object]
[object Object],[object Object]
[object Object]
[object Object]
[object Object]
[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]
[object Object],[object Object],[object Object],[object Object]
∑   (Y i ) 2 ∑ (X i ) 2 ∑   X i Y i ∑ Y i ∑ X i (Y N ) 2 (X N ) 2 X N  Y N Y N X N N студент  … (Y 2 ) 2 (X 2 ) 2 X 2  Y 2 Y 2 X 2 2 студент  (Y 1 ) 2 (X 1 ) 2 X 1  Y 1 Y 1 X 1 1 студент
 
[object Object],[object Object]
[object Object],[object Object],[object Object]
∑   (Y i ) 2 ∑ (X i ) 2 ∑   X i Y i ∑ Y i ∑ X i (Y N ) 2 (X N ) 2 X N  Y N Y N X N N студент  … (Y 2 ) 2 (X 2 ) 2 X 2  Y 2 Y 2 X 2 2 студент  (Y 1 ) 2 (X 1 ) 2 X 1  Y 1 Y 1 X 1 1 студент
 
[object Object],[object Object]
[object Object]
[object Object]
[object Object],[object Object]
[object Object]
 
[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]
Для нормативно-ориентированного теста Величина надежности Оценка надежности 0,90 - 0,99 Отличная 0,80 - 0,89 Хорошая 0,70 - 0,79 Удовлетворительная Менее 0,70 Неудовлетворительная
[object Object]
[object Object],Тест В Зачет  Незачет А D C B Незачет Зачет Тест А
[object Object],[object Object],[object Object]
[object Object]
[object Object],[object Object],[object Object]
[object Object],[object Object],[object Object]
[object Object],[object Object],[object Object],[object Object],[object Object]
[object Object],[object Object]
[object Object],[object Object]
[object Object],[object Object]
[object Object]
[object Object]
 
[object Object],[object Object],отклонение тестового балла  i – го студента от среднего  балла по тесту  отклонение экспертного балла  i – го студента от среднего  арифметического экспертных о ценок
[object Object]
[object Object],[object Object]

More Related Content

What's hot

Tests bogachkov last_version_120412
Tests bogachkov last_version_120412Tests bogachkov last_version_120412
Tests bogachkov last_version_120412
Vladimir Kukharenko
 
Введение в курс составления тестов.
Введение в курс составления тестов.Введение в курс составления тестов.
Введение в курс составления тестов.
gilraenanarion
 
уровни подготовленности по теме лекции № 1
уровни подготовленности по теме лекции № 1уровни подготовленности по теме лекции № 1
уровни подготовленности по теме лекции № 1
Аркадий Захаров
 
2010 егэ математика
2010 егэ математика2010 егэ математика
2010 егэ математика
Airat Yusupov
 

What's hot (14)

Сравнение выборок
Сравнение выборокСравнение выборок
Сравнение выборок
 
матстатистика для Hr
матстатистика для Hrматстатистика для Hr
матстатистика для Hr
 
gia9
gia9gia9
gia9
 
Tests bogachkov last_version_120412
Tests bogachkov last_version_120412Tests bogachkov last_version_120412
Tests bogachkov last_version_120412
 
уравнения с-параметрами (логарифм,показат,тригон)
уравнения с-параметрами (логарифм,показат,тригон)уравнения с-параметрами (логарифм,показат,тригон)
уравнения с-параметрами (логарифм,показат,тригон)
 
ОЦЕНКА ЧИСЛА ПОБЕДИТЕЛЕЙ ЗАКЛЮЧИТЕЛЬНЫХ ЭТАПОВ ОЛИМПИАД
ОЦЕНКА ЧИСЛА ПОБЕДИТЕЛЕЙ ЗАКЛЮЧИТЕЛЬНЫХ ЭТАПОВ ОЛИМПИАДОЦЕНКА ЧИСЛА ПОБЕДИТЕЛЕЙ ЗАКЛЮЧИТЕЛЬНЫХ ЭТАПОВ ОЛИМПИАД
ОЦЕНКА ЧИСЛА ПОБЕДИТЕЛЕЙ ЗАКЛЮЧИТЕЛЬНЫХ ЭТАПОВ ОЛИМПИАД
 
лин уравнения с параметрами
лин уравнения с параметрамилин уравнения с параметрами
лин уравнения с параметрами
 
решение уравнений с параметрами
решение уравнений с параметрамирешение уравнений с параметрами
решение уравнений с параметрами
 
Введение в курс составления тестов.
Введение в курс составления тестов.Введение в курс составления тестов.
Введение в курс составления тестов.
 
уровни подготовленности по теме лекции № 1
уровни подготовленности по теме лекции № 1уровни подготовленности по теме лекции № 1
уровни подготовленности по теме лекции № 1
 
2010 егэ математика
2010 егэ математика2010 егэ математика
2010 егэ математика
 
завдання з параметрами
завдання з параметрамизавдання з параметрами
завдання з параметрами
 
ДПА 9 клас
ДПА 9 класДПА 9 клас
ДПА 9 клас
 
Корреляция и МНК (семинар)
Корреляция и МНК (семинар)Корреляция и МНК (семинар)
Корреляция и МНК (семинар)
 

Viewers also liked (9)

M.Torres & L.Ferreria Empordàfieldtrip
M.Torres & L.Ferreria EmpordàfieldtripM.Torres & L.Ferreria Empordàfieldtrip
M.Torres & L.Ferreria Empordàfieldtrip
 
Media Preliminary
Media PreliminaryMedia Preliminary
Media Preliminary
 
Univer
UniverUniver
Univer
 
Ny
NyNy
Ny
 
Maveda oggi
Maveda oggiMaveda oggi
Maveda oggi
 
Seasons1 ESO
Seasons1 ESOSeasons1 ESO
Seasons1 ESO
 
лекция 1
лекция 1лекция 1
лекция 1
 
Wateruses
WaterusesWateruses
Wateruses
 
лекция 6
лекция 6лекция 6
лекция 6
 

Similar to лекция07

лабораторная02 97
лабораторная02 97лабораторная02 97
лабораторная02 97
cezium
 
Прикладная эконометрика. Лекция 4
Прикладная эконометрика. Лекция 4Прикладная эконометрика. Лекция 4
Прикладная эконометрика. Лекция 4
Vladimir Tcherniak
 
10 алг мерзляк_полонский_задачн_2010_рус
10 алг мерзляк_полонский_задачн_2010_рус10 алг мерзляк_полонский_задачн_2010_рус
10 алг мерзляк_полонский_задачн_2010_рус
Aira_Roo
 
Методики оценки рекомендательных систем
Методики оценки рекомендательных системМетодики оценки рекомендательных систем
Методики оценки рекомендательных систем
Witology
 
лекция09
лекция09лекция09
лекция09
cezium
 

Similar to лекция07 (20)

Позиционный анализ для магистров
Позиционный анализ для магистровПозиционный анализ для магистров
Позиционный анализ для магистров
 
лабораторная02 97
лабораторная02 97лабораторная02 97
лабораторная02 97
 
Проверка Гипотез Критерий Пирсона01 .pptx
Проверка Гипотез Критерий Пирсона01 .pptxПроверка Гипотез Критерий Пирсона01 .pptx
Проверка Гипотез Критерий Пирсона01 .pptx
 
Надежность и позиционный анализ (главная)
Надежность и позиционный анализ (главная)Надежность и позиционный анализ (главная)
Надежность и позиционный анализ (главная)
 
Regress 2015.05.011
Regress 2015.05.011Regress 2015.05.011
Regress 2015.05.011
 
Прикладная эконометрика. Лекция 4
Прикладная эконометрика. Лекция 4Прикладная эконометрика. Лекция 4
Прикладная эконометрика. Лекция 4
 
10 алг мерзляк_полонский_задачн_2010_рус
10 алг мерзляк_полонский_задачн_2010_рус10 алг мерзляк_полонский_задачн_2010_рус
10 алг мерзляк_полонский_задачн_2010_рус
 
10
1010
10
 
Формирование целевой функции оценки качества раскатки слоеного теста
Формирование целевой функции оценки качества раскатки слоеного тестаФормирование целевой функции оценки качества раскатки слоеного теста
Формирование целевой функции оценки качества раскатки слоеного теста
 
6
66
6
 
8.2. Подходы к диагностике метапредметных результатов обучения в рамках предм...
8.2. Подходы к диагностике метапредметных результатов обучения в рамках предм...8.2. Подходы к диагностике метапредметных результатов обучения в рамках предм...
8.2. Подходы к диагностике метапредметных результатов обучения в рамках предм...
 
1890 математика. подг. к огэ в 2016г. диагностические работы 2016 -144с
1890  математика. подг. к огэ в 2016г. диагностические работы 2016 -144с1890  математика. подг. к огэ в 2016г. диагностические работы 2016 -144с
1890 математика. подг. к огэ в 2016г. диагностические работы 2016 -144с
 
Сравнение выборок
Сравнение выборокСравнение выборок
Сравнение выборок
 
математика сборник 11 класс
математика сборник 11 классматематика сборник 11 класс
математика сборник 11 класс
 
КР 2 с решением
КР 2 с решениемКР 2 с решением
КР 2 с решением
 
Доверительные интервалы
Доверительные интервалыДоверительные интервалы
Доверительные интервалы
 
Методики оценки рекомендательных систем
Методики оценки рекомендательных системМетодики оценки рекомендательных систем
Методики оценки рекомендательных систем
 
конференция декабрь 2016 3 стороны точности ответа на вопрос
конференция декабрь 2016 3 стороны точности ответа на вопросконференция декабрь 2016 3 стороны точности ответа на вопрос
конференция декабрь 2016 3 стороны точности ответа на вопрос
 
3 стороны точности ответа на вопрос и три инструмента для его оценки
3 стороны точности ответа на вопрос и три инструмента для его оценки3 стороны точности ответа на вопрос и три инструмента для его оценки
3 стороны точности ответа на вопрос и три инструмента для его оценки
 
лекция09
лекция09лекция09
лекция09
 

More from cezium

обучение, его стурктура
обучение, его стурктураобучение, его стурктура
обучение, его стурктура
cezium
 
основные аспекты эффективности и их интерпретация
основные аспекты эффективности и их интерпретацияосновные аспекты эффективности и их интерпретация
основные аспекты эффективности и их интерпретация
cezium
 
метрологическое обеспечение испытаний
метрологическое обеспечение испытанийметрологическое обеспечение испытаний
метрологическое обеспечение испытаний
cezium
 
программы и методы сертификационных испытаний
программы и методы сертификационных испытанийпрограммы и методы сертификационных испытаний
программы и методы сертификационных испытаний
cezium
 
проверки документации и ее применения на соответствие международным
проверки документации и ее применения на соответствие международнымпроверки документации и ее применения на соответствие международным
проверки документации и ее применения на соответствие международным
cezium
 
порядок взаимоотношений предприятий....
порядок взаимоотношений предприятий....порядок взаимоотношений предприятий....
порядок взаимоотношений предприятий....
cezium
 
мотивация к сертификации1
мотивация к сертификации1мотивация к сертификации1
мотивация к сертификации1
cezium
 
системы сертификации, требования к аккредитации
системы сертификации, требования к аккредитациисистемы сертификации, требования к аккредитации
системы сертификации, требования к аккредитации
cezium
 
системы сертификации, требования к сертификации
системы сертификации, требования к сертификациисистемы сертификации, требования к сертификации
системы сертификации, требования к сертификации
cezium
 
международное сотрудничество в области сертификации.
международное сотрудничество в области сертификации.международное сотрудничество в области сертификации.
международное сотрудничество в области сертификации.
cezium
 
стандарты на системы обеспечения качества окружающей среды2003
стандарты на системы обеспечения качества окружающей среды2003стандарты на системы обеспечения качества окружающей среды2003
стандарты на системы обеспечения качества окружающей среды2003
cezium
 
оценка факторов, влияющих на качество программных продуктов(2)
оценка факторов, влияющих на качество программных продуктов(2)оценка факторов, влияющих на качество программных продуктов(2)
оценка факторов, влияющих на качество программных продуктов(2)
cezium
 
современные модели качества программного обеспечения
современные модели качества программного обеспечениясовременные модели качества программного обеспечения
современные модели качества программного обеспечения
cezium
 
международные и отечественные стандарты на системы управления качеством проду...
международные и отечественные стандарты на системы управления качеством проду...международные и отечественные стандарты на системы управления качеством проду...
международные и отечественные стандарты на системы управления качеством проду...
cezium
 
лекция 5
лекция 5лекция 5
лекция 5
cezium
 
лекция 4
лекция 4лекция 4
лекция 4
cezium
 
лекция 3
лекция 3лекция 3
лекция 3
cezium
 

More from cezium (20)

обучение, его стурктура
обучение, его стурктураобучение, его стурктура
обучение, его стурктура
 
основные аспекты эффективности и их интерпретация
основные аспекты эффективности и их интерпретацияосновные аспекты эффективности и их интерпретация
основные аспекты эффективности и их интерпретация
 
метрологическое обеспечение испытаний
метрологическое обеспечение испытанийметрологическое обеспечение испытаний
метрологическое обеспечение испытаний
 
программы и методы сертификационных испытаний
программы и методы сертификационных испытанийпрограммы и методы сертификационных испытаний
программы и методы сертификационных испытаний
 
проверки документации и ее применения на соответствие международным
проверки документации и ее применения на соответствие международнымпроверки документации и ее применения на соответствие международным
проверки документации и ее применения на соответствие международным
 
порядок взаимоотношений предприятий....
порядок взаимоотношений предприятий....порядок взаимоотношений предприятий....
порядок взаимоотношений предприятий....
 
мотивация к сертификации1
мотивация к сертификации1мотивация к сертификации1
мотивация к сертификации1
 
системы сертификации, требования к аккредитации
системы сертификации, требования к аккредитациисистемы сертификации, требования к аккредитации
системы сертификации, требования к аккредитации
 
системы сертификации, требования к сертификации
системы сертификации, требования к сертификациисистемы сертификации, требования к сертификации
системы сертификации, требования к сертификации
 
международное сотрудничество в области сертификации.
международное сотрудничество в области сертификации.международное сотрудничество в области сертификации.
международное сотрудничество в области сертификации.
 
стандарты на системы обеспечения качества окружающей среды2003
стандарты на системы обеспечения качества окружающей среды2003стандарты на системы обеспечения качества окружающей среды2003
стандарты на системы обеспечения качества окружающей среды2003
 
оценка факторов, влияющих на качество программных продуктов(2)
оценка факторов, влияющих на качество программных продуктов(2)оценка факторов, влияющих на качество программных продуктов(2)
оценка факторов, влияющих на качество программных продуктов(2)
 
современные модели качества программного обеспечения
современные модели качества программного обеспечениясовременные модели качества программного обеспечения
современные модели качества программного обеспечения
 
л.4
л.4л.4
л.4
 
л.2
л.2л.2
л.2
 
л.1
л.1л.1
л.1
 
международные и отечественные стандарты на системы управления качеством проду...
международные и отечественные стандарты на системы управления качеством проду...международные и отечественные стандарты на системы управления качеством проду...
международные и отечественные стандарты на системы управления качеством проду...
 
лекция 5
лекция 5лекция 5
лекция 5
 
лекция 4
лекция 4лекция 4
лекция 4
 
лекция 3
лекция 3лекция 3
лекция 3
 

лекция07

  • 1. ПРОВЕДЕНИЕ ПРОБНОГО ТЕСТИРОВАНИЯ. ПОКАЗАТЕЛИ КАЧЕСТВА ТЕСТОВ . Лекция 7
  • 2.
  • 3.
  • 4. № испытуемого i   № задания j Индивидуальный балл X i 1 2 3 4 5 6 7 8 9 10 1 1 1 1 1 1 1 0 0 0 0 6 2 1 1 0 0 0 0 0 0 0 0 2 3 0 0 0 0 0 0 0 1 0 0 1 4 1 1 0 1 1 1 1 1 1 1 9 5 1 0 1 0 1 1 0 0 0 0 4 6 1 1 1 0 0 0 0 1 0 0 4 7 1 1 1 1 0 1 0 0 0 0 5 8 1 1 1 1 0 0 0 0 0 0 4 9 1 1 1 1 1 1 1 1 1 0 9 10 1 1 1 1 1 0 1 0 0 0 6 Число правильных ответов Y j 9 8 7 6 5 5 3 4 2 1 50
  • 5. № испытуемого i   № задания j Индивидуальный балл X i 1 2 3 4 5 6 7 8 9 10 3 0 0 0 0 0 0 0 1 0 0 1 2 1 1 0 0 0 0 0 0 0 0 2 5 1 0 1 0 1 1 0 0 0 0 4 6 1 1 1 0 0 0 1 0 0 0 4 8 1 1 1 1 0 0 0 0 0 0 4 7 1 1 1 1 0 1 0 0 0 0 5 1 1 1 1 1 1 1 0 0 0 0 6 10 1 1 1 1 1 0 0 1 0 0 6 9 1 1 1 1 1 1 1 1 1 0 9 4 1 1 0 1 1 1 1 1 1 1 9 Число правильных ответов Y j 9 8 7 6 5 5 4 3 2 1 50
  • 6.
  • 7.
  • 8.
  • 9. Анализ правдоподобности дистракторов в заданиях закрытой формы с четырьмя ответами № задания Всего Распределение ответов испытуемых 1-й ответ 2-й ответ 3-й ответ 4-й ответ кол. % Кол. % кол. % кол. % 1 96 8 8,2 1 1,0 65 67,0* 22 23,0 2 96 4 4,1 20 21,0 2 2,1 70 72,0* 3 97 19 20,0 29 30,0 24 25,0* 25 26,0 4 93 18 19,0 10 10,0 59 61,0* 6 6,2 5 96 47 48,0 33 34,0* 9 9,3 7 7,2 6 97 0 0,0 6 6,2 91 94,0* 0 0,0 7 90 19 20,0 24 25,0 40 41,0* 7 7,2 8 93 3 3,1 11 11,0 2 2,1 77 79,0* 9 86 31 32,0 1 1,0 22 23,0 32 33,0* 10 97 35 36,0 23 24,0 39 40,0* 0 0,0
  • 10.
  • 11.
  • 12. № задания P j для всех испытуемых Группа Индекс r дис P j для слабой P j для сильной 1 21,0 6,5 32,0 0,26 2 94,0 90,0 97,0 0,065 3 64,0 42,0 97,0 0,55 4 59,0 68,0 58,0 -0,097 5 27,0 16,0 29,0 0,13 6 70,0 29,0 94,0 0,65 7 30,0 13,0 42,0 0,29 8 12,0 9,7 16,0 0,065 9 33,0 16,0 52,0 0,35 10 73,0 42,0 90,0 0,48
  • 13.
  • 14.  
  • 15.
  • 16.
  • 17.
  • 18.
  • 19.
  • 20.
  • 21.
  • 22.
  • 23. (Y i ) 2 ∑ (X i ) 2 ∑ X i Y i ∑ Y i ∑ X i (Y N ) 2 (X N ) 2 X N Y N Y N X N N студент … (Y 2 ) 2 (X 2 ) 2 X 2 Y 2 Y 2 X 2 2 студент (Y 1 ) 2 (X 1 ) 2 X 1 Y 1 Y 1 X 1 1 студент
  • 24.  
  • 25.
  • 26.
  • 27. (Y i ) 2 ∑ (X i ) 2 ∑ X i Y i ∑ Y i ∑ X i (Y N ) 2 (X N ) 2 X N Y N Y N X N N студент … (Y 2 ) 2 (X 2 ) 2 X 2 Y 2 Y 2 X 2 2 студент (Y 1 ) 2 (X 1 ) 2 X 1 Y 1 Y 1 X 1 1 студент
  • 28.  
  • 29.
  • 30.
  • 31.
  • 32.
  • 33.
  • 34.  
  • 35.
  • 36. Для нормативно-ориентированного теста Величина надежности Оценка надежности 0,90 - 0,99 Отличная 0,80 - 0,89 Хорошая 0,70 - 0,79 Удовлетворительная Менее 0,70 Неудовлетворительная
  • 37.
  • 38.
  • 39.
  • 40.
  • 41.
  • 42.
  • 43.
  • 44.
  • 45.
  • 46.
  • 47.
  • 48.
  • 49.  
  • 50.
  • 51.
  • 52.