Семченко Евгений Евгеньевич Вологода 2014 ОКО

1. Итоги ЕГЭ-2014 и развитие системы оценки качества общего
образования в Российской Федерации
ССееммччееннккоо ЕЕввггеенниийй ЕЕввггееннььееввиичч
ННааччааллььнниикк УУппррааввллеенниияя
РРооссооббррннааддззоорр

2. Единый государственный экзамен
«ЕГЭ в России в целом сыграл положительную роль
и как элемент противодействия коррупции в сфере
образования, и как возможность абитуриентам
из различных регионов поступать в ведущие
российские вузы…»
Президент Российской Федерации В.В. Путин
15 октября 2014 года, г. Пенза

3. Меры, обеспечившие объективность ЕГЭ-2014
Указ Президента России от 2 мая 2014 г. № 294, вносящий
изменения в Указ от 21 августа 2012 г. № 1199
«Об оценке эффективности деятельности органов исполнительной
власти субъектов Российской Федерации»
(исключение показателя, связанного с ЕГЭ)
Письмо Д.В. Ливанова об оценке качества образования
в части нецелесообразности использования результатов
ЕГЭ для оценки работы педагогов, директоров школ и
муниципалитетов (от 27 июня 2014 года №ДЛ-187/08)

4. Средний тестовый балл
по Российской Федерации
Предметы Средний тестовый балл
2009 2013 2014
Русский язык 56,9 63,4 62,5
Математика 43,6 48,7 44,1
Физика 47,9 53,5 45,4
Химия 52,7 67,8 55,3
Информатика и ИКТ 55,4 63,1 57,1
Биология 51,3 58,6 54,1
История 47,3 54,8 45,3
География 49,1 57,2 52,9
Английский язык 57,8 72,4 61,1
Обществознание 56,3 64,9 52,9
Литература 50,4 58,4 53,5

5. Итоги ЕГЭ 2014. Русский язык
Количество участников ЕГЭ по русскому языку в 2014 году:
свыше 700 тыс. чел.,
из них не преодолели минимальный порог:
в 24 балла (для аттестата) 1,38 % от общего количества сдававших;
в 36 баллов (для поступления в вуз) 4,3 % от общего количества
сдававших.

6. ЕГЭ-2014: проблемы подготовки выпускников
по русскому языку
Соблюдение языковых норм
47% выпускников верно определяют лексическое значение многозначного
слова в тексте;
20% участников экзамена пишут без орфографических и пунктуационных
ошибок.
Умение воспринимать чужую речь и создавать собственные
высказывания
30% экзаменуемых способны оценить чужую речь с точи зрения уместности
и выразительности;
6% экзаменуемых достигают высокого уровня в понимании текста.
Умение проводить анализ языковых явлений
42% экзаменуемых верно определяют грамматическую основу
предложения;
27% экзаменуемых умеют проводить морфологический анализ.

7. Динамика результатов участников ЕГЭ
по Российской Федерации
ММааттееммааттииккаа

8. Итоги ЕГЭ 2014. Математика
Количество выпускников, сдававших ЕГЭ по математике в 2014 году:
700 тыс. чел.,
из них не преодолели минимальный порог:
в 20 баллов (для аттестата) 11,,44 %% от общего количества сдававших;
в 24 балла (для поступления в вузы) 7,,66 % от общего количества
сдававших.
Пример заданий
Поезд Мурманск – Санкт-Петербург отправляется в 9-15, а прибывает
в 11-15 на следующий день (время московское). Сколько часов поезд
находится в пути?
25% не справились с заданием

9. Динамика результатов участников ЕГЭ
по Российской Федерации
ИИссттоорриияя

10. Итоги ЕГЭ 2014. История.
Количество участников ЕГЭ по истории в 2014 году составило
145 699 чел., из них
не преодолели минимальный порог 2211,,33 %% от общего
количества сдававших.

11. ЕГЭ-2014: проблемы подготовки выпускников
по истории
История России 1917-1941 и 1945-1991 гг.:
24% выпускников считают, что Конституция РФ в 1993 г. была принята
Правительством РФ;
23% называют авторами программы «500 дней» А.Н. Косыгина и
А.Н.Микояна.
История Великой Отечественной войны:
50% не относят к Сталинградской битве бои за Мамаев курган;
28% не знают, что Акт о безоговорочной капитуляции нацистской Германии
от СССР подписал Г.К. Жуков.
История российской культуры
60% не могут определить эпоху, описываемую в «Слове о полку Игореве»;
22% уверены, что первые советские космические ракеты создал Н.И.Вавилов.

12. ЕГЭ-2015
Устная часть по иностранному языку
Совершенствование структуры КИМ
Базовый и профильный уровни по
математике
Итоговое сочинение как допуск к ГИА
Печать КИМ в ППЭ
Оптимизация сети ППЭ с увеличением
количества онлайн-аудиторий
Исключение из расписания ЕГЭ
дополнительного этапа
Увеличение количества заданий в
открытом банке

13. Минимальное количество баллов ЕГЭ, необходимое для поступления на
обучение по программам бакалавриата и программам специалитета

14. Контрольно-надзорные мероприятия на
региональном и федеральном уровне
Анализ результатов ЕГЭ в различных разрезах
Анализ заполнения и ведения РИС ЕГЭ
Анализ работ участников ЕГЭ (перепроверки и перекрестные проверки)
Анализ работы конфликтной комиссии
Анализ работы предметных комиссий
Правомерность допуска участников ЕГЭ на сдачу экзамена в досрочный
период и резервные дни
Неявка на экзамен участников ЕГЭ или досрочное завершение экзамена по
уважительной причине. Повторный допуск к сдаче экзамена.
Анализ видео с ППЭ в т.ч. оффлайн
Анализ причин существенного улучшения результата после «двойки»
Медицинские справки

15. Примеры одинаковых работ по ЕГЭ
ББллааннкк ооттввееттаа ууччаассттннииккаа ЕЕГГЭЭ YY ББллааннкк ооттввееттаа ууччаассттннииккаа ЕЕГГЭЭ ZZ

16. Методические рекомендации по некоторым аспектам
совершенствования преподавания общеобразовательных
предметов (на основе анализа ЕГЭ 2014)

17. Государственная итоговая аттестация-9
классы
Общее количество выпускников 9-х классов в 2014 году - 1 245 525 чел.
Количество выпускников, получивших аттестат об основном общем
Предмет
образовании - 1 206 870 чел.
Количество участников ОГЭ Количество участников ГВЭ
всего успешно сдавшие всего успешно сдавшие
Русский язык 1 184 425 1 159 158 45073 44701
Математика 1 184 204 1 087 220 45288 42029
Наиболее популярными среди предметов по выбору ГИА-9 в форме ОГЭ:
обществознание – 9,2% от общего количества участников;
физика – 4,1%;
биология – 3,4%;
информатика и ИКТ – 3,3%.

18. ГИА-9 в субъектах Российской Федерации в 2014 году
Региональные полномочия
Низкий уровень объективности
Понижение в регионах рекомендованного Рособрнадзором
минимального количества баллов по отдельным предметам
Своевременность и полнота вносимых в информационные
системы сведений

19. Контроль за ходом проведения ГИА-9 в 2015 году
Усиление общественно-профессионального контроля
(федеральные инспекторы и федеральные общественные
наблюдатели)
Присутствие в пунктах проведения экзаменов представителей
органов, осуществляющих переданные полномочия Российской
Федерации в сфере образования
Мониторинг внесения сведений в региональную
информационную систему (РИС)

20. Шкалирование результатов
Предмет
Максимальное
количество
первичных
баллов
Минимальный
порог,
рекомендованный
Рособрнадзором
Количество субъектов РФ,
установивших минимальный
порог ниже
рекомендованного
Рособрнадзором
Русский язык
34 18 52
Математика
18 8 63
В одном из регионов установлены минимальные пороги:
по русскому языку - 2 балла,
по математике - 1 балл.

21. РРееззууллььттааттыы ппррооввееддеенниияя ООГГЭЭ вв 22001144 ггооддуу
ПРИМЕР: Субъект «N» РФ, 2014 г.
Математика Русский язык
Результаты ОГЭ 0% отметок «2» 0,7% отметок «2»
Результаты ЕГЭ (после снижения
минимального балла)
41,3% не достигших
минимального балла
24,9% не достигших
минимального балла
Апробация базового ЕГЭ по
математике
31,7% не достигших
планируемого
минимального балла
Пересчет результатов ОГЭ по
69% отметок «2» 27,9% отметок «2»

22. ССииссттееммаа ппееррееввооддаа ббааллллоовв..
ММААТТЕЕММААТТИИККАА –– ООГГЭЭ--22001144
ПОСЛЕДСТВИЕ:
• Искусственное снижение минимального балла, учет только результатов выполнения
заданий по алгебре нарушает права обучающихся на получение качественного
образования!
• Обучающийся, не набравший на ОГЭ хотя бы 2 балла за выполнение простых заданий по
геометрии, в принципе не готов к освоению стереометрии в средней школе.
• Неспособность выполнить простейшие практико-ориентированные задачи – показатель
неготовности к решению реальных жизненных вопросов (простейшие бытовые расчеты,
скидки, выбор наиболее выгодных вкладов, кредитов, понимание прогнозов погоды,
динамики курсов акций, валют и т.п.)
НО:
Базовый ЕГЭ по математике: 20 заданий, из них 8 заданий
по «реальной математике» и 4 задания по геометрии.

23. «Ребенку должно быть интересно в школе. Иначе он
не будет вкладывать, отдавать свои силы этому делу.
Нам нужно готовить школьников к будущей жизни...»
Министр образования и науки Российской Федерации Д.В. Ливанов
29 мая 2012 года, интервью
«Необходимо, чтобы школьники получали
прочные знания и на их базе смогли овладеть
будущей профессией, добиться успеха, и в жизни
быть востребованными и полезными для своей
страны…»
Президент Российской Федерации В.В. Путин
15 октября 2014 года, выступление на пленарном заседании
форума Общероссийского общественного движения «Народный фронт «За Россию»

24. Цель системы объективной оценки качества образования
Получение объективных данных
о качестве образования и результатах обучения
Принятие государственно-общественных управленческих
решений по совершенствованию образовательных процессов
и системы образования в целом
Стимулирование развития образования, а не наказание за результат

25. Развитие системы
образования
Государственно-
общественное управление
Повышение
профессионального уровня
педагога
(указы Президента РФ,
профессиональный
стандарт, эффективный
контракт)
Модернизация подготовки
педагогических кадров
Система оценивания
достижений учащихся
(ОСОКО, ГИА, ЕГЭ)
Мониторинг системы
образования
Модернизация
материально-технической
базы (ПНПО, МРСО,
МРСДО, МРСО-2)
Механизмы реализации
(государственная
программа, ФЦПРО)
Обновление содержания образования
(ФГОС нового поколения, новые
примерные общеобразовательные
программы) Нормативно-правовое
регулирование
(ФЗ «Об образовании в
РФ», подзаконные акты)

26. Дошкольное образование
Начальная школа
Основная школа
Старшая школа

27. Результаты международных сравнительных исследований
качества образования
Содержание и категория участников Результаты
PISA - международная программа по оценке учебных достижений
Математическая и естественнонаучная грамотность,
грамотность чтения; учащиеся основной школы
Лидеры - Китай, Корея, Сингапур,
Япония, Финляндия, Нидерланды.
Россия (37-40 место
в рейтинге).
TIMSS (Trends in Mathematics and Science Study)– международное мониторинговое исследование
качества математического и естественнонаучного образования
Качество математического и естественнонаучного образования;
учащиеся основной и старшей школы
Лидеры – Сингапур, Китай,
Тайвань, Корея, Япония.
Россия (5-10 место в рейтинге).
PIRLS – международный проект «Изучение качества чтения и понимания текста»
Оценивается способность выпускников начальной школы читать
и понимать различные тексты; учащиеся начальной школы
(4 класс)
Лидеры – Сингапур, Китай.
Россия: в 2001 г. - 16 место среди
35 стран, в 2006 г. – 1 место среди
40 стран, в 2011 г. – 2 место среди
45 стран.

28. Система объективной оценки
качества образования (международный опыт)
Ю. Корея
Национальный уровень:
Национальные экзамены – вступительные экзамены в вузы - College Scholastic Ability Test
(корейский – диктант; английский – устный экзамен, математика и естествознание, все учащиеся 12
класса)
Мониторинговые исследования качества образования: National Assessment of Students Achievement
(все учащиеся 6, 9 и 11 классов один раз в год. Оцениваются, корейский и английский языки,
математика, естественнонаучная грамотность, социальные науки)
 Система оценки профессиональных компетенций учителей: Teacher Appraisal for Performaсе,
Teacher Appraisal for Professional Development
Региональный уровень:
Subject Learning Diagnostic Test (проводится в начальной и средней школе, цель – сопровождение
процесса обучение, помощь в преодоление проблем в обучении)
Combined Achievement Test (подготовка к национальному экзамену в вузы)
Уровень образовательного учреждения:
Проводится учителями на основе национальных, региональных или школьных измерителей
с целью диагностики и отчетности

29. Система объективной оценки
качества образования (международный опыт)
Китай
Национальные экзамены – Gaokao, вступительные экзамены в вузы (все учащиеся, 3
обязательных экзамена: математика, китайский и английский;
1 по выбору (физика, химия, биология, история, география и политология).
Сингапур
Национальные экзамены: начальная школа – Primary School Leaving Examination (PSLE),
цель - определение дальнейшего места ученика в средней школе (математика, английский);
средняя школа - General Certificate of Education exam (2-х уровней), обязательные
предметы: английский язык, родной язык, математика, один естественный и один
гуманитарный предметы. Экзамен по окончании начальной школы (6-й класс) Экзамен
повышенного уровня на получение сертификата о среднем образовании (12-й класс).
Высокий уровень образования и результаты обучения в тех странах, где создана
система объективной оценки качества образования

30. Региональный опыт
(системы оценки качества образования)
Проектирование модели РСОКО
и ее реализация на практике
(Москва, Томская, Новосибирская,
Калининградская, Тамбовская области,
Алтайский, Хабаровский края, ЯНАО)
Разработка и проведение региональных
(Томская, Новосибирская области
Хабаровский, Красноярский края, ЯНАО,
Республика Татарстан)
Разработка программ повышения
квалификации управленческих и
педагогических кадров по «оценочной»
компетентности
(Томская область, Алтайский край, ЯНАО)
Интерпретация результатов и подготовка
целевых информационных продуктов по
ОКО (Новосибирская, Псковская области,
Красноярский, Алтайский, Хабаровский
края, Чувашская Республика, ЯНАО)
Разработка процедуры самообследования
(самооценки) школы (Алтайский,
Хабаровский края, ЯНАО)
Необходимо систематизировать,
мониторингов
субсидии регионам в рамках ФЦПРО на 2016-2020 гг.

31. Опыт контрольно-надзорной деятельности в России
•Разработка и внедрение адекватного методического инструментария для объективной оценки
качества образования (условий и результатов образовательной деятельности)
•Ориентация регионального законодательства на эффективное обеспечение правоотношений в
сфере образования, установленных федеральным законодательством
•Повышение степени открытости процедурных аспектов контрольно-надзорной деятельности и
форм отчетности (БД, реестры, доклады, акты, предписания, аналитические материалы…)
•Стимулирование развития информационных ресурсов региональных систем оценки качества
образования и адекватного использования этих ресурсов в практике управления образованием
•Профессиональное развитие управленческих кадров и представителей экспертного сообщества по
направлениям контрольно – надзорной деятельности
•Обеспечение стабильности финансового обеспечения КНД
РИСКИ: Гипертрофированное стремление обеспечить «независимость»
КНД через «автономные» структуры
Формальный подход к процедурам КНД

32. Планируемые направления стандартизации
оценочных процедур
Переход от методологии контроля качества к методологии
управления качеством образования на основе применения
корректных оценочных процедур
Установление конечного перечня оценочных процедур,
а также стандартов оценочных процедур, включающих
требования к интерпретации и оценке измерительных
материалов и результатов оценочных процедур
Установление стандартов архитектур систем сбора, хранения и
обработки данных о качестве системы общего образования,
а также интерпретации информации, получаемой для оценки качества
образования
Разработка алгоритмов использования результатов
оценочных процедур и типовых управленческих решений
Создание специализированных научных центров по развитию
качества образования

33. Механизмы использования результатов
оценочных процедур
Оценка влияния
учебной литературы на
качество преподавания
предметов
Организация
повышения
квалификации,
переподготовки
педагогов
Совершенствование
педагогического
образования
Разработка и
реализация программ по
развитию системы
образования
(предметов, учителей,
школ)
Оценка
образовательных
программ
Подготовка ежегодного
доклада Рособрнадзора по
системе качества
школьного образования
НЕВОЗМОЖНО(!) БЕЗ КОНТЕКСТНОЙ ИНФОРМАЦИИ ОБ УСЛОВИЯХ ОБУЧЕНИЯ

34. Лучшие проекты в сфере оценки качества
образования в Российской Федерации
С 1 сентября по 1 октября 2014 года поступило около 500 проектов!
Комиссией Рособрнадзора и Учительской газеты определено
10 победителей и 10 призеров конкурса
Проведение компетентностных олимпиад
(насколько образовательная программа
способствует формированию
соответствующих качеств у обучающихся)
Создание электронных площадок для
обсуждения критериев оценки качеств а
образования
Подходы к мониторингу успеваемости
учащихся
Совершенствование системы оценки
достижений учащихся
в разрезе предметов
Предложения по формированию
экспертного сообщества для оценки
качества образования
Инструменты совершенствования
внутришкольной системы оценки
качества образования

35. Нормативно-правовое обеспечение НИКО
Приказ Минобрнауки России от 27 октября
2014 года № 1378
«О проведении мониторинга качества
подготовки обучающихся»

36. ПЕРЕЧЕНЬ ПРОЕКТОВ, РЕАЛИЗУЕМЫХ
В РАМКАХ ПРОГРАММЫ НИКО В 2014-2015
ГГ.

37. ПЕРЕЧЕНЬ ПРОЕКТОВ, РЕАЛИЗУЕМЫХ
В РАМКАХ ПРОГРАММЫ НИКО В 2014-2015
ГГ.
График исследований качества образования

38. ОСОБЕННОСТИ РЕАЛИЗАЦИИ
НИКО
Проведение исследований не реже 2 раз
в год, каждое из которых представляет
собой отдельный проект в рамках общей
программы
Каждый проект НИКО реализуется на основе
единой организационно-технологической
схемы, могут применяться бланковые
технологии, технологии компьютерного
тестирования
Сайт edu-niko.ru, межрегиональные
конференции по оценке качества общего
образования
Присутствие организаторов и независимых
наблюдателей
В процедурах могут принимать участие
общественные наблюдатели ЕГЭ или ОГЭ
Проведение
исследований
Проведение
диагностических
работ по отдельным
учебным предметам
или группам учебных
предметов
Сбор контекстных
Выпуск итогового
доклада по
проекту
данных
Анкетирование
участников
исследования
Открытый банк
заданий для
использования в
оценочных
процедурах в системе
образования

39. ФОРМИРОВАНИЕ ВЫБОРКИ ОБРАЗОВАТЕЛЬНЫХ ОРГАНИЗАЦИЙ
ДЛЯ УЧАСТИЯ В ПРОЕКТАХ ПРОГРАММЫ НИКО

40. ПОДХОДЫ К ОТБОРУ СОДЕРЖАНИЯ ДЛЯ ПРОВЕДЕНИЯ
ДИАГНОСТИЧЕСКИХ РАБОТ В РАМКАХ ПРОЕКТОВ ПРОГРАММЫ
НИКО

41. ПОДХОДЫ К ОЦЕНИВАНИЮ ВЫПОЛНЕНИЯ ДИАГНОСТИЧЕСКИХ
РАБОТ УЧАСТНИКАМИ ИССЛЕДОВАНИЙ В РАМКАХ ПРОГРАММЫ
НИКО
Перевод в отметки – по желанию образовательной
организации или обучающегося.
Экспертная проверка развернутых ответов участников
проектов НИКО осуществляется на основе
стандартизированных критериев и только при условии
прохождения экспертами соответствующего
предварительного обучения и аттестации.
В процессе проверки работ осуществляется выборочный
контроль качества проверки.

42. НАПРАВЛЕНИЯ АНАЛИЗА РЕЗУЛЬТАТОВ ИССЛЕДОВАНИЙ
В РАМКАХ ПРОГРАММЫ НИКО

43. МОДЕЛИ ИСПОЛЬЗОВАНИЯ РЕЗУЛЬТАТОВ ПРОЕКТА
В РАМКАХ ПРОГРАММЫ НИКО
Не допускается использование результатов НИКО для оценки деятельности образовательных организаций,
учителей, муниципальных и региональных органов исполнительной власти, осуществляющих государственное
управление в сфере образования

44. СТАТИСТИКА УЧАСТНИКОВ ПРОВЕДЕННОГО АНАЛИЗА
РЕЗУЛЬТАТОВ ИССЛЕДОВАНИЙ В РАМКАХ ПРОГРАММЫ
НИКО

45. Задача оценки качества образования – стимулирование
развития образования, а не наказание за результат
Письмо Д.В. Ливанова об оценке качества образования
в части нецелесообразности использования результатов
ЕГЭ для оценки работы педагогов, директоров школ и
муниципалитетов (от 27 июня 2014 года №ДЛ-187/08)
Письмо С.С.Кравцова о проведении НИКО в части
нецелесообразности использования результатов НИКО
для оценки работы педагогов, директоров школ,
муниципалитетов и региональных органов управления
образования (от 24 октября 2014 года № 05-900)

46. МОДЕЛИ ИСПОЛЬЗОВАНИЯ РЕЗУЛЬТАТОВ ПРОЕКТА
В РАМКАХ ПРОГРАММЫ НИКО
В письме от 24 октября 2014 года № 05-900
Рособрнадзор обращает внимание на
нецелесообразность использования результатов
указанных исследований для оценки работы
педагогов, директоров школ, муниципалитетов и
региональных органов управления образования

47. http://www.eduniko.ru/

48. Первые результаты НИКО по математике
озвучены на Конференции
27-28 ноября 2014, МГУ, Ломоносовский
проспект, д.27, корп.1

49. Исследование качества математического образования
Соответствие действующему ФГОС
акценты на положения,
актуальные для новых ФГОС
Учет результатов
международных исследований
Универсальность
по отношении к учебникам
Анализ состояния математического
образования с учетом принятия
Концепции развития математического
образования в РФ, а также введения
двухуровневой модели ЕГЭ
70 субъектов Российской Федерации
415 школ, около 49 000 участников
5 класс – 17000, 6 класс – 16700,
7 класс - 15000
Более 4000 организаторов, экспертов,
технических специалистов
Проверка математических знаний,
умений, компетенций, важных для
успешной жизни в обществе
и продолжения образования
Диагностическая работа,
сбор контекстных данных
об образовательных организациях,
анкетирование школьников,
организаторов, учителей, экспертов

50. Организационно-технологическая схема
проведения НИКО
ТТиирраажжииррооввааннииее и и д дооссттааввккаа
ООББРРААББООТТККАА
ППррооввееддееннииее
Сканировани
е и загрузка
Сканировани
е и загрузка
ППооллууччееннииее р рееззууллььттааттоовв

51. Экспертная проверка развернутых ответов,
полученных при проведении НИКО
ООББРРААББООТТККАА
ППооддккллююччееннииее
ААттттеессттаацциияя
Обучение и
консультации
Обучение и
консультации
ППррооввееррккаа

52. Результаты. 5 класс
12% двоек

53. Результаты. 6 класс
17% двоек

54. Результаты. 7 класс
28% двоек

55. НИКО:
Школьные
отметки
(МА):
Сравнение результатов НИКО
со школьными отметками по математике

56. НИКО:
Школьные
отметки
(РУ):
Сравнение результатов НИКО
со школьными отметками по русскому языку

57. Результаты в зависимости от уровня подготовки
по русскому языку

58. Анкетирование учителей и обучающихся
ВОПРОС 6. «В каком классе, по Вашим наблюдениям, наиболее часто
проявляется интерес к математике у одаренных детей?»
ВОПРОС 7. В каком классе обучающиеся начинают связывать хорошее знание математики с
поступлением в ВУЗ или профессиональной успешностью?

59. Анкетирование учителей и обучающихся

60. Анкетирование учителей и обучающихся

61. Анкетирование учителей и обучающихся
ВОПРОС 4 «Какая часть ваших учеников проявляет устойчивый, явно
выраженный интерес к математике?»
Наиболее частые ответы учителей – от 30% до 60%

62. Анкетирование учителей и обучающихся

63. Использование результатов

64. Следующая ступень
в системе оценки качества образования

65. В рамках Поручений Президента РФ В.В. Путина о создании единого
учебника по истории в 2013 году был разработан Историко-
культурный стандарт и в начале 2014 года принята Концепция
нового УМК по Отечественной истории.

66. Портрет учителя истории

67. ССооддеерржжааннииее ииссссллееддоовваанниияя

68. ППееррввыыее ррееззууллььттааттыы

69. БЛАГОДАРИМ ЗА ВНИМАНИЕ!