Successfully reported this slideshow.
We use your LinkedIn profile and activity data to personalize ads and to show you more relevant ads. You can change your ad preferences anytime.
Аналіз	
  результатів	
  	
  
Єдиного	
  фахового	
  вступного	
  випробування	
  (ЄФВВ)	
  
і	
  поточного	
  стану	
  вс...
Увазі	
  робочої	
  групи	
  МОН	
  пропонується	
  короткий	
  огляд	
  
результатів	
  аналітичного	
  дослідження	
  ре...
Джерела	
  використаної	
  інформації	
  для	
  Звіту	
  
	
  
Всі	
  використані	
  в	
  якості	
  джерел	
  початкові	
 ...
Освітні	
  траекторії	
  
	
  	
  
Більшість	
  даних	
  з	
  трьох	
  несумісних	
  за	
  форматами	
  джерел	
  вдалось	...
Якість	
  об’єднаних	
  даних.	
  Похибка	
  генералізації.	
  
	
  	
  
При	
  об’єднанні	
  даних	
  інформація	
  по	
 ...
Висновок:	
  	
  
	
  	
  
вперше	
  наявне	
  єдине	
  для	
  всіх	
  зовнішнє	
  об’єктивне	
  мірило	
  
визначеного	
 ...
Характеристики	
  випускників	
  бакалаврату	
  Право,	
  що	
  отримали	
  дипломи	
  в	
  різних	
  ВНЗ	
  
	
  
В	
  до...
Середній	
  рейтинг	
  ЄФВВ	
  випускників	
  різних	
  груп	
  ВНЗ	
  
(надано	
  середні	
  бали	
  з	
  Права	
  і	
  с...
Детальніше	
  про	
  Відомчі	
  ВНЗ	
  (law	
  enforcement)	
  
(кількість	
  випускників	
  кожного	
  з	
  ВНЗ,	
  що	
 ...
Випускники	
  Національної	
  академії	
  внутрішніх	
  справ	
  
	
  	
  
Не	
  подолали	
  поріг	
  з	
  ТЗНПК	
  –	
  9...
Порівняння	
  предметних	
  успіхів	
  кількох	
  ВНЗ	
  	
  
(середній	
  відсоток	
  правильних	
  відповідей	
  з	
  пр...
Заочна	
  vs	
  Денна	
  форми	
  навчання	
  
	
  	
  
Результати	
  ЄФВВ	
  в	
  залежності	
  від	
  форми	
  попереднь...
Чи	
  все	
  так	
  однозначно	
  щодо	
  заочної	
  освіти?	
  
(чи	
  дійсно	
  випускники	
  заочники	
  завжди	
  наба...
Значення	
  диплому	
  з	
  відзнакою	
  
	
  	
  
Середня	
  оцінка	
  всіх	
  вступників	
  з	
  Права	
  =	
  135.4	
  ...
Який	
  параметр	
  краще,	
  ніж	
  диплом	
  з	
  відзнакою,	
  прогнозує	
  успішність	
  після	
  
закінчення	
  бакал...
Середньостатистична	
  модель	
  побудови	
  конкурсного	
  бала:	
  
	
  
конкурсний	
  бал	
  =	
  	
  
0.1	
  х	
  Атес...
Успіхи	
  в	
  ЄФВВ	
  12%	
  “найкраших	
  за	
  дипломом”	
  в	
  порівнянні	
  з	
  12%	
  “найкращих	
  за	
  
ЗНО”	
 ...
Перехресний	
  вступ.	
  Спеціальності	
  	
  
Більше	
  12%	
  вступників	
  до	
  магістратури	
  Право	
  мають	
  не	
...
Перехресний	
  вступ.	
  Групи	
  спеціальностей.	
  
	
  	
  
Усі	
  спеціальності	
  вступників	
  за	
  попереднім	
  
...
Перехресний	
  вступ.	
  Подолання	
  бар’єру	
  ЄФВВ	
  в	
  залежності	
  від	
  спеціальності.	
  
Перехресний	
  вступ.	
  Успішність	
  в	
  ЄФВВ	
  в	
  залежності	
  від	
  спеціальності.	
  
Висновок:	
  	
  випускни...
Перехресний	
  вступ.	
  Кого	
  зараховано	
  в	
  магістратуру?	
  
(в	
  таблиці	
  надано	
  відстотковий	
  склад	
  ...
Перехресний	
  вступ.	
  Успішність	
  зарахованих	
  до	
  магістратури	
  
(середній	
  рейтинг	
  зарахованих	
  до	
  ...
Зарахування	
  в	
  магістратуру	
  Право	
  /	
  ВНЗ	
  з	
  більше	
  150	
  зарахованих	
  
(рейтинг	
  за	
  кількістю...
Зарахування	
  в	
  магістратуру	
  Право	
  /	
  ВНЗ	
  незалежно	
  від	
  кількості	
  зарахованих	
  
	
   	
  (рейтин...
Зарахування	
  в	
  магістратуру	
  Право	
  /	
  форми	
  навчання	
  
54	
  %	
  продовжать	
  навчання	
  на	
  денній	...
 Освітня	
  міграція	
  
(Відсоток	
  власних	
  випускників	
  бакалаврату	
  серед	
  зарахуваних	
  в	
  магістратуру	
...
  	
   	
  Освітня	
  міграція	
  	
  
	
  
(порівняння	
  середніх	
  рейтингів	
  зарахованих	
  в	
  магістратуру	
  ви...
Дякую	
  за	
  увагу	
  !	
  
UEnet	
  facts	
  list	
  	
  
	
  
Міжнародна	
  громадська	
  організація	
  “Універсальна	
  екзаменаційна	
  мережа”:	...
В	
  Україні	
  відомі	
  наступні	
  проекти	
  	
  UEnet:	
  
	
  	
  
В	
  інтересах	
  Міністерства	
  освіти	
  і	
  ...
Upcoming SlideShare
Loading in …5
×

презентація с мудрук мон 2 жовтня 2017

1,793 views

Published on

Презентація для Робочої групи МОН з реформування юридичної освіти.
2 жовтня 2017 року

Published in: Education
  • Login to see the comments

  • Be the first to like this

презентація с мудрук мон 2 жовтня 2017

  1. 1. Аналіз  результатів     Єдиного  фахового  вступного  випробування  (ЄФВВ)   і  поточного  стану  вступної  кампанії  до  магістратури  081   Право  в  2017  році     Сергій  Мудрук   Президент  МГО  “Універсальна  екзаменаційна  мережа”   за  підтримки  Координатора  проектів  ОБСЄ  в  Україні   02  жовтня  2017  року,    нарада  Робочої  групи  МОН  з  реформування  правничої  освіти  
  2. 2. Увазі  робочої  групи  МОН  пропонується  короткий  огляд   результатів  аналітичного  дослідження  результатів  основної   сесії  ЄФВВ  та  кампанії  зарахування  вступників  до  магістратури   Право  станом  на  22  вересня  2017р.       Результати  дослідження  включено  до  Звіту,  що  наразі   знаходиться  на  стадії  укладання.       Звіт  готується  на  замовлення  Міністерства  освіти  і  науки   України  за  підтримки  Координатора  проектів  ОБСЄ  в  Україні  
  3. 3. Джерела  використаної  інформації  для  Звіту     Всі  використані  в  якості  джерел  початкові  дані  є  або  публічною   інформацією,  або  результатами  запитів  на  публічну  інформацію.       Зведена  база  даних  дослідження  є  результатом  об’єднання  інформації  з   трьох  основних  джерел:   1)  знеособлені  дані  УЦОЯО  щодо  ЗНО  2013  і  попередніх  років,  освітньої   передісторії  вступників  (де  і  які  навчальні  закінчили  в  2013  чи  попередні   роки),  та  щодо  ЄФВВ.   2)  знеособлені  дані  з  ЄДЕБО  щодо  зарахування  в  бакалаврати  в   попередні  роки  (включно  з  поданими  при  вступі  оцінками  ЗНО),  в   магістратуру  Право  2017  року,  форми  навчання,  а  також  дані  про  видані   дипломи.   3)  психометричні  дані  UEnet,  розраховані  в  рамках  Cучасної  теорії  тестів     (IRT)  щодо  продемонстрованих  рівнів  компетенцій  осіб  в  розрізі  не  лише   предметів  тестувань,  але  й  тем,  і  пунктів  програм  тестувань.    
  4. 4. Освітні  траекторії       Більшість  даних  з  трьох  несумісних  за  форматами  джерел  вдалось  об’єднати   в  деперсоніфіковані  “освітні  досьє”  осіб  отримавши  такі  освітні  траєторії   майже  16  тисяч  осіб  (15688)  :     Навчання  в  школі  (середній  бал  атестата,  місце  і  тип  навчального  закладу)        ê ЗНО  (всі  оцінки)       ê   вступ  в  бакалаврат  (ВНЗ,  обрані  оцінки  ЗНО,  конкурсний  бал)       ê   навчання  в  бакалавраті  (форма  навчання,  фінансування,  зміни  місця   навчання)     ê   випуск  (отримання  диплома  чи  диплома  з  відзнакою)     ê   участь  в  конкурсі  до  магістратури  (детальна  інформація  про  успіхи  вступника   по  всіх  розділах  всіх  предметів  ЄФВВ)     ê   зарахування  чи  незарахування  до  магістратури  (ВНЗ,  форма  навчання)  
  5. 5. Якість  об’єднаних  даних.  Похибка  генералізації.       При  об’єднанні  даних  інформація  по  окремих  вступниках  з  трьох  джерел   не  була  цілком  повною.  Дані  об’єднувались  через  ланцюг  перетворень  з   використанням  різних  знеособлених  ключів.  Виявлено  низку  дрібних   невідповідностей.  Тому  інформація  в  об’єднаній  базі  не  є  повною  по   невеликому  відсотку  осіб.     У  зв’язку  з  неповнотою  даних,  можна  казати,  що  прослідковується   освітня  траєкторія  лише  близько  3/4  бакалаврів  правознавців   випускників  2017  року.     Це  дозволяє  з  певною  розумною  похибкою  узагальнювати   спостереження  не  лише  на  вступників  до  магістратури,  але  й  на  всіх   випущених  в  2017  році  бакалаврів  права.  Наявність  даних  з  ЄДЕБО  про   кількість  виданих  кожним  з  ВНЗ  дипломів  дозволяє  прямо  розрахувати   таку  похибку  для  кожного  ВНЗ  (похибка  відсутня  по  багатьох  ВНЗ).   Дані  по  зарахованих  до  магістратури  осіб  є  практично  повними  і  цілком   точними.  
  6. 6. Висновок:         вперше  наявне  єдине  для  всіх  зовнішнє  об’єктивне  мірило   визначеного  переліку  компетентностей  випускників   бакалаврату  за  спеціальністю  «Право»:     Рівень  знань  з  Права  в  розрізі  таких  галузей  права:    Конституційне  право    Адміністративне  право    Цивільне  право    Цивільне  процесуальне  право    Кримінальне  право    Кримінальне  процесуальне  право   Загальні  когнітивні  здібності  (критичне,  аналітичне  і  логічне   мислення)   Здатність  до  читання  іноземною  мовою   Здатність  застосування  іноземної  мови      
  7. 7. Характеристики  випускників  бакалаврату  Право,  що  отримали  дипломи  в  різних  ВНЗ     В  дослідженні  використано  умовний  розподіл  ВНЗ  на  наступні  групи:     1.  Спеціалізовані  правничі  ВНЗ  (Одеська  юридична  академія”,  НЮУ  ім.Я.Мудрого   (включно  з  Інститутами),  Київський  університет  права  НАНУ  (включно  з    Рівненським  інститутом),   Академія  адвокатури  України.       2.  Відомчі  ВНЗ  (law  enforcement)  (Міністерства  оборони  України,  Міністерства  внутрішніх  справ   України,  Державної  служби  України  з  надзвичайних  ситуацій,  Державної  пенітенціарної  служби,   Служби  безпеки  України,  Державної    прикордонної  служби,  Державної  фіскальної  служби).   Усього  33  ВНЗ,  з  них  10  ВНЗ  мають  правничу  магістратуру.       3.  Класичні  неспеціалізовані  університети,  що  мають  юридичні  факультети  з   магістратурою.  -­‐  20  університетів.       4.  Спеціалізовані  неюридичні    ВНЗ,  включно  з  галузевими  університетами  підпорядкування   МОН.  -­‐    289  ВНЗ,  з  них  лише  33  мають  правничу  магістратуру.       5.  Інші  відомчі  ВНЗ  (Міністерства  охорони  здоров’я,  Міністерства  культури  України,  богословські).   -­‐    23  ВНЗ,  з  них  3  мають  правничу  магістратуру.       6.  Іноземні  навчальні  заклади.  -­‐14  ВНЗ    
  8. 8. Середній  рейтинг  ЄФВВ  випускників  різних  груп  ВНЗ   (надано  середні  бали  з  Права  і  середня  сумарна  рейтингова  оцінка  по   кожній  з  категорій)  
  9. 9. Детальніше  про  Відомчі  ВНЗ  (law  enforcement)   (кількість  випускників  кожного  з  ВНЗ,  що  складали  ЄФВВ  та  їх  середня  рейтингова  оцінка)  
  10. 10. Випускники  Національної  академії  внутрішніх  справ       Не  подолали  поріг  з  ТЗНПК  –  9.8%     Не  подолали  поріг  з  Права  –  25.4%     Не  подолали  поріг  з  Іноземної  мови  –  6.3%  
  11. 11. Порівняння  предметних  успіхів  кількох  ВНЗ     (середній  відсоток  правильних  відповідей  з  предмета  у  ЄФВВ)       НАВС   ЧНУ   КНЕУ   КПІ   НЮУ   Адміністративне  право   48%   57%   52%   48%   61%   Цивільне  право   43%   51%   47%   50%   54%   Цивільне  процесуальне  право   33%   39%   39%   39%   45%   Конституційне  право   38%   45%   47%   43%   54%   Кримінальне  процесуальне  право   24%   25%   28%   26%   33%   Кримінальне  право   40%   43%   45%   42%   58%   Критичне  мислення   37%   41%   45%   48%   47%   Аналітичне  мислення   38%   41%   44%   46%   46%   Логічне  мислення   26%   28%   31%   32%   33%                           Читання  (іноземна  мова)   20%   24%   29%   34%   29%   Використання  іноземної  мови   25%   27%   30%   32%   30%                           Середній  рейтинг   382   408   417   422   436   НАВС  –  Національна  академія  внутрішніх  справ   ЧНУ  –  Чернівецький  національний  університет  ім.Ю.Федьковича   КНЕУ  –  Київський  національний  економічний  університет  ім.В.Гетьмана   КПІ  –  Національний  технічний  університет  України  “Киівський  політехнічний  інтитут  ім.І.Сікорського”   НЮУ  –  Національний  юридичний  університет  ім.Я.Мудрого  
  12. 12. Заочна  vs  Денна  форми  навчання       Результати  ЄФВВ  в  залежності  від  форми  попереднього  навчання    
  13. 13. Чи  все  так  однозначно  щодо  заочної  освіти?   (чи  дійсно  випускники  заочники  завжди  набагато  гірші?)       Приклад  ЧНУ  ім.Ю.Федьковича       Середній  бал  «Право»:   стаціонар    -­‐  138.5,        заочники  –  135.1       Не  подолали  пороговий  бал:   Право:  стаціонар  –  7.7%,    заочники  –  4.3%   ТЗНПК:  стаціонар  –  10.3%,    заочники  –  10.9%   Іноземна  мова:  стаціонар  –  6.8%,    заочники  –  2.2%           Середній  сумарний  конкурсний  бал  випускників:   бюджетники  –  440.9  ,    контрактники  –  402.9   стаціонар    -­‐-­‐  408.8,        заочники  –  410.2  (!)  
  14. 14. Значення  диплому  з  відзнакою       Середня  оцінка  всіх  вступників  з  Права  =  135.4   а  у  володарів  дипломів  з  відзнакою  =  152.6    (без  відзнаки  =  132.7)     Середній  сумарний  конкурсний  бал  ВСІХ  вступників  =  408.1   а  у  володарів  диплома  з  відзнакою  =  446.5      (без  відзнаки  =  401.8)       Чи  є  диплом  з  відзнакою  свідченням  того,  що  його  власник   належить  до  групи  найкращих  ?   Чи  гарантує  диплом  з  відзнакою  успіх  при  вступі  в  магістратуру?     За  даними  з  ЄДЕБО  трохи  більше  12%  вступників  до  магістратури   мають  диплом  з  відзнакою.     Назвемо  їх  “12%  найкращих  за  дипломом”     15.7%  з  цих  “найкращих  за  дипломом”  не  подолали  пороговий  бал!  
  15. 15. Який  параметр  краще,  ніж  диплом  з  відзнакою,  прогнозує  успішність  після   закінчення  бакалаврату?   Ми  дослідили  схеми  формування  конкурсного  бала  близько  100  ВНЗ,  що   випускають  бакалаврів  права.  Найтиповіші    з  них:  
  16. 16. Середньостатистична  модель  побудови  конкурсного  бала:     конкурсний  бал  =     0.1  х  Атестат  +  0.3  х  Укр.мова  +  0.35  х  Історія  +  0.25  х  Математика       По  аналогії  з  володарями  дипломів  з  відзнакою,  серед   вступників  2017р  було  формовано  групу  12%  “найкращих  за   успіхами  в  школі  і  ЗНО”  (тобто,  станом  на  2013  р.  і  попередні   роки).     38.2%  цієї  групи  4  чи  більше  років  по  закінченню  школи   виявились  володарями  дипломів  з  відзнакою  в  2017  році.    
  17. 17. Успіхи  в  ЄФВВ  12%  “найкраших  за  дипломом”  в  порівнянні  з  12%  “найкращих  за   ЗНО”  і  з  усіма  вступниками.     (в  таблиці  надано  середні  бали  тестів  ЄФВВ  по  кожній  з  категорій)  
  18. 18. Перехресний  вступ.  Спеціальності     Більше  12%  вступників  до  магістратури  Право  мають  не  правничу   спеціальність.  
  19. 19. Перехресний  вступ.  Групи  спеціальностей.       Усі  спеціальності  вступників  за  попереднім   дипломом  було  розбито  на  наступні  5  категорій:      Право    Правоохоронна  діяльність    Економічні  і  управлінські  спеціальності    Гуманітарні  спеціальності    Природничі  і  інженерні  спеціальності  
  20. 20. Перехресний  вступ.  Подолання  бар’єру  ЄФВВ  в  залежності  від  спеціальності.  
  21. 21. Перехресний  вступ.  Успішність  в  ЄФВВ  в  залежності  від  спеціальності.   Висновок:    випускники  бакалаврату  за  спеціальністю  “Правоохоронна  діяльність”   найменше  відповідатють  вимогам  вступу  до  магістратури  Право  серед  всіх  інших   спеціальностей  при  перехресному  вступі.  
  22. 22. Перехресний  вступ.  Кого  зараховано  в  магістратуру?   (в  таблиці  надано  відстотковий  склад  зарахованих  до  магістратури  Право  по  кожній   групі  передніх  спеіцальностей  вступників)   Висновок  1:  відсів  за  результатами  ЄФВВ  суттєво  скоротив  відсоток   “перехресників”  (осіб  з  неправничою  попередньою  освітою)  серед  зарахованих  до   магістратури  Право.   Висновок  2:  відсів  за  результатами    
  23. 23. Перехресний  вступ.  Успішність  зарахованих  до  магістратури   (середній  рейтинг  зарахованих  до  магістратури  Право  в  залежності  від   попередньої  спеціальності)  
  24. 24. Зарахування  в  магістратуру  Право  /  ВНЗ  з  більше  150  зарахованих   (рейтинг  за  кількістю  зарахованих  до  магістратури  Право)  
  25. 25. Зарахування  в  магістратуру  Право  /  ВНЗ  незалежно  від  кількості  зарахованих      (рейтинг  за  середньою  конкурсною  оцінкою  зарахованих)  
  26. 26. Зарахування  в  магістратуру  Право  /  форми  навчання   54  %  продовжать  навчання  на  денній  формі  навчання     46  %  -­‐  на  заочній  формі     0,22%  -­‐  на  вечірній  формі    
  27. 27.  Освітня  міграція   (Відсоток  власних  випускників  бакалаврату  серед  зарахуваних  в  магістратуру  Право)  
  28. 28.      Освітня  міграція       (порівняння  середніх  рейтингів  зарахованих  в  магістратуру  випускників  власного   бакалаврату  з  рейтингами  зарахованих  до  того  ж  ВНЗ  випускників  чужих   бакалавратів)  
  29. 29. Дякую  за  увагу  !  
  30. 30. UEnet  facts  list       Міжнародна  громадська  організація  “Універсальна  екзаменаційна  мережа”:     професійне  об’єднання  тестологів,  фахівців  у  галузі  оцінювання  професійних   компетенцій     існує  16  років,  впродовж  яких  накопичений  чималий  досвід  кваліфікаційних  і   освітніх  вимірювань,  визначення  кваліфікаційних  стандартів     з  2006  року  зареєстроване  як  неприбуткова  міжнародна  громадська  організація  в   Україні     тестування  проводяться  п’ятьма  мовами  (українською,  румунською,  російською,   узбецькою  та  англійською)     географія  кваліфікаційних  екзаменувань  включає  11  країн  пострадянського   простору     здійснено  проекти  побудови  систем  оцінювання  проф.компетенцій  в  інтересах   саморегулівних  професійних  спільнот  (з  11  країн)  а  також  державних  органів  і   регуляторів  (з  трьох  країн).  
  31. 31. В  Україні  відомі  наступні  проекти    UEnet:       В  інтересах  Міністерства  освіти  і  науки:   ЄФВВ  -­‐  координація  розробки  єдиного  фахового  магістерського  вступного  випробування  з  Права,   аналітична  та  методологічна  підтримка  роботи  фахових  комісій  у  2016  і  2017  роках.       В  інтересах  Міністерства  юстиції:   Методологічна  підтримка  створення  системи  ліцензування  приватних  виконавців,  координація  розробки   рецензування  і  апробації  тестової  бази.       В  інтересах  ВККСУ:   Організація  розробки  тестів  для  конкурсу  до  Верховного  Суду,      професійний  моніторинг  екзаменувань,     розроблена  Методологія  регулярного  оцінювання  суддів  громадськими  об’єднаннями,    укладення   кваліфікаційних  вимог  до  судді  (проведено  аналіз  практики  судді),             дослідження  особистих  і  морально-­‐психологічних  якостей  судді  (базі  цих  досліджень  формулюють   професіограму  судді).         В  інтересах  МВС  України:   Участь  у  реформуванні  Національної  поліції  –  спільно  з  ICTAP  (МінЮст  США)  та  Patrol  Police  Reform  Project   (Канада),  контрактна  робота  з  більш  ніж  800  тренерами,  що  здійснювали  підготовку  патрульних   поліцейських.       В  інтересах  Держфінпослуг  України:   Ліцензійні  іспити  Держфінпослуг  -­‐  система  тестування  створювалась  спільно  з  Канадським  кооперативним   проектом  (CIDA)  в  2007-­‐2008  роках.       Кваліфікаційні  іспити  Міжнародних  сертифікацій  CAP/CIPA    та  ПССЛБ    для  фахівців  економічної  сфери.    

×