Система моніторингу якості вступу до ВНЗ на основі ЗНО

1. Система моніторингу якості вступу до ВНЗна основі ЗНО Болюбаш Я.Я. Ковтунець В.В.Раков С.А.Гудзинський В.Є.Кизилов О.І.

2. Розробка та запровадження системи ЗНО для конкурсного відбору студентів до ВНЗ • 2001–2006 рр. – розробка національної системи ЗНО • 2007 р. – випробувальний запуск ЗНО в частині регіонів з прийомом за його результатами в частині університетів • 2008 р. – проведення прийому за результатами ЗНО в загальнодержавному масштабі • до трьох предметів • без іноземних мов • квота ВНЗ на прийом випускників підготовчих відділень та асоційованих ЗНО (п. 15 Умов прийому) • ІС Конкурс – лише статистичні дані • 2009 р. – проведення прийому за результатами ЗНО в загальнодержавному масштабі без винятків • до п’яти предметів ІС Конкурс – рейтингові списки

3. Показники якості системи вступу до ВНЗ на основі ЗНО Система вступу до ВНЗ є інструментом управління найголовнішим ресурсом країни – інтелектуальним ресурсом у процесі переходу суспільства до суспільства сталого розвитку. Якщо країна не контролює показники якості системи вступу до ВНЗ, то така система розвивається спонтанно і ситуаційно.

4. Критерії якості системи вступу Дотримання Конституції України – забезпечення СПРАВЕДЛИВОГО доступу до якісної вищої освіти на конкурсних засадах ЕФЕКТИВНІСТЬ – забезпечення відбору до ВНЗ осіб, здатних успішно навчатися за певним напрямом Громадське сприйняття – наскільки запроваджена система вступу до ВНЗ на основі ЗНО задовольняє попит суспільства до системи вступу до ВНЗ

5. Справедливість • Частка тих, хто зміг реалізувати наміри щодо вступу до ВНЗ: • по державі в цілому • за соціальними групами • по регіонах • за навчальними закладами • за гендерною ознакою • інші • Міра відхилення: • по державі в цілому – окремі соціальні групи

6. Успішність вступу до ВНЗ на основі ЗНО –успішність вступу для соціальної групи (частка зарахованих до ВНЗ у певній соціальній групі від загальної кількості бажаючих вступити до ВНЗ у цій соціальній групі) Чим менше відхилення успішності вступу до ВНЗ для різних соціально значимих груп від загальнодержавного рівня успішності вступу, тим система вступу до ВНЗ є більш справедливоюу забезпеченні рівного доступу до вищої освіти. –загальнодержавна успішність вступу(частка зарахованих до ВНЗ від загальної кількості бажаючих вступити до ВНЗ)

7. Успішність вступу до ВНЗ на основі ЗНО (приклади) Гендерна успішність вступу до ВНЗ у 2009 році складає: • для жінок 60,458% • для чоловіків 53,519%(частка зарахованих до ВНЗ у певній соціальній групі від загальної кількості бажаючих вступити до ВНЗ у цій соціальній групі) • Загальнодержавна успішність вступу до ВНЗ у 2009 році дорівнює57,304%(частка зарахованих до ВНЗ від загальної кількості бажаючих вступити до ВНЗ (що проходили ЗНО))

8. Справедливість системи вступу до ВНЗ на основі ЗНО Справедливість системи вступу до ВНЗ для певної соціальної групи – відхилення успішності вступу до ВНЗ для цієї соціальної групи від загальнодержавного рівня успішності Гендерна справедливість вступу до ВНЗ у 2009 році складає: • для жінок +5,505% • для чоловіків -6,605%(відхилення успішності жінок та чоловіків при вступу до ВНЗ у 2009 році від загальнодержавного рівня успішності цій соціальній групі)

9. ЕФЕКТИВНІСТЬ Зв'язок між результатами навчання та результатами ЗНО БАЖАНО: КРАЩЕ НАВЧАЄТЬСЯ ТОЙ, ХТО МАЄ ВИЩІ РЕЗУЛЬТАТИ ЗНО. Ступінь зв’язку вимірюється коефіцієнтом кореляції між двома величинами.

10. Приклад. Кореляція позитивна – зв’язок позитивний (0<k<1). Середній бал іспитів у ВНЗ 5 Середній бал ЗНО для вступу до ВНЗ 200

11. Приклад. Кореляція негативна – зв’язок негативний(0>k>-1). Середній бал іспитів у ВНЗ 5 Середній бал ЗНО для вступу до ВНЗ 200

12. Приклад. Кореляція нульова – зв’язок відсутній (k=0). Середній бал іспитів у ВНЗ 5 Середній бал ЗНО для вступу до ВНЗ 200

13. Ефективність Кореляція між ЗНО та результатами навчання Кореляція між ЗНО+середній бал атестата та результатами навчання Кореляційні зв’язки між предметами та групами предметів

14. Ефективністьдиференційна ДЛЯ СПОРІДНЕНИХ НАПРЯМКІВ, ДЛЯ РЕГІОНІВ, ДЛЯ ПЕВНИХ КАТЕГОРІЙ СТУДЕНТІВ: Кореляція між ЗНО та результатами навчання Кореляція між ЗНО + середній бал атестата та результатами навчання Кореляційні зв’язки між предметами та групами предметів

15. Результати дослідження ефективності Виявлення недоліків оцінювання: ЗНО у школі у ВНЗ Пошук для ВНЗ оптимальних моделей конкурсного відбору студентів за результатами ЗНО

16. Результати дослідження ефективності Виявлення недоліків оцінювання: ЗНО у школі у ВНЗ

17. Результати дослідження ефективності Пошук для ВНЗ оптимальних моделей конкурсного відбору студентів за результатами ЗНО ПРИКЛАД Кореляція ЗНО-2008 та результатів навчання для технічних напрямів дорівнює 0,37. Якщо конкурсний бал рахувати за зваженою формулою Бал = 0,25 Укр. Мова +0,25 Матем. + 0,5 Фізика,то кореляція складатиме 0,46.

18. Експертна та громадська думка ФОКУСНІ ГРУПИ СОЦІОЛОГІЧНОГО ДОСЛІДЖЕННЯ: Вчителі Викладачі ВНЗ Студенти Випускники ЗНЗ ОЦІНКА СТАВЛЕННЯ ДО СИСТЕМИ В ЦІЛОМУ ПО ДЕРЖАВІ

19. Експертна та громадська думка НАПРЯМИ СОЦІОЛОГІЧНОГО ДОСЛІДЖЕННЯ: Рівень інформованості про ЗНО Оцінка тестових завдань ЗНО Оцінка української моделі ЗНО Довіра до ЗНО та його результатів

20. ТЕХНОЛОГІЯ База даних УЦОЯО База даних ІС Конкурс Відомості з ВНЗ Про результати навчання Відомості з ВНЗ Про результати навчання Відомості із ВНЗ про результати навчання БАЗА ДАНИХ ДОСЛІДЖЕННЯ

21. ТЕХНОЛОГІЯ Збір даних від ВНЗ про результати навчання студентів через Інтернет-систему, аналогічну системі “Конкурс” Інтернет ІС ВНЗ Підсистема ІС конкурс ІС ВНЗ ІС ВНЗ ІС ВНЗ

22. Звіт за проектом“Якість системи вступу до ВНЗна основі ЗНО”

23. Ефективність системи вступу до ВНЗ на основі ЗНО База даних дослідження ефективності отримана в результаті інтеграції даних БД “Результати навчання на 1-му курсі навчання у ВНЗ у 2008–2009 навчальному році”, наданих ВНЗ (25 ВНЗ із 70, яким було запропоновано участь у дослідженні), та БД УЦОЯО “ЗНО-2008”. Для збору даних ВНЗ було використано систему збору даних, відпрацьовану в системі “Вступ”. Загальна кількість записів БД – 22 500.

24. Ефективність системи вступу до ВНЗ на основі ЗНО

25. Ефективність системи вступу до ВНЗ на основі ЗНО і вплив середнього бала атестата (2008 рік)

26. Ефективність системи вступу до ВНЗ на основі ЗНО

27. Ефективність системи вступу до ВНЗ на основі ЗНО (висновки) Система вступу до ВНЗ на основі ЗНО є ефективною — коефіцієнти кореляції балів ЗНО високо прогнозують успішність навчання студентів на першому курсі ВНЗ (r = = 0,52). Запропонований моніторинг ефективності системи вступу дозволяє: Аналізувати стан системи вступу і відпрацьовувати напрями її вдосконалення (для інституцій управління освітою (МОНУ, НАПНУ, регіональним управлінням освіти) Знаходити «формулу» ефективного відбору за напрямками підготовки у ВНЗ.

28. Справедливість системи вступу до ВНЗ на основі ЗНО База даних дослідження справедливості отримана в результаті доповнення даних БД УЦОЯО “ЗНО-2009” даними про зарахування до ВНЗ (за протоколами ВНЗ). Загальна кількість записів БД – 460 000. БД містить неперсоніфіковану інформацію про учасників ЗНО (є анонімною)

29. Справедливість системи вступу до ВНЗ на основі ЗНО-2009

30. Справедливість системи вступу до ВНЗ на основі ЗНО-2009

31. Справедливість системи вступу до ВНЗ на основі ЗНО-2009

32. Справедливість системи вступу до ВНЗ на основі ЗНО-2009

33. Справедливість системи вступу до ВНЗ на основі ЗНО-2009

34. Справедливість системи вступу до ВНЗ на основі ЗНО-2009

35. Справедливість системи вступу до ВНЗ на основі ЗНО-2009

36. Запропоновано об'єктивний кількісний показник справедливості системи вступу до ВНЗ (рівного доступу до якісної освіти). • Запропоновані значущі категорії вступників, для яких доцільно здійснювати моніторинг. • Отримані кількісні показники справедливості системи вступу до ВНЗ на основі повної БД вступників ВНЗ 2009 року (для більшості значущих категорій цей показник знаходиться на рівні 20% або менше). • На особливу увагу заслуговують випускники ЗНЗ минулих років – для них цей показник складає – 34%. • Доцільно провести обговорення і визначити рівні допустимості відхилення показника справедливості від загальноукраїнського значення. • Запропонований моніторинг ефективності системи вступу дозволяє аналізувати стан справедливості системи вступу та проводити її модернізацію. Справедливість системи вступу до ВНЗ на основі ЗНО-2009 (висновки)

37. Об’єктом дослідження виступали 4 цільові групи: • Керівники та викладачі загальноосвітніх навчальних закладів (далі за текстом — працівники ЗНЗ). • Керівники та викладачі вищих навчальних закладів (далі за текстом — працівники ВНЗ). • Випускники 2010 року загальноосвітніх навчальних закладів (далі за текстом — учні ЗНЗ). • Студенти 2-го курсу вищих навчальних закладів (далі за текстом — студенти ВНЗ). • Опитування проводилося за сприяння громадської організації «Опора». ВІДПОВІДНІСТЬ СИСТЕМИ ВСТУПУ ДО ВНЗ НА ОСНОВІ ЗНОСОЦІАЛЬНОМУ ПОПИТУ ГРОМАДЯН

38. ВІДПОВІДНІСТЬ СИСТЕМИ ВСТУПУ ДО ВНЗ НА ОСНОВІ ЗНОСОЦІАЛЬНОМУ ПОПИТУ ГРОМАДЯН

39. ВІДПОВІДНІСТЬ СИСТЕМИ ВСТУПУ ДО ВНЗ НА ОСНОВІ ЗНОСОЦІАЛЬНОМУ ПОПИТУ ГРОМАДЯН

40. ВІДПОВІДНІСТЬ СИСТЕМИ ВСТУПУ ДО ВНЗ НА ОСНОВІ ЗНОСОЦІАЛЬНОМУ ПОПИТУ ГРОМАДЯН

41. ВІДПОВІДНІСТЬ СИСТЕМИ ВСТУПУ ДО ВНЗ НА ОСНОВІ ЗНОСОЦІАЛЬНОМУ ПОПИТУ ГРОМАДЯН

42. ВІДПОВІДНІСТЬ СИСТЕМИ ВСТУПУ ДО ВНЗ НА ОСНОВІ ЗНОСОЦІАЛЬНОМУ ПОПИТУ ГРОМАДЯН

43. ВІДПОВІДНІСТЬ СИСТЕМИ ВСТУПУ ДО ВНЗ НА ОСНОВІ ЗНОСОЦІАЛЬНОМУ ПОПИТУ ГРОМАДЯН

44. ВІДПОВІДНІСТЬ СИСТЕМИ ВСТУПУ ДО ВНЗ НА ОСНОВІ ЗНОСОЦІАЛЬНОМУ ПОПИТУ ГРОМАДЯН

45. ВІДПОВІДНІСТЬ СИСТЕМИ ВСТУПУ ДО ВНЗ НА ОСНОВІ ЗНОСОЦІАЛЬНОМУ ПОПИТУ ГРОМАДЯН У суспільстві утверджується позитивне ставлення до ЗНО, довіра до його результатів і переконання, що відбір студентів на цих засадах став прозорішим й об’єктивнішим.

46. Загальні висновки • Проведене дослідження якості системи вступу до ВНЗ на основі ЗНО засвідчило достатньо високий рівень її ефективності, справедливості та сприйняття суспільством. • Із метою оцінювання поточного стану системи вступу до ВНЗ на основі ЗНО та відпрацювання ефективних напрямів її вдосконалення необхідно створити національну систему моніторингу якості вступу до ВНЗ на основі ЗНО, для чого доцільно: Якість системи вступу до ВНЗ на основі ЗНО • Провести фахове обговорення та затвердити показники якості системи вступу до ВНЗ на основі ЗНО для забезпечення зворотного зв'язку, безперервного контролю цих показників при прийнятті управлінських рішень в галузі освіти. • Провести фахове обговорення моделі системи моніторингу якості вступу до ВНЗ на основі ЗНО. • Створити систему збору, інтегрування, зберігання та обробки інформації, яка стосується навчальних досягнень учнів у ЗНЗ, результатів ЗНО, успішності навчання у ВНЗ. • Забезпечити відповідний науковий рівень розвитку тестових технологій для подальшого вдосконалення системи вступу до ВНЗ на основі ЗНО.

47. Інформування суспільства та інформаційні ресурси • Кожен рік за результатами ЗНО Український центр оцінювання якості освіти готує і публікує аналітичний звіт, який розсилається в усі структури державної влади. • Оперативна інформація з питань ЗНО розміщується у вільному доступі в Інтернеті www.testportal.gov.ua. • Аналітичні матеріали, світовий досвід, питання розвитку тестових технологій, офіційні матеріали, які стосуються ЗНО, публікуються в журналі “Вісник ТІМО”. • Перебіг вступної кампанії та інша корисна інформація на сайті www.vstup.info. Якість системи вступу до ВНЗ на основі ЗНО

48. Дякуємо за увагу! Запрошуємо до фахового обговорення проблеми запровадження національного моніторингу якості системи вступу до ВНЗ на основі ЗНО

49. Довідкові слайди

50. Якість системи вступу до ВНЗ на основі ЗНО Офіційний звіт УЦОЯО “ЗНО-2009” Український центр оцінювання якості освіти (УЦОЯО) щорічно готує і публікує офіційний звіт за результатами ЗНО, який надсилається до всіх структур державної влади, а також розміщується у вільному доступі в мережі Інтернет. Це ті дані, які можна отримати на основі статистичних даних, накопичених УЦОЯО при реєстрації на ЗНО, під час його проведення, перевірки робіт, їх оцінювання і оприлюднення результатів.