Про результати попереднього аналізу проведення зовнішнього незалежного оцінювання з англійської мови (основна сесія, 2018 р.) Фахівцями Українського та регіональних центрів оцінювання якості освіти було проведено аналіз попередніх результатів основної сесії зовнішнього незалежного оцінювання з англійської мови, зокрема характеристик як окремих частин сертифікаційної роботи, так і сукупності завдань №1 - 58 тесту. Усі розрахунки були здійснені за результатами обробки більш ніж 95% бланків відповідей типу А (усі завдання тесту крім завдання №59, частина «Письмо») учасників тестування. Крім того, було проаналізовано відповідність характеристик техніки, яку було використано в пунктах проведення ЗНО, встановленим вимогам. Дослідження показало, що успішність учасника тестування на завданнях з аудіювання прямо пов’язана з його/її успішністю із виконання інших завдань тесту (коефіцієнт кореляції між результатами розділу аудіювання й загальною кількістю балів за виконання бланку А становить 0,81). Аналіз попередніх результатів тестування вказує на те, що частина «Розуміння мови на слух» (аудіювання) тесту з англійської мови має високі психометричні характеристики. Розподіл результатів учасників тестування наближається до нормального, що свідчи принаймні один учасник набрав від 13 до 16 балів (із 16 можливих) за аудіювання. Вибірковий аналіз решти аудиторій засвідчує, що рівень виконання частини аудіювання тесту відповідає потенційним можливостям учасників, які знаходилися в аудиторії (показник кореляції між аудіювання й іншою частиною результатів за виконання бланка А є високою). Зауваження про різні умови тестування від осіб, які працювали біля потенційних джерел шуму (вікон), на віддалених від аудіопристрію місцях тощо також не підтвердилися – розподіл результатів учасників тестування красномовно свідчить про відсутність будь-яких суттєвих відмінностей у результатах здобутих учасниками на різних місцях в аудиторії (див. графік нижче). Учасники, які в закладах освіти вивчали англійську мову на рівні стандарту, а не на профільному рівні, указували на високу складність для них частини «Розуміння мови на слух». Дані аналізу підтверджують, що учасники тестування, які вивчали англійську на профільному рівні, мають вищі результати з аудіювання ніж ті, які вивчали цей предмет на рівні стандарту. Однак різниця в результатах, на думку фахівців, є природньою і зумовлена різним рівнем підготовки цих категорій учасників. 0 100 200 300 400 500 600 700 800 900 0 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 Кількість учасників Розподіл учасників за кількістю отриманих балів за частину аудіювання відповідно до робочого місця в аудиторії №1 №2 №3 №4 №5 №6 №7 №8 №9 №10 №11 №12 №13 №14 №15 Окрім звернень щодо високої складності завдань на аудіювання, до Українського центру також надходили скарги про невідповідність окремих завдань частини тесту «Використання мови» вимогам навчальним програмам. Фахівці центру проаналізували психометричні характеристики всіх завдань цього розділу й підтвердили необхідність ретельного змістовного аналізу завдань № 51, № 55 та № 58 під час формування шкали переведення тестових балів учасників тестування, які навчалися на рівні стандарту, у шкалу 1–12 балів результатів державної підсумкової атестації. Відповідна інформація буде розглядатися на засіданні експертної комісії з питань визначення результатів зовнішнього незалежного оцінювання, що використовуються як державна підсумкова атестація, при Українському центрі оцінювання якості освіти. З огляду на вищезазначене варто наголосити, що психометричні характеристики як тесту з англійської мови загалом, так і його окремих складників відповідають заданим проектною специфікацією тесту вимогам, а пропозиції щодо виключення окремих частин тесту під час визначення тестових балів учасників з англійської мови є необґрунтованими. Щодо техніки, яка використовувалася на пунктах тестування: фактів використання аудіопристроїв, які за своїми параметрами не відповідають нормативним вимогам, не встановлено, як і випадків повного зриву частини тесту аудіювання в окремих аудиторіях. У пунктах проведення ЗНО було подано 65 апеляційних заяв, проте більшість заявників не висловили бажання пройти тестування повторно під час додаткової сесії, а лише зазначали про неналежні умови тестування. Регламентні комісії при регіональних центрах оцінювання якості освіти вивчили всі обставини, викладені в апеляційних заявах, за результатами чого задоволено 4 такі заяви (заявники отримали можливість пройти тестування під час додаткової сесії). Висновки: Ґрунтовний аналіз змістовних і процедурних аспектів тестування основної сесії зовнішнього незалежного оцінювання з англійської мови дає підстави стверджувати, що системних проблем, які б могли розглядатися як критичні для визначення результатів учасників тестування, не виявлено. Окремі ускладнення, що виникали на пунктах проведення тестування, вчасно були усунуті, що забезпечило можливість усім учасникам пройти тестування на рівних, зокрема й під час виконання частини завдань на аудіювання. У 0,00% 2,00% 4,00% 6,00% 8,00% 10,00% 12,00% 14,00% 16,00% 0 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 Розподіл учасників тестування за кількістю балів на частині тесту "Розуміння мови на слух" основної сесії ЗНО з англійської мови Всі учасники Випускники поточного року (рівень стандарту й профільний рівень) Випускники поточного року (рівень стандарту) Випускники поточного року (профільний рівень) свою чергу питання, пов’язані зі змістом окремих тестових завдань, будуть взяті до уваги під час розрахунку шкал визначення результатів учасників тестування. Упевнені, що навчальні досягнення випускників з англійської мови будуть об’єктивно й справедливо оцінені. Український центр протягом усіх років свого понад десятирічного існування докладав і зараз продовжує докладати максимум зусиль для забезпечення якісних інструментів і процедур оцінювання випускників шкіл і завжди відкритий на конструктивний діалог у разі виникнення проблем.