Щоб зробити весь процес підготовки і проведення ЦТ (від створення тестів до обробки результатів учасників іспиту) максимально прозорим, Республіканський інститут контролю знань (РІКЗ) регулярно організовує семінари для педагогів на своїй базі. Минуло вже близько двох десятків таких зустрічей. Нещодавно його гостями стали фахівці відділів освіти, спорту і туризму Сморгонського і Воложинського райвиконкомів і керівники установ загальної середньої освіти з цих районів.
Тестология - серйозна наука
Між програмою вступних випробувань і тестом знаходиться специфікація, яка формує, так би мовити, кістяк майбутнього тесту. У специфікації, яка розробляється для кожної дисципліни, детально прописана вся структура майбутнього тесту: кількість завдань в частинах А і В, скільки передбачено завдань на кожен розділ навчальної програми, перераховані всі навчальні елементи, які будуть контролюватися. Специфікацію у вільному доступі можна знайти на сайті РІКЗ.
Одне з головних переваг ЦТ перед традиційним іспитом - більш широке охоплення шкільного курсу (приблизно до 80 відсотків), в той час як на іспиті абітурієнту пропонуються всього 3-5 питань.
- Але це зовсім не означає, що якщо, умовно кажучи, квадратних рівнянь в наших тестах сьогодні немає, то і завтра їх там не буде, - попереджає всіх Микола Феськов. - Ми помітили, що якщо три-чотири роки на ЦТ відсутні ті ж квадратні рівняння, то і вчителі в школі перестають приділяти їм належну увагу. Це їх помилка.
Без зайвої уваги і ажіотажу
Експертиза потрібно, по-перше, для того, щоб оцінити відповідність тестових матеріалів вимогам програм вступних випробувань та змістом підручників. По-друге, щоб оцінити точність відображення фактів і подій. Всі спірні і суб'єктивні точки зору, допустимі в науці, в тестах виключаються. Крім того, експертами перевіряється коректність і лаконічність формулювань, доцільність використання ілюстрацій і графічних зображень.
Наступний етап - апробація тестових матеріалів: це не тільки їх перевірка на придатність і життєздатність, але і хороша можливість познайомити майбутніх абітурієнтів з новими завданнями. За результатами апробації проводиться статистична обробка результатів учасників тестування і оцінюється якість кожного завдання. Ті завдання, які мають дуже низький відсоток виконання (менше 5% від загального числа учасників) вибраковуються. До «поганим» завдань відносяться і ті, за якими стовідсоткове виконання демонструють більш 5% від кількості учасників, - значить, вони мають дуже низьку дифференцирующую здатність і просто не дозволять ранжувати претендентів на студентський квиток. І тільки після апробації нові завдання потрапляють в загальну базу.
Чужі тут не ходять
Безумовно, багатьох цікавить, а чи може бути витік важливої інформації з Республіканського інституту контролю знань ще на стадії підготовки тестів?
Є в інституті кімната, так би мовити, святая святих, де зберігається вся база тестових завдань за всі роки проведення ЦТ.
- Це кімната з обмеженим правом доступу. Щоб потрапити туди, повинна зібратися комісія в складі не менше трьох осіб, - відкриває завісу секретності начальник навчально-методичного управління Республіканського інституту контролю знань Олександр Якобчук. - Один чоловік є ключ від цього приміщення, в іншого - право зняти сигналізацію, у третього - ключ від сейфа, де зберігаються ноутбуки по всім 15 предметам ЦТ. Кожен ноутбук, крім того, що міститься в сейфі, ще й пломбується. Свій власний іменний пломбіратор є у кожного методиста. Перед початком роботи він перевіряє цілісність пломби, заносить інформацію в журнал, зрізає пломбу і приступає до роботи. Після закінчення ноутбук знову пламбіруецца. Він повністю захищений в плані інформаційної безпеки: ніколи не підключається навіть до локальних мереж, на апаратному рівні в ньому відключено всі взаємодія з зовнішнім світом. Частково працює тільки USB-порт - для того, щоб внести в базу нові завдання або щось роздрукувати. І навіть якщо допустити, що ноутбук виявився в чужих руках, то доступу до бази даних зловмисник все одно не отримає. Вся інформація в комп'ютері зашифрована, до того ж і самих тестів там немає. Вони формуються безпосередньо напередодні ЦТ в присутності членів державної комісії по контролю за ходом підготовки і проведення вступних випробувань.
Запускається комп'ютерна програма, і в автоматичному режимі формуються відразу кілька тисяч варіантів тестів. Методом сліпого вибору відбираються 10 варіантів, які і потрапляють на ЦТ. Але компоновка відбувається не хаотично. Напередодні готується план тесту - це документ, який регламентує, що має потрапити в тест з математики, наприклад, на завдання А1. І якщо це буде рішення квадратного рівняння, то у всіх 10 варіантах будуть рівноцінні завдання.
«Викторовичь» і «Владзімеровічь»
Сьогодні в Республіканському інституті контролю знань ведеться перевірка робіт учасників третього етапу репетиційного тестування. Безумовно, навіть не можна порівнювати нинішню навантаження на верифікаторів з навантаженням в розпал ЦТ.
Завдання верифікаторів - звірити кожну букву і кожну цифру: чи правильно їх розпізнав комп'ютер. Кожен бланк проходить потрійну перевірку очима, і кожен раз його «читає» новий верифікатор. Оператори видаляють і весь бруд: наприклад, абітурієнт випадково чиркнув ручкою, і, щоб комп'ютер не зарахував йому неправильну відповідь, ми це з елетронній зображення прибираємо. Трапляється, що абітурієнт через хвилювання дві букви написав в одній клітці. Ми їх теж розставляємо по своїм клітинам. Все робимо на користь дитини. Але хитрощі, про які добре знаємо, що не пропускаємо. При цьому комп'ютерна програма фіксує абсолютно все втручання верифікаторів.
А казуси, за словами Тамари Болтуть, бувають найрізноманітніші. Один абітурієнт при написанні власного імені, по батькові та прізвища допустив аж 7 помилок! Хтось пише російською мовою «Викторовичь», а хтось - «Владзімеровічь». Фактично в кожному десятому бланку доводиться виправляти помилки в області реєстрації. Якщо їх пропустити, то помилка потрапить і в виданий сертифікат. Значить, абітурієнт буде звертатися за його заміною.
І ще один важливий момент - відповідей до тестових завдань оператори не знають. Вони готуються тільки після того, як роботи учасників ЦТ пройшли всі перевірки. Крім верифікації (розпізнавання рукописних зображень) передбачені ще й три апаратні перевірки. Коли відповіді нарешті з'являються, вони вносяться в комп'ютерну програму і натисненням однієї кнопки через частки секунди з'являються все 75 тисяч результатів. Хтось плаче, а хтось - радіє.
Кажуть, що краще один раз побачити, ніж сто разів почути. Безумовно, організувати для всіх педагогів, абітурієнтів та їх батьків екскурсію в Республіканський інститут контролю знань проблематично. Але потрапити на віртуальну екскурсію може кожен бажаючий. На сайті інституту rikc.by представлений фільм «Про ЦТ предметно», з якого можна дізнатися як про факти з історії тестування в світі, так і про всі обставини створення тестів, дотримання конфіденційності інформації абсолютно на всіх етапах підготовки і проведення ЦТ і правилах поведінки, які потрібно знати майбутнім його учасникам.
Фото Євгена Песецький