Record Details

Добір математичної моделі для аналізу тестових завдань типу «вбудовані відповіді» з математичних дисциплін

Електронна бібліотека НАПН України

View Archive Info
 
 
Field Value
 
Relation http://lib.iitta.gov.ua/739998/
https://journal.iitta.gov.ua/index.php/itlt/article/view/4487
10.33407/itlt.v87i1.4487
 
Title Добір математичної моделі для аналізу тестових завдань типу «вбудовані відповіді» з математичних дисциплін
Selecting a mathematical model for analysis of test items of the type "embedded answers" for mathematical disciplines
 
Creator Круглова, Наталія Володимирівна
Диховичний, Олександр Олександрович
 
Subject 004.4 Software
004.9 ІКТ ( Application-oriented computer-based techniques )
37.09 Organization of instruction
378 Higher education. Universities. Academic study
 
Description У статті досліджується питання вибору математичної моделі для аналізу комп’ютерних тестів з математичних дисциплін. Особливістю даного дослідження є розгляд тестових завдань типу «вбудовані відповіді». Такі тестові завдання мають декілька пов’язаних за певною логікою «кроків» і були використані саме для дистанційного контролю знань з математичних дисциплін під час карантину в НТУУ «Київський політехнічний інститут імені Ігоря Сікорського». Введення таких завдань у тест ставить перед викладачем питання: як аналізувати якість таких тестів? Автори побудували дослідження на основі загальновідомих методів Класичної Теорії Тестів (КТТ) та Сучасної Теорії Тестів (IRT), які довели свою ефективність як у педагогічному тестуванні, так і в інших галузях, у яких знаходить застосовування тестовий підхід.
Дослідження проводилось на прикладі модульної тестової контрольної роботи з теорії ймовірностей для студентів другого курсу факультету інформатики та обчислювальної техніки НТУУ «Київський політехнічний інститут імені Ігоря Сікорського», сформованої на платформі MOODLE під час дистанційного навчання в листопаді 2020 р. Під час дослідження було: проведено аналіз якості тесту як у цілому, так і окремих тестових завдань; оцінено латентні параметри завдань, перевірено адекватність відповідних моделей даним тестування; побудовано характеристичні та інформаційні криві; за допомогою інформаційних критеріїв вибрано моделі IRT, які краще підходять для аналізу комп’ютерних тестів із завданнями типу «вбудовані відповіді»; доведено, що найбільш прийнятними для аналізу подібних завдань є як дихотомічна модель Раша, так і політомічна модель Муракі.
Обчислення проводилося за допомогою спеціальних бібліотек (пакетів) мови програмування R, у яких реалізовано алгоритми КТТ та IRT, а саме, eRm, ltm, mirt.
Показано, як за допомогою завдань з «вбудованими відповідями» можна проаналізувати певні вміння й знання студентів.
Результати дослідження сприяють підвищенню компетентності викладачів щодо оцінювання якості тестів з вищої математики, що є дуже актуальним при складанні тестів з різноманітних дисциплін, особливо під час дистанційного навчання студентів.
The article examines the issue of choosing a mathematical model for the analysis of computer tests in mathematical disciplines. A feature of this study is the exploration of test items of the "embedded answers (cloze)" type. Such test tasks have several “steps” interconnected by a certain logic and have been used precisely for remote control of knowledge in mathematical disciplines during quarantine at NTUU “Igor Sikorsky Kyiv Polytechnic Institute”.The introduction of such tasks into the test raises the question for the teacher: how to analyze the quality of such tests? The authors built the study on the basis of the well-known methods of Classical Test Theory (CTT) and Item Response Theory (IRT), which have proven their effectiveness in pedagogical testing as well as in other industries in which the test approach is used. The study was carried out on the example of a modular test quizzes on probability theory for second-year students of the Faculty of Informatics and Computer Engineering of NTUU "Igor Sikorsky Kyiv Polytechnic Institute", formed on the MOODLE platform during distance learning in November 2020. In the course of the study, the following was done: the quality of the test was analyzed both as a whole and as individual test items; the latent parameters of the tasks were estimated, the adequacy of the corresponding models to the testing data was checked; characteristic and information curves were built; using information criteria, were selected the IRT models the most suitable for the analysis of computer tests with tasks of the "embedded answers" type; it has been proven that both Rush's dichotomous model and Muraki's political model are the most appropriate for the analysis of such tasks. The calculation was carried out using special libraries (packages) of R programming language, in which the KTT and IRT algorithms are implemented, namely, eRm, ltm, mirt. It is shown how the tasks with “embedded answers (cloze)” can be used to analyze certain skills and knowledge of students. The results of the study contribute to improving the competence of teachers in assessing the quality of tests in higher mathematics, which is very important when compiling tests in various disciplines, especially in the situation of student distance learning.
 
Publisher Інститут цифровізації освіти НАПН України
 
Date 2022
 
Type Article
PeerReviewed
 
Format text
 
Language uk
 
Identifier http://lib.iitta.gov.ua/739998/1/%D0%9D%D0%B0%D1%82%D0%B0%D0%BB%D1%96%D1%8F%20%D0%92%D0%BE%D0%BB%D0%BE%D0%B4%D0%B8%D0%BC%D0%B8%D1%80%D1%96%D0%B2%D0%BD%D0%B0%20%D0%9A%D1%80%D1%83%D0%B3%D0%BB%D0%BE%D0%B2%D0%B0.pdf
- Круглова, Наталія Володимирівна (orcid.org/0000-0002-9143-9398 <http://orcid.org/0000-0002-9143-9398>) and Диховичний, Олександр Олександрович (orcid.org/0000-0001-8505-2878 <http://orcid.org/0000-0001-8505-2878>) (2022) Selecting a mathematical model for analysis of test items of the type "embedded answers" for mathematical disciplines Інформаційні технології і засоби навчання, 1 (87). pp. 166-184. ISSN 2076-8184
10.33407/itlt.v87i1.4487
 
##plugins.schemas.dc.fields.doi.name## 10.33407/itlt.v87i1.4487