Assessment the content of educational documents: statistical aspect

В статье определяется проблема объективного и универсального подхода к оценке содержания образовательных нормативных документов, составленных в образовательных организациях. Оценка качества содержания документа, например, содержание учебной программы дисциплины, не может проходить по формальным критериям. Для их оценки необходимо привлекать экспертов в конкретной области еще на стадии написания и составления документа. При этом нормативные документы в области образования регламентируют четкий перечень элементов и разделов образовательных документов. И вот эта формальная часть может быть подвергнута автоматической проверке на основе математико-статистических методов. Актуальность разработки таких подходов обусловлена в первую очередь большим количество образовательных документов. В настоящее время по одной образовательной программе может быть разработано более 400 образовательных документов (учебный план, учебная программа, руководство по изучению курса, фонды оценочных средств и т.д.). Основной целью исследования является разработка математико-статистических методов оценки содержания образовательных документов для возможности организации автоматизированной системы оценки. В ходе исследования были использованы методы описательной статистики, метод рангов, экспертные опросы, коэффициенты конкордации Кендэла и Пирсона. Входе работы были выделены основные формальные элементы, которые содержат нормативные документы образовательных организаций на примере рабочей программы профессионального модуля. Среди работников образовательной организации был проведен экспертный опрос по разработанным критериям. На основе итогов экспертного опроса были получены ранговые оценки полноты и содержания образовательных документов. Для оценки согласованности и адекватности экспертных оценок в работе были применены непараметрические методы статистики. Рассчитанные коэффициенты конкордации Кендэла и Пирсона позволили сделать выводы о согласованности полученных оценок, тем неимении в случае выявления разнонаправленности ответов экспертов можно выявить ответы, которые выпадают из общей тенденции. В случае обнаружения подобных ответов, можно вернуть образовательный документ на повторенное рассмотрение эксперту. Разработанная универсальная математико-статическая методика оценки элементов образовательного документа. Данная методика может быть автоматизирована с целью автоматической обработки большого количества образовательных документов.

1. Egorov A.F., Savitskaya T.V., Kapustin Yu.I. Organizatsiya protsessa obucheniya i kontrolya znanii s ispol’zovaniem avtomatizirovannogo laboratornogo kompleksa dlya podgotovki khimikov-tekhnologov // Vestnik TGTU. – 2006 – №2 – S. 477–485.

2. Goranskii A.V. Informatsionno-analiticheskaya sistema kontrolya, planirovaniya i upravleniya obrazovatel’nym protsessom vuza khimiko-tekhnologicheskogo profilya: dissertatsiya kandidata tekhnicheskikh nauk: 05.13.01, 05.13.18. – Moskva, 2007. – 219 s.

3. Logachev M.S. Podgotovka ekspertnogo oprosa dlya opredeleniya znachimosti elementov rabochei programmy uchebnykh distsiplin // Professional’noe obrazovanie i obshchestvo. – 2016. – №1(17) – S. 66–73.

4. Obraztsov P.I. Metody i metodologiya psikhologo-pedagogicheskogo issledovaniya. – SPb.: Piter, 2004. – 268 s.