Уфа, Россия
УДК 004.5 Человеко-машинное взаимодействие. Человеко-машинный интерфейс. Пользовательский интерфейс
УДК 37.02 Общие вопросы дидактики и методики воспитания и обучения
Педагогический дизайн – это процесс планирования и разработки учебных программ с учетом дидактических принципов и теории обучения. Цель данного исследования – рассмотреть возможность оценки педагогического дизайна электронных курсов с позиции квалиметрического подхода. При этом необходимо выделить структурные компоненты электронного курса и рассмотреть возможные критерии их оценивания. В ходе данного исследования были выделены такие подсистемы электронного курса как декларативный блок, организационно-справочная подсистема, подсистемы образовательного контента, контроля знаний, управления образовательной траекторией, интерфейс электронного курса, подсистема сопровождения и обратной связи, а также функционально-техническая подсистема. Также были предложены возможные элементы подсистем и параметры критериев их оценки. Возможность практического применения квалиметрической оценки качества электронных курсов с точки зрения выделенных подсистем была показана на примере анкетного опроса слушателей и преподавателей онлайн-курса, используемого в системе дополнительного профессионального образования Башкирского ГАУ. Делается вывод, что реализация принципов педагогического дизайна в системах управления обучением позволяет создавать адаптивные и персонализированные образовательные траектории, что способствует лучшему усвоению материала и развитию необходимых компетенций, но требует комплексного подхода, учитывающего как педагогическую теорию, так и стандарты качества информационных систем и программного обеспечения.
педагогический дизайн, электронный курс, качество, квалиметрия, электронное образование, структурные элементы, оценка качества
Введение.
Оценка качества образования является важным аспектом современного образовательного процесса, способствующим улучшению системы образования в целом. В условиях быстро меняющегося мира, где знания и навыки становятся ключевыми факторами для профессиональной самореализации личности, оценка эффективности образовательных программ и методов обучения приобретает особую значимость. Педагогический дизайн подразумевает создание учебного контента и организацию образовательного процесса с учетом теорий и практик, способствующих максимальному усвоению материала учащимися. Эффективный педагогический дизайн в системах электронного обучения включает в себя не только выбор подходящих технологий, но и интеграцию инновационных методологических и дидактических подходов.
Вопросы использования современных технологий педагогического дизайна в разработке электронных образовательных ресурсов затрагиваются в работах таких авторов как Ю.Н. Кузнецова, О.А. Калимуллина, А.В. Иванова, О.В. Сироткина, 2021 [1], Е.И. Холмогорова, Н.Н. Замошникова, 2021 [2], S. Baldwin, Y.-H. Ching, Y.-C. Hsu, 2018 [3], F. Martin, D. Bolliger, C. Flowers, 2021 [4], A. Konstantinidis, 2022 [5] и др.
Цель данного исследования – рассмотреть возможность оценки педагогического дизайна электронных курсов с позиции квалиметрического подхода. При этом необходимо выделить структурные компоненты электронного курса и рассмотреть возможные критерии их оценивания.
1. Материалы, методы и методики
1.1. Понятие педагогического дизайна электронных курсов
Педагогический дизайн – это процесс планирования и разработки учебных программ с учетом дидактических принципов и теории обучения. В контексте электронного обучения он охватывает различные аспекты, включая разработку содержания курсов, выбор методов преподавания, использование соответствующих цифровых и педагогических технологий, а также оценку учебных результатов. Качественный педагогический дизайн способствует повышению вовлеченности студентов, эффективному усвоению материала и достижению поставленных учебных целей [1], [6].
Оценка качества педагогического дизайна в системах управления электронным обучением является важным этапом в обеспечении эффективного образовательного процесса. Применение установленных критериев и методов оценки позволяет выявить сильные и слабые стороны курсов и внести необходимые изменения для их улучшения.
Рассмотрим электронные онлайн-курсы как средство управления электронным обучением. При этом можно построить следующую модель управления обучением (рис. 1).
Рис. 1. Общая модель управления обучением
Fig. 1. General model of learning management
Обучающийся, являясь объектом обучения, получает непрерывное воздействие U от электронного курса, выступающего в данном случае в роли устройства управления. При этом устройство управления получает непрерывную информацию об объекте обучения N и о параметрах внешней среды S с помощью индикаторов текущего состояния IN и IS. Взаимодействие электронного курса с моделью обучаемого позволяет при этом выбирать оптимальную образовательную траекторию для достижения цели управления (в виде максимального уровня знаний, умений и навыков обучающихся).
Следует отметить, что педагогический дизайн является ключевым аспектом успешной реализации систем управления обучением. Эффективный подход к проектированию учебного контента и организации образовательного процесса может существенно повысить качество обучения и вовлеченность студентов. Учитывая разнообразие потребностей учащихся, педагогический дизайн позволяет создавать адаптивные и персонализированные образовательные траектории, что способствует лучшему усвоению материала и развитию необходимых компетенций. Внедрение современных технологий и методологических подходов в педагогический дизайн открывает новые возможности для создания интерактивных обучающих материалов.
1.2. Методы квалиметрии в задачах оценки электронных курсов
С развитием цифровых технологий и увеличением доступности электронного обучения становится всё более важным вопрос оценки качества образовательных онлайн-курсов.
В связи с этим, востребованным направлением менеджмента качества образования является квалиметрия – научное направление, которое занимается вопросами количественной оценки качества разнообразных объектов, систем и процессов.
Квалиметрия, как наука об измерении качества, предлагает множество методов и подходов, позволяющих объективно анализировать и оценивать электронные курсы с точки зрения их эффективности.
В [7] говорится, что квалиметрия образования должна охватывать не только общие проблемы технологий и методологии оценки качества в сфере образования, но и проблемы выбора квалиметрических шкал, а также выбора методологии проектирования конкретных методик и моделей оценки.
Изучим возможность применения квалиметрических методов [8] к задаче оценивания электронных курсов на основе квалиметрического подхода.
Рассмотрим задачу оценки электронных курсов, складывающуюся, в общем случае, из оценки N разнообразных компонент.
Предположим, что с использованием определенных методик каждая компонента курса была численно оценена как si , где i меняется от 1 до N.
Итоговое суммарное значение оценки электронных курсов S будет вычисляться по формулам (1)-(2):
(1)
где k1, k2, … kN – некоторые весовые коэффициенты,
S (s1 , s2 , … , sN ) ® max (2)
1.3. Подходы к выделению элементов электронного курса
S. Baldwin, Y.-H. Ching, Y.-C. Hsu [3] рассмотрели разнообразные инструменты оценки онлайн-курсов и определили набор необходимых компонентов для качественных курсов в виде 22 элементов, из которых наиболее значимыми являются:
- доступные задания;
- интуитивно понятная навигация;
- технологии, способствующие вовлечению учащихся в процесс обучения;
- поддержка взаимодействия между учащимися;
- общение и мероприятия для групповой работы;
- контактная информация преподавателя;
- ожидания относительно качества общения (участия);
- оценочные рубрики для заданий;
- оценки, соответствующие целям обучения;
- ссылки на официальные ресурсы (в оригинале, англ. - institutional services);
- адаптация для людей с ограниченными возможностями;
- правила курса в отношении ожидаемого поведения.
F. Martin, D. Bolliger, C. Flowers [4] установили пять категорий стандартов проектирования элементов онлайн-курсов OCDE (англ. - Online Course Design Elements) и выделили 38 соответствующих им элементов электронного курса. К этим пяти категориям авторы отнесли разделы:
-
- обзор (в оригинале, англ. - overview);
- презентация содержания (content presentation);
- взаимодействие и коммуникации (interaction and communication);
- оценка и аттестация (assessment and evaluation);
- поддержка учащихся (learner support).
Дальнейшее развитие идей F. Martin и др. нашло место в труде A. Konstantinidis [5], выделившего в тех же пяти категориях 30 элементов (таблица 1).
Таблица 1.
Сравнение подходов к выделению элементов электронного курса
Table 1.
Comparison of approaches to identifying elements of an electronic course
|
Элементы, выделенные F. Martin, D. Bolliger, C. Flowers (2021) [4] |
Элементы, выделенные А. Konstantinidis (2022) [5] |
|
(a) обзор |
|
|
Элементы, которые предоставляют общую информацию о курсе, а также элементы, связанные с введением курса для учащихся:
|
|
(b) презентация контента |
|
|
Элементы, которые обеспечивают инфраструктуру для развертывания контента курса:
|
|
(c) взаимодействие и коммуникации |
|
|
Элементы, которые обеспечивают инфраструктуру для взаимодействия, коммуникации и совместной работы:
|
|
(d) оценка и аттестация |
|
|
Элементы, которые обеспечивают инфраструктуру для оценки и оценивания (т.е. задания, критерии оценивания и т.д.):
|
|
(e) поддержка учащихся |
|
|
Элементы, которые связаны с поддержкой учащихся с техническими или академическими трудностями, а также элементы, которые связаны с мониторингом их обучения (т. е. аналитика):
|
2. Результаты
Анализируя проблему качества онлайн-курсов с точки зрения качества образовательных электронных ресурсов, надо подчеркнуть, что данное программное обеспечение должно соответствовать следующим требованиям:
- Федеральным государственным образовательным стандартам высшего образования (ФГОС ВО);
- стандартам качества программного обеспечения ISO/IEC 25010:2023, ISO/IEC 25002:2024, ISO/IEC 25019:2023;
- стандартам качества информационных систем и программного обеспечения ГОСТ Р ИСО/МЭК 25010-2015;
- стандартам спецификаций, разработанных для систем дистанционного обучения, например, SCORM, xAPI, CMI5 [9] и/или др.
В стандарте ГОСТ Р ИСО/МЭК 25010-2015, содержащем требования к оценке качества систем и программного обеспечения, отмечается, что качество программного обеспечения в его жизненном цикле складывается из качества процесса, внутреннего и внешнего качества, а также качества при использовании.
Исходя из всего вышерассмотренного и учитывая работы [2], [10], можем предложить следующую структуру подсистем и элементов электронного курса, а также возможные параметры критериев их оценивания (таблица 2).
Таблица 2.
Перечень выделенных подсистем и элементов подсистем электронного курса
Table 2.
List of allocated subsystems and elements of subsystems of the electronic course
|
Подсистемы |
Элементы подсистемы |
Параметры критериев оценки подсистем |
|
П1. Декларативный блок (манифест) |
П1.1 Цели и задачи обучения П1.2 Ожидаемые результаты обучения П1.3 Требования к обучаемым |
К1.1 Соответствие курса целям обучения К1.2 Понимание потребностей и ожиданий обучающихся |
|
П2. Организационно-справочная подсистема |
П2.1 Справочные материалы (аннотация курса, рабочие программы дисциплин, перечень основной и дополнительной литературы) П2.2 Информация о схеме организации учебного процесса (расписание занятий, календарный план обучения, описание форм и технологий обучения) П2.3 Информация о преподавателе |
К2.1 Информативность К2.2 Полнота, структурированность информационно-справочных материалов |
|
П3. Подсистема образовательного контента |
П3.1 Лекционные материалы П3.2 Задания для практических и лабораторных работ П3.3 Дополнительные материалы для углубленного изучения П3.4 Задания для самостоятельного выполнения (курсовые работы, расчетно-графические работы, рефераты и др.) П3.5 Образцы и примеры выполненных работ П3.6 Глоссарий П3.7 Элементы интерактивных виртуальных лабораторий |
К3.1 Качество контента К3.2 Модульность К3.3 Выполнение дидактических принципов обучения (структурированность, актуальность, наглядность, полнота, логичность, понятность, научная обоснованность и др.) К3.4 Разнообразия форматов материалов (текстовые, видео, мультимедийные и др.) |
|
П4. Подсистема контроля знаний |
П4.1 Фонд оценочных средств (теоретические вопросы, задачи, тесты) П4.2 Критерии и шкалы оценивания П4.3 Модуль текущей аналитики П4.4 Отчеты по успеваемости |
К4.1 Качество оценочных средств К4.2 Прозрачность и объективность шкал оценивания К4.3 Возможность самооценки (например, тесты для самопроверки) |
|
П5. Подсистема управления образовательной траекторией |
П5.1 Модуль оценки степени сформированности профессиональных компетенций П5.2 Модуль управления образовательной траекторией П5.3 Модуль управления технологиями обучения |
К5.1 Возможность интерактивного, гибкого, адаптивного обучения К5.2 Возможность взаимодействия студентов друг с другом в процессе обучения |
|
П6. Интерфейс электронного курса |
П6.1 Панель навигации П6.2 Интерактивные элементы меню (командные кнопки, формы, модальные окна и др.) П6.3 Элементы дизайна (логотип, графические изображения и др.) |
К6.1 Удобство использования (юзабилити, эргономика) К6.2 Качество дизайна (единый стиль, единство цветовой схемы и семейств шрифтов, эстетика) К6.3 Высокая скорость отклика элементов К6.4 Функциональность (соответствие функционала интерфейса требованиям пользователей) |
|
П7. Подсистема сопровождения и обратной связи |
П7.1 Модуль связи с преподавателями и тьюторами (чат, форум, электронная почта, электронные доски объявлений, видеоконференции и др.) П7.2 Модуль связи со службой технической поддержки П7.3 Анкеты обратной связи и рефлексии П7.4 Инструкции для пользователей |
К7.1 Качества предоставляемой обратной связи К7.2 Степень вовлеченности студентов в учебный процесс К7.3 Возможность отслеживать прогресс в обучении К7.4 Удовлетворенность учащихся обучением К7.5 Удобство сопровождения для тьюторов |
|
П8. Функционально-техническая подсистема |
П8.1 Личный кабинет обучающегося П8.2 Личный кабинет преподавателя П8.3 Мобильная версия электронного курса П8.4 Адаптивная версия для людей с ограниченными возможностями П8.5 Модуль идентификации обучающихся П8.6 Модуль управления информационной безопасностью |
К8.1 Надежность. К8.2 Стабильность работы К8.3 Кроссплатформенность К8.4 Безопасность персональных данных К8.5 Свобода от риска при внесении изменений или переносе системы К8.6 Отказоустойчивость |
Возможность практического применения квалиметрической оценки качества электронных курсов с точки зрения выделенных подсистем рассмотрена далее на следующем примере.
В ходе исследования был проведен анкетный опрос слушателей и преподавателей онлайн-курса «Искусственный интеллект», используемого в системе дополнительного профессионального образования Башкирского ГАУ. Данный курс реализован на платформе LMS Moodle и имеет следующую структуру:
- Модуль 1. «Основные понятия искусственного интеллекта и интеллектуальных информационных систем»;
- Модуль 2. «Интеллектуальный анализ данных. Большие данные (Big Data)»;
- Модуль 3. «Понятие о нейросетевых технологиях»;
- Модуль 4. «Примеры и основные перспективы развития интеллектуальных информационных систем»;
- Модуль «Итоговая аттестация».
И слушателям, и преподавателям курса было предложено оценить по пятибалльной шкале данный электронный ресурс с точки зрения качественных показателей подсистем П1-П8, рассмотренных в таблице 2.
Результаты опроса представлены на рис. 2. Итоговый средний балл по оценке обучающимися составил 4,33; по оценке преподавателями – 4,15. Самые низкие баллы были поставлены за подсистему «П8. Функционально-техническая подсистема», причем как обучающимися (3,9 балла), так и преподавателями (3,8 балла), что можно объяснить некоторыми разовыми техническими сбоями на платформе и что, безусловно, является сигналом к необходимости технической модификации серверного оборудования.
При этом надо отметить, что обучающиеся достаточно высоко оценили подсистему сопровождения и обратной связи П7 (4,4 балла), что положительно характеризует систему взаимодействия между обучающимися и преподавателями.
Рис. 2. Результаты анкетного опроса по оценке подсистем электронного курса
Fig. 2. Results of the questionnaire survey on the evaluation of the subsystems of the electronic course
В планах дальнейшего этапа исследования – рассмотреть возможность применения методики «360 градусов» к случаю оценки качества электронных образовательных ресурсов. Данная методика «360 градусов» используется в системах оценки квалификации персонала. Суть методики заключается в том, что оценку сотрудника проводит все его рабочее окружение: руководители, подчиненные, коллеги и клиенты [11].
Если принять во внимание, что участниками образовательного процесса выступают не только обучающиеся и преподаватели/тьюторы, но и системные администраторы, служба технической поддержки, методический отдел, учебная часть и т.д., то можно предположить, что квалиметрическая оценка электронного курса данными группами лиц поможет выявить новые точки роста. Например, специалисты методического отдела могли бы квалифицированно системно оценивать различные аспекты контента электронного курса и предлагать пути его совершенствования, специалисты технического отдела – оценивать подсистему сопровождения и обратной связи, функционально-техническую подсистему и др.
Заключение
Оценка качества образования представляет собой многогранный и динамичный процесс, который не только предоставляет данные о текущем состоянии образовательной системы, но и открывает возможности для её улучшения и адаптации к современным требованиям.
Квалиметрия, как наука об измерении качества, предлагает различные методики и подходы, позволяющих эффективно анализировать и оценивать электронные курсы в разрезе выделенных структурных элементов. В ходе данного исследования были выделены такие подсистемы электронного курса как декларативный блок (манифест), организационно-справочная подсистема, подсистемы образовательного контента, контроля знаний, управления образовательной траекторией, интерфейс электронного курса, подсистема сопровождения и обратной связи, а также функционально-техническая подсистема. Также были выделены возможные элементы подсистем (общим количеством 33 элемента) и параметры критериев их оценки (суммарным количеством 28 критериев).
Возможность практического применения квалиметрической оценки качества электронных курсов в разрезе выделенных подсистем была показана на примере анкетного опроса слушателей и преподавателей онлайн-курса «Искусственный интеллект», используемого в системе дополнительного профессионального образования Башкирского ГАУ. Итоговый средний балл по оценке обучающимися составил 4,33; по оценке преподавателями – 4,15.
Важно также отметить, что оценка педагогического дизайна электронных курсов позволяет получить важную информацию для дальнейшего улучшения образовательных программ. Учитывая разнообразие потребностей учащихся, педагогический дизайн позволяет создавать адаптивные и персонализированные образовательные траектории, что способствует лучшему усвоению материала и развитию необходимых компетенций. Успешная реализация педагогического дизайна в системах управления обучением требует комплексного подхода, учитывающего как педагогическую теорию, так и стандарты качества информационных систем и программного обеспечения. Продолжая исследовать и внедрять инновационные методы и практики в эту область, можно значительно улучшить образовательные результаты и подготовить учащихся к вызовам будущего.
1. Кузнецова Ю.Н., Калимуллина О.А., Иванова А.В. и др. Педагогический дизайн в проектировании электронных ресурсов // Современные наукоемкие технологии. 2021. № 12-1. С. 162-167. DOIhttps://doi.org/10.17513/snt.38970. EDN ATFKQK.
2. Холмогорова Е.И., Замошникова Н.Н. Использование технологии педагогического дизайна в разработке электронного образовательного курса: теоретический аспект и практический опыт // Ученые записки Забайкальского государственного университета. 2021. Т. 16. № 5. С. 16-29. DOIhttps://doi.org/10.21209/2658-7114-2021-16-5-16-29. EDN UQZJEG.
3. Baldwin S., Ching Y.-H., Hsu Y.-C. Online course design in higher education: A review of national and statewide evaluation instruments. TechTrends. 2018;62(1):46–57. DOIhttps://doi.org/10.1007/s11528-017-0215-z.
4. Martin F., Bolliger D., Flowers C. Design matters: Development and validation of the Online Course Design Elements (OCDE) Instrument. The International Review of Research in Open and Distributed Learning. 2021;22(2):46–71. DOIhttps://doi.org/10.19173/irrodl.v22i2.5187.
5. Konstantinidis A. Analysis of design elements in universal course shell templates of high-ranking universities. Knowledge Management & E-Learning. 2022;14(3):344–359. DOIhttps://doi.org/10.34105/j.kmel.2022.14.019.
6. Воронина Д.В. Педагогический дизайн в современной России: проблемы и пути развития // Педагогический журнал. 2016. № 3. С. 61-68. EDN WWMDUF.
7. Субетто А.И. Концептуально-теоретические основы решения проблемы качества образования в России // Сибирский педагогический журнал. 2008. № 1. С. 75-87. EDN PXRNVF.
8. Шамсутдинова Т.М. Оценка информационной компетентности студентов: квалиметрический подход // Преподаватель XXI век. 2018. № 2-1. С. 93-104. EDN UUAZSK.
9. Comparison of SCORM, xAPI and cmi5. [Электронный ресурс]. URL: https://xapi.com/cmi5/comparison-of-scorm-xapi-and-cmi5/ (дата обращения: 03.11.2024).
10. Ларина Т.Б. Об оценке качества интерфейсов электронных учебных курсов // Информатика и образование. 2021. № 6 (325). С. 11-17. DOIhttps://doi.org/10.32517/0234-0453-2021-36-6-11-17. EDN VRSKHN.
11. Хрипко Е.Г. Метод оценки 360 градусов и анализ организационной среды // Экономика и предпринимательство. 2016. № 2-2 (67). С. 852-855. EDN VTBEQX.
