Инструменты компьютерного контроля результатов обучения. Классификация, методика разработки, метрология

Содержание

Слайд 2

Таксономия результатов обучения Знания: способность к идентификации, сопоставлению и классификации элементов

Таксономия результатов обучения

Знания: способность к идентификации, сопоставлению и классификации элементов смысловой

структуры теоретического материала;
Умения: способность осознанно применять знания для выполнения простых теоретических и/или практических действий;
Навыки – умения, доведенные до автоматизма;
Компетенции: способность к решению задач в профессиональной сфере на базе совокупности полученных знаний, умений и навыков.

Компетенции

Знания

Умения

Навыки

Слайд 3

Результаты обучения, измеримые средствами компьютерного контроля знания, полученные в процессе самостоятельной

Результаты обучения, измеримые средствами компьютерного контроля

знания, полученные в процессе самостоятельной работы

с компьютерными учебниками;
умения и навыки, полученные при помощи тренажерных компонентов материала и содержащие в себе существенную деятельностную составляющую (в меньшей степени );
Компетенции как синтетический результат не могут быть достоверно измерены процедурами компьютерного контроля.
Слайд 4

Преимущества компьютерной формы контроля объективность (при условии корректной формулировки контрольного задания);

Преимущества компьютерной формы контроля

объективность (при условии корректной формулировки контрольного задания);
регистрация и

долговременное хранение результатов, обеспечивающее возможность последующей статистической обработки;
возможность использования в формулировке задания элементов «виртуальной реальности», доступных только благодаря компьютерным технологиям;
возможность адаптации набора вопросов к уровню подготовки студента.
Слайд 5

Классификация заданий компьютерного контроля (вопросов) Вопросы закрытого типа (на конструирование ответа

Классификация заданий компьютерного контроля (вопросов)

Вопросы закрытого типа (на конструирование ответа из

предопределенных элементов)
На выбор
На сопоставление
На упорядочение
Вопросы открытого типа (на сопоставление ответа, подготовленного студентом, с эталоном):
Числовым
Строковым
текстовым
Слайд 6

Примеры вопросов закрытого типа Используя курсор мыши, укажите, в каком порядке

Примеры вопросов закрытого типа

Используя курсор мыши, укажите, в каком порядке транспортные

средства, движущиеся на разрешающий сигнал светофора, проедут через перекресток
Слайд 7

Примеры вопросов открытого типа

Примеры вопросов открытого типа

Слайд 8

Вариации формы представления контрольных заданий Слайдер Последовательность кликов Drag’n’drop

Вариации формы представления контрольных заданий


Слайдер

Последовательность кликов

Drag’n’drop

Слайд 9

Методические рекомендации по разработке вопросов простота и однозначность формулировки задания (не

Методические рекомендации по разработке вопросов

простота и однозначность формулировки задания (не следует

использовать слова, допускающие неоднозначную трактовку, например, «часто», «иногда»);
проверка позитивных знаний (не следует использовать отрицание в формулировке задания);
оптимальное количество элементов ответа (от 4 до 6);
наличие эффективных дистракторов (неверных, отвлекающих от правильного, но правдоподобных вариантов ответа);
независимость заданий (ответ на один вопрос не должен содержать подсказки для ответа на другой);
разумная сложность заданий (следует избегать как тривиальных, так и чрезмерно сложных вопросов).
Слайд 10

Технология разработки процедур контроля в редакторе ГИПЕРТЕСТ Добавление процедуры контроля в тематическую структуру учебника:

Технология разработки процедур контроля в редакторе ГИПЕРТЕСТ

Добавление процедуры контроля в тематическую

структуру учебника:
Слайд 11

Технология разработки процедур контроля в редакторе ГИПЕРТЕСТ Настройка параметров процедуры контроля:

Технология разработки процедур контроля в редакторе ГИПЕРТЕСТ

Настройка параметров процедуры контроля:

Слайд 12

Технология разработки процедур контроля в редакторе ГИПЕРТЕСТ Наполнение процедуры контроля: Добавление вопросов; Добавление групп вопросов.

Технология разработки процедур контроля в редакторе ГИПЕРТЕСТ

Наполнение процедуры контроля:
Добавление вопросов;
Добавление групп

вопросов.
Слайд 13

Технология разработки процедур контроля в редакторе ГИПЕРТЕСТ Настройка параметров вопроса

Технология разработки процедур контроля в редакторе ГИПЕРТЕСТ

Настройка параметров вопроса

Слайд 14

Технология разработки процедур контроля в редакторе ГИПЕРТЕСТ Формулировка вопроса:

Технология разработки процедур контроля в редакторе ГИПЕРТЕСТ

Формулировка вопроса:

Слайд 15

Технология разработки процедур контроля в редакторе ГИПЕРТЕСТ Конструирование вопроса закрытого типа: добавление элемента ответа

Технология разработки процедур контроля в редакторе ГИПЕРТЕСТ

Конструирование вопроса закрытого типа: добавление

элемента ответа
Слайд 16

Технология разработки процедур контроля в редакторе ГИПЕРТЕСТ Формулировка варианта ответа:

Технология разработки процедур контроля в редакторе ГИПЕРТЕСТ

Формулировка варианта ответа:

Слайд 17

Технология разработки процедур контроля в редакторе ГИПЕРТЕСТ Предварительный просмотр вопроса:

Технология разработки процедур контроля в редакторе ГИПЕРТЕСТ

Предварительный просмотр вопроса:

Слайд 18

Технология разработки процедур контроля в редакторе ГИПЕРТЕСТ Определение вариантов ответа

Технология разработки процедур контроля в редакторе ГИПЕРТЕСТ

Определение вариантов ответа

Слайд 19

Технология разработки процедур контроля в редакторе ГИПЕРТЕСТ Редактирование вариантов ответа:

Технология разработки процедур контроля в редакторе ГИПЕРТЕСТ

Редактирование вариантов ответа:

Слайд 20

Создание вопроса на базе интерактивной картинки – шаг 1 Выбор типа вопроса:

Создание вопроса на базе интерактивной картинки – шаг 1

Выбор типа вопроса:

Слайд 21

Создание вопроса на базе интерактивной картинки – шаг 2 Выбор фоновой картинки:

Создание вопроса на базе интерактивной картинки – шаг 2

Выбор фоновой картинки:

Слайд 22

Создание вопроса на базе интерактивной картинки – шаг 3 Определение регионов (активных зон):

Создание вопроса на базе интерактивной картинки – шаг 3

Определение регионов (активных

зон):
Слайд 23

Создание вопроса на базе интерактивной картинки – шаг 4 Спецификация региона: Выделен регион «прямоугольник»

Создание вопроса на базе интерактивной картинки – шаг 4

Спецификация региона:

Выделен регион

«прямоугольник»
Слайд 24

Создание вопроса на базе интерактивной картинки – шаг 5 Выбор типа вопроса:

Создание вопроса на базе интерактивной картинки – шаг 5

Выбор типа вопроса:

Слайд 25

Создание вопроса на базе интерактивной картинки – шаг 6 Параметризация вопроса (при нажатой Ctrl):

Создание вопроса на базе интерактивной картинки – шаг 6

Параметризация вопроса (при

нажатой Ctrl):
Слайд 26

Создание вопроса на базе интерактивной картинки – шаг 7

Создание вопроса на базе интерактивной картинки – шаг 7


Слайд 27

Создание вопроса на базе интерактивной картинки – шаг 8 формулировка задания:

Создание вопроса на базе интерактивной картинки – шаг 8

формулировка задания:

Слайд 28

Создание группы вопросов Группа – это множество вопросов оценивающих одну и

Создание группы вопросов

Группа – это множество вопросов
оценивающих одну и ту же

составляющую профиля,
имеющих одинаковую сложность,
заданный процент которых случайно выбирается для предъявления.
Слайд 29

Способы расширения функциональности компьютерного контроля: внешние интерфейсы обработчиков в ГИПЕРТЕСТ Внешний

Способы расширения функциональности компьютерного контроля: внешние интерфейсы обработчиков в ГИПЕРТЕСТ

Внешний обработчик

– веб-сервис (доступная в Интернет библиотека программ) со стандартными интерфейсными операциями:
Задать вопрос (вернуть страницу, содержащую вопрос);
Оценить ответ (вернуть нормированное значение оценки: 0..1);
ГИПЕРТЕСТ выполняет функции посредника (транслирует ответы)
Слайд 30

Сценарий взаимодействия среды ГИПЕРТЕСТ с обработчиком заданий по программированию

Сценарий взаимодействия среды ГИПЕРТЕСТ с обработчиком заданий по программированию

Слайд 31

Обработчик заданий по программированию: выдача задания

Обработчик заданий по программированию: выдача задания


Слайд 32

Обработчик заданий по программированию: диагностика ответа

Обработчик заданий по программированию: диагностика ответа

Слайд 33

Контроль навыков решения расчетных задач Расчетная задача – это задача, которая

Контроль навыков решения расчетных задач

Расчетная задача – это задача, которая состоит

из нескольких элементарных шагов и имеется несколько вариантов последовательности их применения для получения результата:
Слайд 34

Контроль навыков решения расчетных задач: интерфейс студента

Контроль навыков решения расчетных задач: интерфейс студента

Слайд 35

Метрология компьютерного контроля результатов обучения Компьютерные тесты как инструменты измерения результатов

Метрология компьютерного контроля результатов обучения

Компьютерные тесты как инструменты измерения результатов обучения

нуждаются в поверке, в ходе которой определяются значения таких показателей, как:
Надежность;
Валидность;
Дискриминативность.
Слайд 36

Надежность тестов Мера надежности – коэффициент корреляции результатов двух последовательных применений

Надежность тестов

Мера надежности – коэффициент корреляции результатов двух последовательных применений теста

для контроля знаний одной и той же группы студентов.
Здесь X и Y – выборки результатов первого и повторного тестирования; М(*) – математические ожидания соответствующих величин; , – средние квадратические отклонения по выборкам
Слайд 37

Валидность тестов Содержательная: Задания контроля соответствуют содержанию учебника; Критериальная: Результаты компьютерного

Валидность тестов

Содержательная:
Задания контроля соответствуют содержанию учебника;
Критериальная:
Результаты компьютерного контроля коррелируют с результатами

других форм контроля.