'

ПРИМЕНЕНИЕ ОНТОЛОГИЙ ПРИ ПОСТРОЕНИИ ТЕСТОВ ДЛЯ ПРОВЕРКИ УРОВНЯ ПОДГОТОВКИ ОБУЧАЕМЫХ

Понравилась презентация – покажи это...





Слайд 0

ПРИМЕНЕНИЕ ОНТОЛОГИЙ ПРИ ПОСТРОЕНИИ ТЕСТОВ ДЛЯ ПРОВЕРКИ УРОВНЯ ПОДГОТОВКИ ОБУЧАЕМЫХ Малиновский В.П. (МЭИ)


Слайд 1

План доклада Тестирование как способ оценки уровня усвоения материла Система тестирования из трех тестов Онтологический подход к разработке тестов Тест-«конструктор» «Динамический» тест Подготовка вопросов для тестов


Слайд 2

Тестирование Формализованная проверка уровня знаний предмета Простота использования и обработки результатов Легкость в программировании


Слайд 3

Проблематика Проверка способности обучаемых к обобщению и заданию проблемных вопросов, а также наличия целостного представления о предмете обучения Развитие навыков системного мышления


Слайд 4

Направление исследований Проверка способности построения целостной картины изучаемого материала Проверка способности обучаемого к обобщению


Слайд 5

Система тестирования «Классический» тест – множество вопросов {qi} Тест-«конструктор» – множество вопросов {qсi} «Динамический» тест – множество вопросов {qdi}


Слайд 6

Онтологический подход Материал по предмету организован при помощи онтологии, под которой понимается совокупность понятий, связанных между собой по правилам формальной логики.


Слайд 7

Расширенная модель онтологии X – множество концептов (понятий) R – множество отношений (род, вид, признак, основание деления) E – множество оценок (уровень освоения материала пользователем)


Слайд 8

Множество оценок E ei=0. В начале работы пользователя с системой все концепты имеют минимальную оценку. ei=1. Эта оценка, следующая после минимальной, присваивается концептам, которые пользователь или тьютор выбрали как целевые. Концепты, имеющие оценку 1, служат основой для работы системы вывода. ei=2. Оценка показывает, что пользователь уже начал освоение концепта, однако по какой-либо причине не прошел тестирование. ei=3. Оценка отражает, что пользователь успешно прошел только «классический» тест. ei=4. Оценка показывает, что пользователь прошел два или три теста.


Слайд 9

Модель тестов Каждому концепту из множества X присваивается по одному вопросу для каждого вида теста. xi -> (qi, qсi, qdi) Тест генерируется на основе вопросов, присвоенных подмножеству {x1,…,xn} концептов, изученных обучаемым.


Слайд 10

«Классический» тест Не используются элементы множества R (отношения между понятиями), и, как следствие, порядок вывода вопросов случаен Не используется возможность работы пользователя с вопросами А Чишка любит Зая больше всех на свете!!!!!


Слайд 11

Тест-«Конструктор» Проверка способности обучаемого к построению целостной картины учебного материала. Предполагается, что обучаемый обладает такой картиной, если он может задать по этому материалу связанную последовательность вопросов. Для проверки обучаемому сразу показывается весь набор вопросов теста. Из всех вопросов предлагаемого набора обучаемый составляет некоторую последовательность. Правильность этой последовательности эквивалентна наличию на сети концептов непрерывной цепи, соответствующей всем вопросам, упорядочиваемым обучаемым. Если последовательность признана системой правильно, то обучаемому предлагается ответить на вопросы как в «классическом» тесте.


Слайд 12

Модель теста-«конструктора» Предполагается, что до тестирования пользователь освоил некоторый материал, описываемый непрерывной последовательностью концептов из предметной онтологии O, при этом каждому концепту соответствует некоторый вопрос, характерный для данного вида тестирования


Слайд 13

Модель теста-«конструктора» Предположим, что обучаемый освоил материал, описываемый цепью из пяти концептов. Тогда результат его упорядочивания вопросов может быть, например, таким: Последовательность, созданная обучаемым, будет правильной, если для вопросов соблюдается следующее условие:


Слайд 14

Обоснование теста-«конструктора» Проверка способности строить и удерживать в уме целостную картину изучаемого фрагмента материала опирается на то, что обучаемый при работе с вопросами теста должен не только знать концепты независимо друг от друга, но также и понимать отношения, связи, между ними. В качестве показателя того, насколько у обучаемого развита указанная способность, используется количество попыток, за которые обучаемый построил правильную последовательность.


Слайд 15

«Динамический» тест Этот тест предназначен для проверки способности обучаемого к обобщению. Он опирается на предположение, что обучаемый должен уметь различать общие и частные вопросы по учебному материалу. Таким образом, обучаемый начинает с наиболее частного вопроса, и должен, выбирая все более и более общие вопросы, дойти до самого общего. Этот процесс имеет итерационный характер, при этом на каждом шаге обучаемый видит несколько вопросов, из которых ему нужно выбрать один правильный. Если обучаемый выбирает правильный вопрос, то ему предлагается ответить на него. После этого обучаемый получает новую порцию вопросов.


Слайд 16

Модель «динамического» теста Для «динамического» теста важно, чтобы во фрагменте онтологии, который соответствует изученному материалу, была непрерывная иерархия понятий, одно из которых является самым общим (категория), а другое самым частным. Менеджер Начальник отдела Руководитель отдела маркетинга Менеджер проекта


Слайд 17

Модель задачи пользователя Идеальный маршрут пользователя представляет собой последовательность вопросов, соответствующих концептам На каждом шаге обучаемый должен ответить на один вопрос, предварительно выбрав его из нескольких. Если обучаемый на всех шагах выбирает вопрос, принадлежащий указанной последовательности, то он проходит тест за минимальное количество итераций. Правильным всегда является вопрос более общий, по отношению к отвеченному на предыдущем шаге.


Слайд 18

Первый шаг «динамического» теста На первом шаге обучаемый выбирает вопросы из списка, который содержит вопрос qlo, а также вопросы из некоторой окрестности концепта xlo, соответствующего вопросу qlo (за исключением вопроса qlo+1). xlo+1 xlo


Слайд 19

Шаг «динамического» теста На следующих шагах обучаемому также предлагается перечень вопросов на выбор, в который входят qlo+m и вопросы из его окрестности (за исключением вопросов qlo+m-1 и qlo+m+1. xlo+4 xlo+5 xlo+3


Слайд 20

Пользователь ошибается Если пользователь не выбирает правильный вопрос, то он «сбивается» с пути. При этом обучаемому не сообщается об этом, и она продолжает работать в обычном режиме. Обучаемый должен «вернуться» на правильный маршрут, чтобы справиться с заданием. xlo+m


Слайд 21

Обоснование «динамического» теста Проверка способности обучаемого к обобщению проверяется за счет того, он должен осознавать, что следующий правильный вопрос является более общим к освоенному материалу, чем предыдущий. В качестве показателя оценки способности обучаемого является время, за которое он справляется с заданием.


Слайд 22

Подготовка вопросов для тестов Вопросы разрабатываются исходя из понятийной структуры предметной области. Существенным является способность выделять существенный признак, который определяет место уровень данного понятия в иерархии.


Слайд 23

«Конструктор» «Динамический»


×

HTML:





Ссылка: