Создание электронных учебных материалов

При подготовке тестовых заданий, независимо от их вида, следует выполнять нижеперечисленные рекомендации:

1. Содержание задания должно отвечать программным требованиям и отражать содержание обучения.
2. Вопрос должен содержать одну законченную мысль.
3. При составлении вопросов следует особенно внимательно использовать слова "иногда", "часто", "всегда", "все", "никогда".
4. Вопрос должен быть четко сформулирован, при этом следует избегать слов "большой", "небольшой", "малый", "мало", "много", "меньше", "больше" и т.д.
5. Стараться не использовать отрицание в основной части вопроса.
6. Предпочтительно использовать длинный вопрос и короткий ответ.
7. Сокращения в формулировках крайне нежелательны. Однако, если сокращение стало нарицательным (колхоз, ликбез, НАТО) или полунарицательным, т.е. более узнаваемым в сокращении, чем в полном расшифрованном виде (НЭП), то в этих случаях сокращения допустимы. Также допустимы сокращения в случаях, когда их расшифровка значительно увеличивает размер варианта ответа, например, ст.213 УК РФ.
8. Неправильные ответы должны быть разумны, умело подобраны, не должно быть явных неточностей, подсказок.
9. Не следует задавать вопросы с подвохом (скорее всего в заблуждение будут введены наиболее способные или осведомленные обучающиеся)
10. Все варианты ответов должны быть грамматически согласованы с основной частью задания, в любом случае следует использовать короткие, простые предложения, без зависимых или независимых оборотов.
11. Ответ на поставленный вопрос не должен зависеть от предыдущих ответов.
12. Правильные и неправильные ответы должны быть однозначны по содержанию, структуре, общему количеству слов и правдоподобны.
13. Если ставится вопрос количественного характера, то ответы к нему должны располагаться упорядоченно от меньшего к большему или наоборот; в том случае, если дистракторы представлены в виде слов, текста, их следует располагать в алфавитном порядке.
14. Избегать использования вариантов ответов "ни один из перечисленных" и "все перечисленные".
15. Избегать повторения вариантов ответов.
16. Варианты ответов всегда должны соответствовать формулировке вопроса (падеж, время и пр., а главное – содержание).
17. Место правильного ответа не должно быть определено, а формироваться в случайном порядке.

Для формирования наибольшей наглядности тестового контроля рекомендуется максимально использовать графический материал. По завершении составления тестовых вопросов автору (авторам) необходимо указать следующие обязательные параметры:

• название теста (для какой дисциплины он предназначен) возможно с датой разработки или номером версии;
• общее число тестовых вопросов и рекомендуемое число вопросов теста, выдаваемых одному студенту;
• шкалу оценки знаний и соответствующее ей процентное содержание правильных ответов.
• время, отведенное на выполнение теста, но не более 45 – 90 минут (среднее время до момента утомления).
• иногда, помимо общего времени на выполнение теста, указывается и максимальное время для ответа на один вопрос.
• порядок прохождения теста – с возможностью пропуска тестовых вопросов и последующего возврата к ним, или без таковой.
• ключи к тестовым вопросам, т.е. правильные ответы к тестам, которые необходимы для создания электронной системы тестирования.

При использовании вопросов закрытого типа очень важно не допустить возможности угадывания правильных ответов. Вероятность угадывания "" для вопроса типа "один из нескольких" составляет "", где – количество альтернатив вопроса этого типа. При этом возникает проблема количества и содержания неправильных ответов, которые принято называть дистракторами. С одной стороны дистракторы должны быть достаточно правдоподобными, чтобы тестируемый не мог интуитивно выбрать правильный ответ, а с другой стороны не должны провоцировать тестируемого на неправильный ответ. Ведь конечная цель тестирования определить объективный уровень знаний обучаемого. Также нецелесообразно строить вопросы по негативному принципу, т.е. предлагать тестируемому выбрать неправильный ответ из предложенных. Это обусловлено тем, что обычно обучение сводится к изучению и анализу правильных знаний, а неправильные знания не являются предметом изучения. При составлении вопросов первого вида (один правильный ответ) существенную роль играет количество дистракторов. При малом их количестве () возрастает вероятность угадывания правильного ответа, а, следовательно, уменьшается оцениваемый диапазон. При большом количестве дистракторов () возрастает громоздкость вопроса и затраты времени на поиск правильного ответа. Оптимальными с количественной точки зрения являются .

Для каждого вида тестовых заданий существуют рекомендации: что предпочтительно делать, а чего делать не рекомендуется. Ниже перечислены основные такие рекомендации:

• не рекомендуется использовать вопросы c числом альтернатив меньше 4 и больше 8;
• не рекомендуется использовать вопросы при одной правильной альтернативе;
• при использовании вопросов с множественным выбором должно соблюдаться условие , т.е., например, при общем числе альтернатив 5 число правильных альтернатив не должно превышать 3;
• не рекомендуется использовать формулировки вопросов с отрицательными ответами;
• в тексте вопроса на соответствие всегда следует указывать наименование понятий (столбцов) между которыми устанавливается соответствие;
• также в вопросах на соответствие не рекомендуется использовать в левом столбце больше 5 альтернатив, так как в этой ситуации число альтернатив правого столбца (с учетом ) становится чрезмерно большим;
• в вопросах открытого типа необходимо использовать принцип не отрицательности,
• в формулировке вопроса открытого типа необходимо указывать, в какой языковой раскладке, в каком регистре, в каком падеже, в каком лице и т.д. необходимо вводить ответ;
• для открытого типа не рекомендуется использовать больше трех окон ввода, если это не проверка правописания;
• не рекомендуется использовать совместно в одном сеансе тестирования вопросы открытого и закрытого типа из-за существенной разницы в вероятностях угадывания правильных ответов.

В дополнении к сказанному выше проиллюстрируем некоторые сформулированные тезисы на конкретных примерах. На рис. 2.7 представлены примеры прохождения теста по русскому языку и два примера заданий вида множественного выбора и одно задание вида выбор единственного ответа.

Рис. 2.7.

В заключение надо отметить, что при разработке методов оценки знаний с помощью систем тестирования в вузах все чаще используется назначение весовых коэффициентов (индексов сложности) для всех тестовых заданий и вариантов ответов на конкретный вопрос. С помощью весовых коэффициентов определяется степень сложности вопроса по отношению к остальным вопросам, задается максимальное количество баллов, которое студент может получить при правильном ответе на вопрос и возможное общее количество баллов за весь ответ, т.е. в конечном счете устанавливается количественная и качественная (для установленной шкалы оценок) характеристика знаний. Весовые коэффициенты определяются с помощью экспертного оценивания. Количество экспертов не регламентируется, но при увеличении числа экспертов достоверность назначаемых весовых коэффициентов повышается, хотя на практике такие коэффициенты часто расставляет автор тестовых заданий.

Контрольные вопросы для самоподготовки

1. Что представляет собой учебный план?
2. Каковы основные элементы УМКД?
3. Из каких четырех частей состоит УМКД?
4. Является ли УМКД ЭОР?
5. Является ли учебный план ЭОР?
6. По каким параметрам оценивается текст ЭОР?
7. Какие форматы наиболее часто используются для рисунков в ЭОР?
8. Что такое компьютерные тренажеры?
9. Назовите основные функции компьютерных тренажеров.
10. На каких этапах учебного процесса может использоваться компьютерное тестирование?
11. Какие типы тестовых заданий Вы знаете?
12. Назовите шесть видов тестовых заданий.
13. Что такое тестовое задание открытого типа?
14. Что такое тестовое задание закрытого типа?
15. Входит ли итоговый тест по дисциплине в состав УМКД?