Как правильно составить тест на соответствие

Формат тестов на установление соответствий позволяет учащимся связать слово, предложение или фразу в одном столбце с соответствующим словом, предложением или фразой во втором столбце. 

Элементы в первом столбце называются предпосылками, а во втором столбце  – ответами. Идея заключается в том, чтобы ученики сопоставляли предпосылку слева с заданным ответом справа. Как правило, элементы в левом столбце (A) пронумерованы, а элементы в столбце справа (Б) помечены заглавными буквами.

Многие инструменты для разработки тестов и современные LMS (в том числе и  «АнтиТренинги») имеют в своем функционале готовые шаблоны тестовых заданий на соответствие. Ученики  могут перетаскивать ответы из правого столбца, совмещая их в левом столбце с нужной предпосылкой, или вводить буквы из столбца Б в столбец A.

Когда использовать тесты на соответствие

Формат тестовых заданий на установление соответствия позволяет менять темп, особенно в рамках самостоятельной проверки и оценки деятельности. Они эффективны, когда вам нужно измерить способность учащегося идентифицировать связи или ассоциации между похожими предметами/категориями/понятиями. 

Данный тип тестов работает лучше всего, когда содержание курса имеет много параллельных концепций, например:

• Термины и определения
• Объекты или изображения
• Символы и имена собственные
• Причины и следствия
• Сценарии и ответы
• Принципы и сценарии, к которым они применяются

Правила создания тестов на соответствие

Если вы решили использовать данный формат тестов, найдите время, чтобы продумать и создать достоверные и надежные элементы.

Вот несколько рекомендаций:

1. Формулируйте тестовые вопросы из 2 частей

Ваши четкие указания в начале каждого вопроса должны состоять из двух частей: 

• как найти соответствие 
• основа для сопоставления ответа с предпосылкой

Вы также можете указать, можно ли повторно использовать элементы, но часто готовые шаблоны этого не позволяют.

Пример: перетащите каждое название профессии в столбце Б к лучшему определению в столбце A. Никакие элементы не могут использоваться более одного раза.

2. Параллельное содержание

В рамках одного тестового элемента используйте общий подход, например, все термины и определения или все принципы и сценарии, к которым они применяются.

3. Правдоподобные ответы 

Все варианты в столбце Б должны быть правдоподобными ответами на предпосылки в столбце А. В противном случае тест теряет часть своей надежности, потому что некоторые ответы будут слишком простыми и ученикам будет легче догадаться какие варианты верные.

4. Бестолковые и глупые варианты

Убедитесь, что ваши предпосылки не включают намеки через грамматику (например, подразумевающие, что ответ должен быть множественным числом) или намеки в выборе слова (например, использование самого термина в определении).

5. Больше ответов

В идеале вы должны подобрать больше ответов, чем предпосылок, чтобы остальные (лишние) ответы не работали как подсказки к правильному ответу. При использовании шаблона это не всегда возможно.

6. Ограниченное количество элементов в левом столбце предпосылок

Избегайте длинного списка предпосылок в левом столбце. Сократите их количество до 6 пунктов. Возможно в вашем случае лучшим вариантом будет даже меньшее количество, в зависимости от характеристик вашей аудитории.

7. Один правильный ответ

Каждая предпосылка должна иметь только один правильный ответ. На первый взгляд очевидная вещь, но проверьте несколько раз, чтобы убедиться, что каждый ответ работает только для одной предпосылки.

Преимущества и недостатки данного типа тестов

Формат тестов на установление соответствий позволяет охватить больше контента в одном вопросе, чем при множественном выборе. Поэтому он отлично подходит для периодической проверки знаний. 

Данный тип тестовых заданий также является очень эффективным подходом к тестированию и может обеспечить отличное объективное измерение. Кроме того, он дает возможность разнообразить ваше обучение и систему его оценивания.

Недостатком является тенденция использовать этот формат для простого запоминания информации. Взрослые учащиеся часто нуждаются в практике и проверке навыков мышления более высокого порядка, таких как решение проблем. 

Не ограничивайте использование этого формата только для актуализации знаний. Попробуйте найти способы использовать установление соответствий для анализа и практического применения. Например, представить краткий сценарий и запросить лучшее решение.

Задания на установление соответствия

В
заданиях на установление соответствия
проверяется знание связей между
элементами двух множеств. Такие задания
позволяют проверить так называемые
ассоциативные знания — знания о взаимосвязи
определений и фактов, форм и содержания,
о соотношении между различными предметами,
свойствами, законами, формулами, датами.

Обычно
слева приводятся элементы задающего
множества, справа — элементы, подлежащие
выбору. Каждое задание завершается
строкой ответов, в которой испытуемый
проставляет на месте прочерков буквы,
соответствующие выбранным элементам
из правого множества.

Общие требования
к заданиям на установление соответствия:

• задание
формулируется так, чтобы все содержание
можно было выразить в виде двух множеств
(столбцов) с соответствующими названиями,
обобщающими все элементы столбца;

• правый
столбец должен содержать хотя бы
несколько дистракторов; • все дистракторы
в одном задании должны быть равновероятно
правдоподобны;

• элементы столбцов
должны быть выбраны по одному основанию
для включения только гомогенного
материала в каждое задание теста;

• всё задание
необходимо располагать на одной странице,
не допуская переноса отдельных элементов.

Принципы композиции
заданий на установление соответствия:

1.
Принцип
фасетности
— основной
принцип композиции заданий данной
формы. Он
позволяет
заменять основные элементы задания,
активизируя самостоятельную работу
студентов, и исключить условия для
списывания.

Пример:

Центры происхождения
КУЛЬТУРА

культурных растений

1) Среднеазиатский
А) кукуруза

2) Африканский
Б) картофель

3)
Южноамериканский В) арбуз

Г)
виноград

Д)горох

Е)
кофе

Ответы:
1____,2____,3____

Применение некоторых
заданий повышает учебный интерес.
Например, задание по комедии А.С.Грибоедова
«Горе от ума»;

Пример:

РЕПЛИКИ
ПЕРСОНАЖИ

1)
Счастливые часов не наблюдают
А) Фамусов

2)
Ох! Басни — смерть моя!
Б) Молчалин

3)
Ей сна нет от французских книг,
В) Чацкий

А
мне от русских больно спится.
Г) Софья

4)
Дома новы, а предрассудки стары.
Д) Хлестова

5)
И впрямь с ума сойдешь от этих
Е) Загорецкий

от
одних от пансионов, школ,
Ж) Скалозуб

лицеев
… 3)
Репетилов

Ответы:
1___, 2___, 3 __ , 4___, 5___.

Основные элементы
композиции заданий на соответствие

Основные элементы
композиции заданий этой формы: инструкция,
названия двух столбцов, элементы этих
столбцов с номерами и буквами, строку
ответа.

Инструкция:
УСТАНОВИТЕ СООТВЕТСТВИЕ

Названия
двух столбцов должны
относиться ко всем элементам представляемого
класса, т.е. элементы столбца должны
полностью соответствовать его названию.
По возможности, названия столбцов должны
быть короткими и точными, понятными для
всех испытуемых с первого чтения.

Элементы
столбцов выражают
содержание задания. Как уже отмечалось,
число элементов в правом столбце должно
быть примерно в два раза больше числа
элементов в левом столбце. Для идентификации
элементов используются номера
(для элементов
левого столбца) и буквы
(для элементов
правого столбца).

Строка
ответов композиционно
завершает задание и указывает испытуемому
место, куда нужно заносить ответы.

Оценка.
При оценке
заданий на установление соответствия
используются различные подходы. При
первом подходе оценка в 1 балл дается
за правильное выполнение всего задания,
в противном случае — 0 баллов, даже за
одну допущенную ошибку. При другом
подходе по одному баллу дается за каждое
правильно установленное соответствие.
Третий подход: за все правильные ответы
давать 2 балла, за одну допущенную ошибку
— 1 балл, за две ошибки и более — О баллов.

Если
тест состоит из заданий разных форм, то
лучше использовать первый подход к
оценке: за каждое правильно выполненное
задание — независимо от формы — давать
1 балл. Исключения допускаются, если
есть основания считать задания на
установление соответствия более важными
с точки зрения проверки знания учебной
дисциплины, чем задания других форм.

Основная сфера
применения заданий на соответствие —
это текущий и тематический контроль
знаний. Также они хорошо подходят для
самоподготовки и самоконтроля. Значительно
реже они используются при аттестационных
мероприятиях.

Задания на
установление правильной последовательности

Задания
на установление правильной последовательности
предназначены для оценки уровня владения
последовательностью действий, процессов
и т.д. В задании приводятся в произвольном
случайном порядке действия, процессы,
элементы, связанные с определенной
задачей. Испытуемый должен установить
правильный порядок предложенных действий
и указать его с помощью цифр в специально
отведенном для этого месте (как правило,
в прямоугольниках, стоящих слева перед
каждым элементом задания).

Можно выделить
несколько вариантов применения таких
заданий.

1) последовательность
исторических событий.

2) последовательность
технологических действий и операций.

3) последовательность
различных процессов.

4) цепочка умственных
действий, образующая систему знаний,
умений, навыков и представлений.

Инструкция
к заданиям
на установление правильной последовательности
имеет вид:

Пример:
УСТАНОВИТЕ ПРАВИЛЬНУЮ ПОСЛЕДОВАТЕЛЬНОСТЬ.
СОБЫТИЙ ФЕВРАЛЯ-ОКТЯБРЯ 1917 Г.

—
VI
съезд РСДРП (б)

— отречение царя
Николая 11

— приезд Ленина

— создание
Петроградского совета

— взятие Зимнего
дворца

— Корниловский
мятеж

— ликвидация
двоевластия

—
II
съезд Советов

С
помощью заданий этой формы можно
проверять знание не только исторического
процесса, но и знание литературного,
художественного, лингвистического.

Задания
на установление правильной последовательности
особенно эффективны на заключительной
стадии профессиональной подготовки,
что объясняется важной ролью алгоритмов
в профессиональной деятельности. Цель
введения таких заданий в учебный процесс
— формирование алгоритмического мышления
и алгоритмических знаний, умений и
навыков. Алгоритм
представляет
собой систему четких правил упорядоченной
деятельности. Основные требования к
алгоритму: он должен быть понятен и
доступен учащемуся, корректен с точки
зрения цели и содержания, однозначен
по трактовке и результативен в процессе
осуществления заданного числа шагов.
При этом однозначность предполагает
наличие только одного алгоритма,
соответствующего правильному ответу.

Задания на
установление правильной последовательности
помогают решать трудную задачу
формирования структуры знаний. Дело в
том, что такие задания сложнее заданий
других форм. Поэтому, если испытуемые
знают правильные ответы на такие трудные
задания, то они должны знать ответы и
на предыдущие, более легкие задания.
Это и есть признак правильной структуры
знаний.

Пример: РАЗБОР
СЛОВА ПО СОСТАВУ

— выделить суффикс

— выделить корень

— найти основу

—
подобрать однокоренные слова

— выделить окончание

— выделить приставку

Элементы композиции
заданий на установление правильной
последовательности

К элементам
композиции заданий данной формы относят

Инструкцию
к заданию, название задания, его содержание
и место для ответов.

Из
названия
задания испытуемый
узнает, о чем его спрашивают, и знание
чего он должен продемонстрировать.
Ключевое слово в названии лучше писать
и именительном падеже.

Содержание
задания включает
в себя ранжируемые элементы.

Повторим,
что задания этого типа проверяют не
все, а только определенные знания:
алгоритмические, процессуальные,
процедурные, технологические (в той
части, которая связана с последовательностью
операций).

Место
для ответов —
это прямоугольники, нарисованные слева,
против катания каждого элемента. В них
нужно проставить соответствующие цифры
(ранги).

В
самом задании элементы ставятся в
случайном порядке. Окончания всех слов
лучше писать в именительном падеже,
чтобы испытуемые не могли угадать
правильный ответ по окончаниям слов.

Оценка
за выполнение
задания рассматриваемой формы может
варьироваться в зависимости от его
важности и трудности. Однако, преимущественно
используется дихотомическая оценка: 1
балл дается за правильную расстановку
всех рангов в задании, 0 баллов — при
ошибке в ответе. Если первый ответ
определен неправильно, то неправильно
определяются и другие ответы.

Задания на
установление правильной последовательности
довольно специфичны, содержание многих
дисциплин не поддается трансформации
в эту форму.

Соседние файлы в предмете [НЕСОРТИРОВАННОЕ]

• #
• #
• #
• #
• #
• #
• #
• #
• #
• #
• #

Тесты выполняют одновременно целый ряд функций:
1. Контролирующую;
2. Обучающую;
3. Развивающую;
4. Воспитывающую;
5. Диагностическую;
6. Прогностическую.

Тесты можно использовать как на любом этапе урока, так и так и при изучении
нового материала, его закреплении и обобщении и при итоговом контроле.

При изучении нового материала тесты применяются для организации
самостоятельной работы учащихся, при этом тестовое задание может не только
опираться на знания, полученными учащимися на предыдущих уроках, но иметь
поисковый, эвристический, проблемный характер.

При закреплении или проверки текущего материала используются тесты-минутки
рассчитанные на 10–15 мин урока и содержащие 5–10 вопросов.

При итоговом контроле тестирование проводится довольно часто, при этом тесты
охватывают материал по крупным блокам (определенную тему, раздел). Их выполнение
рассчитано на целый урок. Экзаменационный тест должен охватывать материал всего
курса географии России в 9 классе или экономической и социальной географии мира
в 10–11-х классах. Школьные экзаменационные тесты проводятся, как правило, в
течении 2 часов и содержат от 25 до вопросов и заданий.

Тесты пригодны как для фронтальной, так и для групповой и индивидуальной
работе учащихся. С помощью тестовых заданий и вопросов значительно проще
подобрать материал, для каждого конкретного ученика, соответствующий уровню его
развития, возрастным мотивационным особенностям.

Тесты можно использовать не только на уроке в классе, но и в качестве
домашнего Задания, в отдельных случаях можно предложить учащимся составить
тестовые задания, что научит ребят правильно формулировать вопросы, будет
способствовать формированию умений обобщать и анализировать полученные знания
применять их на практике.

Основными этапами любого тестирования являются:

1. Целеполагание т.е постановка конкретных целей перед тестированием и
   понятных учащимся.
2. Подготовка и сбор информации для составления теста, соответствующей
   школьной программе, учебникам и пройденному материалу.
3. Разработка и конструирование теста, т.е. выбор определенных видов
   тестовых вопросов и заданий с учетом определенных требований:
   надежность, точность, лаконичность;
   недопустимость применения двусмысленных вопросов;
   использование дополнительной литературы, энциклопедий, справочников для
   составления тестов и их решения допустимо лишь для специализированных
   классов и школ, а также для индивидуальной работы с сильными учащимися.
4. Подготовка участников тестирования заключается в мотивации, настрое и
   тренинге.
5. Непосредственно тестирование должно стать одним из видов учебной
   деятельности учащихся.
6. После проведения тестирования наступает обработка теста, т.е. проверка с
   помощью ключа
7. Итогом результатов тестирования должен стать анализ результатов.
8. Публикация результатов тестирования. Учащиеся должны быть ознакомлены с
   результата тестирования, они должны быть допущены к просмотру выполненных
   работ и имеют право на апелляцию.

При всем многообразии тестовых задании можно выделить всего четыре основных
группы тестов:

1. задание на выбор правильного ответа;
2. приведение в соответствие или классификацию объектов;
3. расположение объектов в определенном порядке;
4. “открытые” тесты, где необходимо вписать “пропущенные” слова.

Наиболее простыми при составлении и самыми распространенными видами тестовых
заданий являются тесты-определители, составленные по принципу вопрос – ответ.

1. Тесты – определители с одним правильным ответом.

Сложность данного типа тестового задания зависит, от количества указанных
ответов: два, три и т. д. Например: выделите страну, господствующей религией в
которой является ислам: 1. Ангола, 2. Италия, 3. Пакистан, 4. Канада, 5. Перу,
6. Фиджи.

Кооперирование – это:

а) выпуск предприятием соответствующей продукции;
6) сосредоточение на одном предприятии технологически последовательно связанных
производств;
в) сосредоточение предприятий на одной территории;
г) объединение предприятий с целью производства единой конечной продукции.

Ли6о наоборот: вопросом является определение, а ответом – само понятие.
Объединение предприятий с целью производства единой конечной продукции – это:

1. специализация;
2. комбинирование;
3. кооперирование;
4. концентрация.

Летом тропические ВМ господствуют:

1) в тропическом климатическом поясе;
2) в тропическом и субтропическом климатических поясах;
3) в тропическом, субтропическом и субэкваториальном климатических поясах.

3. Тесты – определители, где все ответы правильные.

Крупными производителями автомобилей являются:

1) Япония;
2) Западная Европа;
3)США;
4 )все указанные регионы.

В данном списке выделите два региона России, в которых нет городов –
миллионеров:

1. Центральный;
2. Дальневосточный;
3. Западно-Сибирский;
4. Центрально-Черноземный;
5. Волго-Вятский;
6. Северо-Кавказский.

Выделите объекты, относящийся к формам рельефа:

1) холм;
2) ветер;
3) песок;
4) равнина;
5) овраг;
6) гранит.

Выделите объект, не относящийся к Средней Сибири:

1) траппы;
2) Саяны;
3) Таймыр;
4) лиственница;
5) Путорана.

На какой из приведенных диаграмм верно указано соотношение суши и воды на
Земле:

В развитых капиталистических странах ввиду высокого уровня жизни наблюдается
высоки естественный прирост населения.

1)да; 2)нет.

Определите физико-экономический район России по данной характеристике:
занимает большую площадь территории, большая часть которой занята древней
платформой, преобладают плоскогорья, особенностью геологического строения
являются траппы, на большей части территории климат резко – континентальный, на
территории района находится “полюс холода; широко распространены мерзлотно –
таежные почвы и лиственничные леса.

1) Русская равнина;
2) Горы Южной Сибири;
3) 3аподно – Сибирская равнина;
4) Средняя и Севере – Восточная Сибирь.

По данной характеристике определите страну Европы: внутриконтинентальная
страна, федеративная республика, член ЕС, проводит политику постоянного
нейтралитета, столица является крупнейшим городом страны.

———————————————————————————————————

Ответ: Австрия

По списку типичных животных определите природную зону Африки (Горилла,
шимпанзе леопард, карликовый бегемот, окапи, птица – носорог):

1) влажные экваториальные леса;
2) средиземноморская;
3) саванны;
4) пустыни.

12. Определение объекта по списку других объектов без вариантов ответа.
По списку приграничных государств определите страну Азии (Исламабад, Пекин,
Дакка, Катманду).Ответ:

————————————————————————————————————-

Ответ: Индия

Приведите в соответствие горные системы и их геологический возраст:

Ответ: 1-в; 2-а; З-б

Приведите в соответствие формы рельефа и тектонические структуры:

Ответ: 1-в;2-а;3-б;4-д

15. Приведите в соответствие, подразумевающее вариативность правильных
ответов.
Приведите в соответствие климатические пояса и характерные для них ВМ:

Ответ: 1– а;2-а;3-а;4-а,б

16. Тесты на приведение в соответствие. В одном из столбиков есть “лишний”
вариант. Приведите в соответствие отрасли промышленности и факторы их
размещения:

Ответ: 1-б;2-г;3-а;4-б

В отличие от тестовых заданий, предполагающих необходимость самостоятельно
вписать верный ответ, в “открытых” тестах в отдельных случаях не “связан” одним
верным ответом, а имеет право самостоятельного выбора объектов, отвечающим
названным требованиям.

Вставить пропущенные слова. При данной постановке вопроса у тестируемого, как
правило нет самостоятельного выбора – необходимо вписать конкретные слова.
Вставьте пропущенные слова: Низменность – это вид ______, с ____ высотой до __
метров, (равнины, абсолютной, 2000.)

Самостоятельно вписать примеры – данный вид тестового задания подразумевает
полную свободу действий тестируемого.

Назовите три основных государства Азии:

————————————————————————————————

—————————————————————————————————-

на выбор: Бахрейн, Бруней, Кипр, Мальдивские о-ва, Сингапур, Тайвань, Шри –
Ланка, Филиппины, Япония.

Варианты ответов: Чехия, Швейцария, Норвегия, Маскат, Оттава, Берн, Осло,
республика, абсолютная монархия, государство Британского Содружества, унитарное,
федеративное.

Заполните схему, используя следующие слова:

1. Мировой океан;
2. болота;
3. ледники;
4. горные;
5. подземные воды;
6. реки;
7. покровные.
8. моря;
9. заливы.

21. Тесты, связанные с заполнением схемы без вариантов ответов.

Заполните схему:

Используя рисунок 60 на странице 96 (Суханов В.П. Физическая география. 6
класс.) или рисунок 80 на странице 144 (Герасимова Т.П. и Неклюкова Н.П.
География. Начальный курс.).
Определите, сколько выделится воды, если температура воздуха снизится с 20 С до
10 С при условии, что относительная влажность воздуха равнялась 100%: 1) 9 г; 2)
8 г; 3) 17 г.

Определите коэффициент увлажнения, если известно, что в городе Н испаряемость
равна 31 мм. и в течении года выпадает 488 мм. осадков:

Ответ 1,3

Тесты – классификаторы формулируются в виде набора определенных объектов,
и тестируемый должен провести их классификацию по указанному критерию или
выбрать критерий классификации самостоятельно. Данный вид теста наиболее удобен
для установления внутрипредметных или межпредметных связей.

Разделите горные породы, приведенные в данном списке, на три группы:
а) известняк; б) гранит; в) мрамор; г) базальт; д) туф; е) ракушечник; ж) гнейс;
з)галька; и) уголь; к) обсидиан; л) графит; м) доломит.

Проклассифицируйте указанные объекты по природным зонам России и результаты
занесите в таблицу: Лиственница, лемминг, ковыль, бурундук, ягель, песец,
соболь, дрофа, кедр, кролик.

25. Тесты на самостоятельную классификацию.

Сгруппируйте по языковым семьям народы России:

Русские, карелы, татары, осетины, якуты, украинцы, коми, буряты, башкиры,
удмурты.

В каждой паре подчеркните страну, расположенную севернее:

Норвегия – Дания;
Испания – Бельгия;
Чехия – Венгрия;
Швейцария – Германия.

Распределите горные страны по мере увеличения их высоты:

Гималаи – _____ 4
Уральские –____ 1
Альпы – ________2
Кордильеры – ____3

Укажите правильную последовательность причинно – следственных связей:

Развитие земледелия – __________ 4
Агроклиматические ресурсы – ___1
Географическая широта – _______2
Плодородие почв – ____________ 3

В данном списке выделите народ, отличающийся от остальных по религиозному
признаку: Русские, сербы, грузины, греки, поляки

В данном списке выберите ответ отличающийся от остальных: Гранит, базальт,
пемза, обсидиан, мрамор.

Как создать качественный компьютерный тест? Дмитрий Аббакумов, руководитель Лаборатории адаптивных образовательных технологий ВШЭ, делится практическими советами в новом выпуске рубрики.

Задания на установление соответствия

Такие задания содержат два параллельных списка. Первый обычно включает достаточно длинные позиции – это список условий. Испытуемый должен сопоставить каждую позицию из списка условий с позицией из списка ответов. Элементы списка ответов обычно формулируются лаконично. Преимуществами заданий на установление соответствия являются их компактность и возможность охвата большого количества проверяемых знаний. Однако они имеют и недостатки: при их конструировании трудно подобрать однородные списки, а сами задания стимулируют исключительно процессы запоминания фактов.

Задания на установление соответствия требуют очень чётких инструкций. Инструкции должны содержать информацию о том, на каком основании должно устанавливаться соответствие, а также может ли один ответ использоваться дважды или не использоваться вовсе.

Принципы составления заданий:

• Оптимальное задание содержит от 4 до 10 условий.
• По возможности составляйте задания так, чтобы количество условий не равнялось количеству ответов (это позволит сократить риск угадывания на последнем этапе работы с заданием).
• При необходимости организуйте условия в логической последовательности, например, в хронологическом порядке или по алфавиту.

Пример задания на установление соответствия:

(инструкция) Запишите в специальном поле для ответов букву, подходящую для каждого элемента из первого (нумерованного) списка. К каждому элементу из первого списка может относиться один элемент из второго списка.
(формулировка задания) При формировании представления о партнере по общению люди используют четыре основных механизма. В левом списке перечислены их названия, а в правом даны определения. Сопоставьте их между собой.

Задания на установление последовательности

Подобная форма заданий используется, когда требуется оценить знания этапов и событий какого-либо процесса. Эти задания также требуют чёткой инструкции, из которой должно быть понятно, в какой форме нужно фиксировать последовательность. Оптимально, если задание содержит от 3 до 7 элементов. А главным при конструировании таких заданий является то, чтобы используемая последовательность не являлась искусственной (например, известной и понятной только автору задания).

Задания открытой формы

Есть два типа заданий: с коротким ответом и с развернутым ответом. Задания с коротким ответом могут быть организованы как вопросы или как задания на дополнение. Задание-вопрос представляет собой конкретный вопрос, на который можно ответить одним словом, фразой, числом или символом. Задание на дополнение – это неполное утверждение, которое необходимо дополнить одним словом, фразой, числом или символом. Неоспоримым преимуществом заданий с коротким ответом является очень низкая вероятность угадывания. Недостатком является то, что при их конструировании необходимо учесть все варианты, которые могут быть правильными. Для задание с коротким текстовым ответом важно не забыть о нюансах согласования. А для заданий с числовым ответом – о количестве знаков после запятой или интервале значений.

При конструировании заданий с коротким ответом нужно избегать невольных подсказок, когда формулировка вопроса или утверждения наводит на правильный ответ; а также большого количества пропусков, так как тогда может потеряться смысл задания.

Задания с развернутым ответом предполагают, что ответ испытуемого на поставленный вопрос будет содержать несколько предложений или ответом будет законченный короткий текст. Эти задания позволяют оценить навыки интерпретации, анализа и оценки применительно к конкретным ситуациям. Их преимуществом является то, что они сочетают в себе разные мыслительные процессы, дают испытуемому возможность самому конструировать ответ, оценивают и развивают навыки письменной речи. Однако такие задания являются сложными и дорогостоящими с точки зрения проверки. Часто компьютер для таких заданий выполняет лишь функцию сбора ответов, а не их проверки. Для обеспечения объективности необходимо привлечение 2-3 экспертов. Тем не менее, важно отметить, что в настоящее время активно внедряются машинные способы проверки таких заданий, результаты которых сопоставимы с экспертными оценками, например, при проверке эссе в компьютерных тестах на знание английского языка.

Пять советов разработчикам заданий с развернутым ответом:

• Используйте такие задания только в тех случаях, где оценка другими, более объективными способами, не применима.
• Убедитесь, что задание соотносится с целями обучения.
• Для заданий с ограниченным объёмом четко задайте объём и элементы содержания.
• Для заданий со свободным объёмом дайте четкие рекомендации по выполнению и оформлению, а также минимальные требования к содержанию.
• Установите время выполнения.

Пример неудачной формулировки задания с развернутым ответом:

Почему символы так важны в произведении «451 градус по Фаренгейту»?

Пример оптимизированной формулировки задания с развернутым ответом:

Символы очень важны в произведении «451 градус по Фаренгейту». Какие три, по Вашему мнению, являются наиболее важными в нём? Опишите их и выделите их роль и смысл в этом произведении.

Конструирование заданий – кропотливая работа. Каким бы опытным не был разработчик – каждый сталкивается с трудностями. Начинающие авторы часто упираются в тип заданий, создание которых дается им проще всего. Обычно их заклинивает на заданиях типа «Кто? Что? Где? Когда?». Более опытные коллеги также частенько испытывают творческий кризис и работают в режиме фабрики однотипных заданий.

Я часто встречаю мнения, что задания закрытой формы работают только для фактологических знаний, апеллирующих к элементарной памяти. Это не так. Даже в условях закрытой формы можно создать большое разнообразие заданий. И здесь разработчикам будет полезно познакомиться с логико-семантической типологией, предложенной А. Г. Шмелевым. Эта типология содержит 15 типов вопросов, для ответа на которые потребуются самые различные операции мышления.

Логико-семантическая типология тестовых заданий:

• Фактологический вопрос “Что? Где? Когда?”
• Персонологический вопрос “Кто?”
• Причинно-следственный вопрос “Почему? Что следует?”
• Функционально-целевой вопрос “Для чего/зачем? С какой целью?”
• Структурный вопрос “Из чего?”
• Инструментальный вопрос “Как? Каким образом?”
• Обстоятельственный вопрос “При каких условиях?”
• Словарно-концептуальный вопрос “Как называется? Что значит термин?”
• Логико-дедуктивный вопрос “Что следует из данных посылок?”
• Концептуально-ассоциативный вопрос “Заполни пропуск”
• Концептуально-аналитический вопрос “Проведи аналогию”
• Задание на восстановление последовательности или структуры “Продолжи ряд” или “В какой последовательности?”
• Концептуально-семантическое задание для установления смысловой эквивалентности или близости
• Проблемно-операциональное задание “Реши задачу”
• Исключение лишнего и вопросы с “НЕ”

Как видно, фактологические и персонологические вопросы – излюбленные начинающими авторами тестовых заданий – являются лишь верхушкой айсберга. Применение этой типологии в конструкторской работе позволит значительно расширить спектр проверяемых знаний. Новички, опираясь на нее, смогут постепенно нарастить арсенал заданий, а искушенные авторы в минуты ступора получат новый заряд фантазии. Главное, использовать эту типологию как помощника, а не стремиться во что бы то ни стало включить все 15 типов вопросов в один тест. И не забывать делиться опытом.

Чаще всего в тестах встречаются следующие формы: закрытые задания, в которых нужно выбрать правильный ответ из предложенных вариантов; открытые задания, требующие самостоятельного конструирования ответа; задания на установление соответствия между элементами двумя множеств; задания на установление правильной последовательности. В этом материале мы сосредоточимся на заданиях закрытой формы.

Задания закрытой формы: типы, плюсы и минусы

Достоинствами заданий закрытой формы являются широта охвата по содержанию, простота подсчета первичных баллов учеников и объективность. К недостаткам можно отнести высокие риски, связанные с угадыванием и, как бы странно это не звучало, трудности композиции таких заданий. Например, чтобы получить 20 хороших заданий, опытному разработчику тестов понадобится написать 40, половина из которых будет отбракована в ходе экспертизы и апробации. Причиной отбраковки чаще всего является некорректное функционирование задания (например, когда одна или несколько ответных альтернатив не выбираются испытуемыми или, другими словами, не работают). «Выход» качественных заданий для начинающих разработчиков, как правило, не превышает 1/5.

Задания закрытой формы бывают нескольких типов: с выбором одного правильного ответа и с выбором всех правильных ответов. В первом случае, нужно выбрать наиболее правильный ответ из списка предложенных. В заданиях с выбором всех правильных ответов испытуемому предлагается несколько ответных альтернатив, в числе которых может быть несколько правильных. В этом случае испытуемому необходимо выбрать все правильные ответы.

Обязательными элементами заданий закрытой формы являются инструкция по выполнению и основная часть задания, содержащая постановку проблемы и ответные альтернативы (обычно, ответных альтернатив 3-7). При всей кажущейся простоте, создание заданий – это кропотливый труд, во многом напоминающий огранку драгоценного камня. Ниже приведу 6 советов и 6 принципов, которые помогут как начинающим, так и опытным разработчикам заданий.

Шесть советов по композиции заданий закрытой формы:

1. Избегайте в тексте задания неясности или двусмысленности и никогда не используйте фразу «как вы думаете».

2. Избегайте в задании таких слов, которые могут выглядеть как подсказка, включая однокоренные слова в тексте задания и в ответах.

3. При формулировке ответных альтернатив старайтесь не использовать без необходимости слова: все, ни одного, никогда, всегда; и выражения: ни один из перечисленных, все перечисленные.

4. Больший текст включайте в основную часть задания, а для ответных альтернатив оставляйте только важные, ключевые слова.

5. Старайтесь, чтобы все ответные альтернативы к одному заданию были примерно одной длины, включая правильные ответы.

6. Не забывайте соблюдать правила русского языка (орфография, знаки препинания, согласованность в числе, падеже, роде).

Шесть принципов композиции заданий закрытой формы:

Принцип противоречия

Ответы подбираются так, чтобы второй отрицал первый.

Органическое стекло – это пластмасса, состоящая из термопластической смолы

• a) с наполнителями.
• b) без наполнителей.

Принцип противоположности

Ответы допускают возможность потенциального существования других переходных понятий и состояний.

Функция, имеющая в интервале положительную производную, в этом интервале

• a) возрастает.
• b) сохраняет постоянное значение.
• c) убывает.

Принцип однородности

Подбираются такие ответы, которые относятся к одному роду, виду, или отображают различные стороны, грани явления.

Конституционный контроль во Франции осуществляет

• a) Государственный совет.
• b) Конституционный совет.
• c) Конституционный суд.

Принцип кумуляции

Содержание каждого ответа вбирает в себя (аккумулирует) содержание предыдущего.

Толерантным называется отношение

• a) рефлексивное.
• b) рефлексивное и симметричное.
• c) рефлексивное, симметричное и транзитивное.

Принцип сочетания

Используется сочетание слов (знаков) по два, три, четыре в каждом ответе.

Механическая работа, совершенная телом при поступательном движении, зависит от

• a) силы и времени.
• b) силы и перемещения.
• c) силы и пройденного пути.

Принцип двойной альтернативы

При конструировании ответов используется противопоставление, построенное на принципе противоречия или принципе противоположности.

Для развитых стран характерны

• a) низкая рождаемость и низкая смертность.
• b) высокая рождаемость и низкая смертность.
• c) высокая рождаемость и высокая смертность.
• d) низкая рождаемость и высокая смертность.

Говоря о правилах начисления баллов, в тестовых заданиях закрытой формы обычно используют дихотомическую оценку: за правильный ответ участник тестирования получает 1 балл, за неправильный ответ или за отсутствие ответа 0 баллов. Суммирование всех единиц позволяет вычислить индивидуальный балл испытуемого (первичный балл).

Важно отметить, что в тексте приведены наиболее важные советы и распространенные принципы. У опытных разработчиков часто есть свой перечень советов и принципов в дополнение к указанным выше. А залогом успеха в составлении заданий является практика и обмен опытом.

Наверняка вы сами хоть раз в жизни составляли тесты и уж точно неоднократно проходили разнообразное тестирование – от серьезного до совсем шуточного из серии «Какой ты овощ во время карантина?».

Очень часто, за неимением нужных знаний и подготовки, разработчики придумывают тесты, опираясь исключительно на свой опыт, интуицию и здравый смысл (за исключением «овоща на карантине»). Многие, приступая к разработке собственных тестов, поначалу думают: что тут может быть сложного? Составить вопросы, придумать к ним ответы — вот и вся недолга! Это очень глубокое заблуждение. Создание хорошего задания в тестовой форме – настоящее искусство. 

Существуют разработанные учеными методики составления тестовых заданий. В этой статье я хочу рассказать об одной из таких методик, которую используют в системе общего и профессионального образования. В частности, ее нередко применяем и мы в учебном центре «Сетевая Академия ЛАНИТ» для разработки проверочных тестов и систем аттестации сотрудников.

Источник

Вместо предисловия

Почему я решила, что вам это может пригодиться? Во-первых, потому что многим из вас – людям, совсем далеким от педагогики, приходится проводить разнообразные обучающие мероприятия, разрабатывать учебные курсы и т.п., а все это требует проверки усвоения учебного материала. А какой еще способ, кроме тестирования, способен проверить знания быстро, надежно и объективно?

Во-вторых, потому что использование педагогических тестов актуально не только для образования, но и для областей, весьма далеких от него. Тесты – очень полезный инструмент для решения многих задач: и для аттестации сотрудников, и для первичной проверки соответствия знаний и навыков соискателей вакансии, и для оценки степени информированности аудитории о какой-либо проблеме, и много для чего еще. 

Сразу оговорюсь, что эта статья в первую очередь рассчитана на людей, не имеющих большого опыта в составлении тестовых заданий. Ее цель – предоставить новичкам достаточный объем материала, который помог бы им научиться составлять качественные педагогические тесты разных видов.

Да простят меня «продвинутые» в вопросах тестовой теории читатели, речь пойдет о базовых сведениях. Хотя, как показывает практика, вспомнить основы тоже никогда не вредно. 

Методику, о которой пойдет речь, разработали ведущие отечественные специалисты в области тестологии: В. С. Аванесов, М. Б. Челышкова, А.Н. Майоров и другие. 

В качестве примеров приводятся тестовые задания из открытого банка заданий ЕГЭ, размещенного на официальном сайте ФГБНУ «Федеральный институт педагогических измерений», из книги М. Б. Челышковой «Теория и практика конструирования педагогических тестов», из книги В. С. Аванесова «Композиция тестовых заданий», а также задания, составленные автором статьи и преподавателями разных образовательных организаций.

Сначала немного теории

Говоря о тестах в разных сферах деятельности, подразумевают разное. Например, в вычислительной технике тест – это задача с известным решением, с помощью которой проверяется правильность работы системы, а в медицине тестом будет называться метод исследования, заключающийся в пробном воздействии на организм. В общем понимании, тест – это объективное и стандартизированное измерение, которое легко поддается количественной оценке, статистической обработке и анализу. 

В рамках наших целей нас интересует педагогический тест со своей спецификой. Это система тестовых заданий различной трудности, созданная для качественного и эффективного измерения структуры и качества подготовленности испытуемых. Тестовое задание является одним из элементов педагогического теста, включает в себя инструкцию, тестовую задачу и эталон ответа.

Преподаватели используют тесты, чтобы:

1. оценить исходные знания учащихся перед началом обучения и скорректировать план и содержание занятия; 
2. сделать срез знаний во время курса, чтобы вовремя внести изменения в процесс обучения, если слушатели недостаточно хорошо усваивают учебный материал;
3. проверить финальный результат обучения.

Наиболее часто используются закрытые тесты, в которых ответы уже есть, как в игре «Кто хочет стать миллионером?». Но встречаются и открытые тестовые задания, требующие самостоятельно сконструировать или дополнить ответ.

Итак, выполняя закрытые тесты, обычно надо:

• выбрать один или несколько ответов среди заданных вариантов;
• установить соответствие между элементами двух множеств; 
• установить правильный порядок действий или процессов, перечисленных автором теста.

Открытые тесты требуют:

• дополнить имеющийся ответ;
• полностью сконструировать ответ самостоятельно.

Какой материал следует включить в тест

Содержание теста зависит от того, какие цели вы перед собой ставите и зачем вам вообще нужен этот тест. Прежде всего, нужно самому себе ответить на вопрос, можно ли с помощью составленных вами заданий проверить подготовленность аудитории. 

Вот такое тестовое задание предложил своим ученикам преподаватель анатомии по теме «Скелет грудной клетки». Одна из целей занятия – знать количество ребер у человека. 

Инструкция

: Выберите один правильный ответ.
Количество ребер 

1. у мужчин больше, чем у женщин
2. у женщин больше, чем у мужчин
3. индивидуально у каждого человека
4. зависит от жизненных обстоятельств

Как вы понимаете, при помощи этого задания невозможно проверить, знают испытуемые, сколько у человека ребер или нет. Поэтому, строго говоря, нет смысла включать такой тест в материалы контроля. Отдельный разговор о качестве подобранных автором вариантов ответа. Особенно интересно влияние жизненных обстоятельств на количество ребер. Но правила подбора неправильных ответов (дистракторов) к тестовым заданиям мы рассмотрим позже.

Основные правила подбора материала для теста следующие:

1. Материал, заложенный в тест, должен соответствовать содержанию темы тестирования и программы учебного курса.
2. В тест включается только то содержание темы, которое является признанным, объективно истинным и поддается рациональной аргументации. Спорные точки зрения в тестовые задания включать не рекомендуется. Суть тестовых заданий заключается как раз в том, что они требуют четкого, заранее известного преподавателям ответа, признанного ими в процессе разработки заданий объективно истинным.
3. Уровень детализации содержания теста зависит от целей тестирования. Если вы планируете использовать тесты для сравнения уровня подготовки тестируемых в какой-то области (например, для конкурсного отбора соискателей вакансии или кандидатов на обучение), то уровень детализации материала должен быть низким. В заданиях такого теста достаточно отобразить только наиболее значимые элементы содержания.
4. Если же тесты предназначены для выяснения, насколько успешно испытуемый освоил учебный материал (курс, раздел, тему) и освоил ли он его вообще, то уровень детализации области содержания должен быть довольно подробным. Это позволит сделать вывод о знаниях каждого испытуемого, при необходимости аттестовать его, а также проанализировать, какой материал лучше или хуже освоили испытуемые.
5. Вместе с тем в тест необходимо включать те элементы содержания, которые можно отнести к наиболее важным, без которых знания по заявленной теме становятся несущественными. Нет смысла перегружать тест второстепенными деталями, не имеющими большого значения. 
6. Если с помощью тестовых заданий планируется оценивать знания по всему учебному курсу, следует равномерно включить в итоговый тест задания по всем изучаемым темам курса, убедившись в том, что они охватывают все самые важные аспекты предметной области и в правильной пропорции.

   Например, если вы составляете тесты по курсу «Microsoft Excel» и включаете в него задания, посвященные исключительно созданию сводных таблиц и диаграмм, то при помощи этих тестов вы явно не сможете полноценно оценить уровень знаний по всему курсу в целом. 

7. Не всякое содержание можно выразить в форме тестового задания, то есть тесты – не универсальная форма для проверки знаний. 

Сколько времени нужно выделить для тестирования

Сидеть над тестом невозможно бесконечно долго: начало и завершение тестирования должны быть фиксированными. К сожалению, довольно часто временной интервал для этого процесса выбирается спонтанно. И если ошибиться – дать слишком мало времени или слишком много, эффективность теста снизится.

Тестирование в спешке приведет к тому, что как «слабые», так и «сильные» испытуемые не успеют выполнить все задания, и мы не поймем – тестируемый не выполнил задание, поскольку не знал ответа, или вообще не успел к нему обратиться.

Если времени вагон и маленькая тележка, «сильные» испытуемые, успевшие быстро пройти тестирование, начинают отвлекать других, подсказывать ответы, что нарушает процедуру тестирования (мы не соблюдаем правило равных условий для всех испытуемых). 

Если человек проходит тестирование в одиночестве или тестируется онлайн, при избытке времени он будет долго сидеть над заданиями, не решаясь выбрать ответ. Это вызовет утомление, снижение концентрации внимания, расслабление, что также снижает точность тестирования.

Всегда нужно иметь в виду, что испытуемые устают. А значит, тестирование не должно занимать слишком много времени, что напрямую связано с объемом самого теста. Практика показывает, что объем осознанно воспринимаемой информации начинает существенно снижаться примерно через 40-45 минут с начала тестирования (Ким В. С. Тестирование учебных достижений. – Уссурийск, 2007, стр. 29-35). 

Общее время тестирования определяется количеством и сложностью заданий. Некоторые преподаватели используют, например, такие методики расчета времени тестирования: 

1. Время, затраченное преподавателем на выполнение составленного им теста, умножить на 3.
2. Суммировать время, необходимое для выполнения каждого задания:

   • задание закрытой формы с выбором одного правильного ответа – примерно 10 секунд;
   • задание более сложных форм – в среднем от 30 секунд до 1 минуты.

Однако бывает, что теоретически рассчитать время тестирования невозможно, поэтому рекомендуется использовать эмпирические данные по результатам первичной апробации теста.

Составление тестовых заданий закрытой формы 

А теперь давайте рассмотрим конкретные примеры и поймем, как составлять свои тесты. В фокусе нашего внимания – тестовые задания закрытой формы.

В таких тестовых заданиях выделяют следующие элементы:

• инструкцию (содержит общие требования к выполнению задания – рис. 1);
• основную часть (задание, постановка проблемы – рис. 2);
• варианты ответа (верный ответ(ы) и ответы-обманки – рис. 3).

Рекомендуется, чтобы задания в тесте представляли собой не вопросы, а утверждения, которые в зависимости от ответов могут превращаться в истинные или ложные высказывания. 

Среди готовых ответов правильным чаще всего бывает только один, хотя не исключаются и варианты с выбором нескольких правильных ответов.

Неправильные, но похожие на правильные (и поэтому правдоподобные) ответы называются дистракторами (от англ. distract – отвлекать). Они используются для отвлечения внимания от правильного ответа тех, кто либо совсем не знает правильный ответ, либо пытается угадать его во время тестирования. Сделать неправильные ответы правдоподобными – одна из самых сложных задач разработчика теста.

Отдельно от тестовых заданий в программу тестирования вводится эталон выполнения заданий и разрабатываются критерии оценки.

Если вы проводите тестирование по старинке, в письменном виде, то вам потребуется ответник, трафарет для проверки ответника и эталон выполнения тестового задания. 

Как оформить тестовые задания

Тестовое задание должно быть оформлено таким образом, чтобы облегчить тестируемому работу над ним. 

Существует несколько вариантов дизайна тестовых заданий закрытой формы, но все сходятся в одном: все элементы тестового задания тем или иным образом должны быть графически выделены.

Как написать инструкцию к тестам 

Инструкция – это общие требования к выполнению тестового задания. Она должна устранить все вопросы испытуемых об оформлении своих ответов. Кроме того, в тексте инструкции оговаривают специфику задания, например, указывают количество правильных ответов в тесте (один/несколько).

При написании инструкции используют стандартные формулировки. Формулировка инструкции зависит от формы тестового задания, количества правильных ответов и пр.

Для тестовых заданий с выбором одного правильного ответа в зависимости от способа проведения тестирования можно предложить следующие варианты инструкций.

• Выберите один правильный ответ.
• Внимательно прочитайте текст задания и выберите верный ответ из списка.
• Выпишите номер тестового задания и индекс правильного ответа. 
• Обведите кружком букву (номер) правильного ответа.
• Для ответа нажмите клавишу с буквой (номером) правильного ответа.

Иногда, по замыслу автора, при разработке задания закладываются несколько правильных ответов, среди которых есть более и менее предпочтительные. В этом случае задание может сопровождаться следующей инструкцией: «Выберите наиболее правильный ответ».

Для тестовых заданий с выбором нескольких правильных ответов в зависимости от способа проведения тестирования можно предложить следующие варианты инструкций.

• Выберите несколько правильных ответов.
• Выберите все правильные ответы.
• Отвечая на задание теста, нажимайте на клавиши с буквами (номерами) всех правильных ответов.

Для тестовых заданий на выбор неправильного ответа инструкция может быть такой: «Выберите неправильный ответ».

Для группы однотипных заданий допускается делать одну инструкцию, которая помещается в начале теста или данной группы заданий в тесте.

Как правильно сформулировать основную часть задания 

Эффективность и технологичность теста во многом зависят от того, насколько грамотно сформулированы задания. Если тестируемый не поймет смысл вопроса, ему придется отвечать наугад. А это уже минус к объективности конечного результата. Потому важно тщательно проработать каждое задание. Вот несколько рекомендаций.

1. Рекомендуется, чтобы задания в тесте были формулированы в форме утверждений, которые после ответов испытуемых естественным образом превратятся в истинные или ложные высказывания (рис. 1).

Если продолжить утверждение из основной части этого задания правильным ответом (в данном случае это вариант Б), получится истинное высказывание: Признаком протекания химической реакции между оксидом меди и водородом является изменение цвета. При «подстановке» неправильного ответа высказывание получится ложным. 

По мнению многих отечественных тестологов (В.С. Аванесова, М.Б. Челышковой, В.С. Кима и др.), смысл тестового утверждения улавливается всегда лучше, чем смысл вопроса, потому что в тестовых утверждениях нет ни одного лишнего слова и даже знака, в то время как вопрос требует ряда дополнительных слов и знаков для выражения требуемого смысла, значения и интонации. Вопросы и ответы на них иногда бывают столь неопределенными и многословными, что для выявления их истинности требуются большие затраты времени и сил, в то время как технологичная методика тестирования предполагает четкую и быструю дифференцируемость ответов.

Действительно, если трансформировать задание, составленное в форме вопроса, в логическое утверждение, мы увидим, что задание уж точно не стало хуже, а даже выиграло – стало более кратким, понятным, лаконичным. После выбора ответа такое утверждение превратится в законченное высказывание, истинность или ложность которого легко поддается пониманию и оценке. 

Пример 1. Задание в вопросительной форме:

Инструкция

: Выберите один правильный ответ.
С каким из названных событий связано окончание периода разрядки международной напряженности в 1970-е гг.?

1. начало Корейской войны
2. разрыв отношений с Югославией
3. конфликт с Китаем
4. ввод советских войск в Афганистан

То же задание в виде логического утверждения:

Окончание периода разрядки международной напряженности в 1970-е гг. связано c

1. началом Корейской войны
2. разрывом отношений с Югославией
3. конфликтом с Китаем
4. вводом советских войск в Афганистан

Пример 2. Задание в вопросительной форме:

Инструкция

: Выберите несколько правильных ответов.
Какие из перечисленных примеров относят к ароморфозам?

1. возникновение теплокровности у позвоночных
2. развитие трехкамерного сердца у земноводных
3. формирование торпедообразного тела у акул
4. развитие зародыша внутри матки
5. появление рогов у копытных
6. формирование крыльев у летучих мышей

То же задание в виде логического утверждения:

К ароморфозам относят

1. возникновение теплокровности у позвоночных
2. развитие трехкамерного сердца у земноводных
3. формирование торпедообразного тела у акул
4. развитие зародыша внутри матки
5. появление рогов у копытных
6. формирование крыльев у летучих мышей

Подобной трансформации легко поддается большинство заданий, сформулированных в вопросительной форме. Иногда возникают ситуации, когда, казалось бы, задание формулируется только в виде вопроса. Однако после тщательного анализа цели задания и его содержания все же удается подобрать утвердительную форму задания.

Конечно, утверждение об использовании в заданиях исключительно утвердительной формы не категорично. К тому же иногда встречаются задания, в которых вопросительная форма выглядит удобнее и короче. 

Вопросительная форма заданий по-прежнему используется при составлении тестов и в России, и за рубежом, и имеет много сторонников. Выбор остается за вами. Главное – не забывать, что выбранная вами форма задания должна быть максимально понятна для испытуемых.

Лично я являюсь сторонником формулировки заданий в виде утверждений, считаю эту форму наиболее удачной, использую только ее и ничего с собой поделать не могу.   

2. Текст задания должен содержать достаточную, недвусмысленную и релевантную информацию для ответа. 

3. Формулировка задания должна быть грамотной, согласованной с формой вариантов ответа (простите за капитанство).

4. Формулировка задания должна быть предельно лаконичной, но не в ущерб пониманию сути задания. Необходимо исключить повторы слов и, тем более, целых фраз. Чем лаконичнее задание, тем лучше оно воспринимается. 

5. Рекомендуется, чтобы основная часть задания состояла из одного предложения (не более 7-8 слов), а во всем задании было не более одного придаточного предложения. Эта рекомендация подходит, конечно, не ко всем случаям. Например, тестовое задание может представлять собой кейс/ситуационную задачу, тогда одним предложением точно не обойтись.

6. Если задание сформулировано в вопросительной форме, предпочтительнее применять прямые вопросы, представляющие собой полное предложение с вопросительным знаком в конце.

7. В основной части задания не должна присутствовать дополнительная информация, не существенная для поставленной проблемы.

8. Из текста задания нужно исключить все вербальные ассоциации, по которым можно догадаться о правильном ответе.

9. Стоит исключить из формулировки задания частицу «не». А если НЕ получается, ее надо выделить прописными буквами (как в этом предложении).

10. Исключаются задания, содержащие оценочные суждения тестируемого: «на ваш взгляд», «по вашему мнению», «что вы думаете…», «согласны ли вы с …», «как бы вы сформулировали…» и т.п. 

11. Рисунки, графики, схемы, используемые в задании, должны соответствовать тексту (рис. 2). И, конечно же, присутствие графических объектов в задании должно быть оправдано. Не стоит «добавлять картинку» просто для красоты. 

12. Элементы рисунка, графика, схемы рекомендуется обозначать по часовой стрелке (рис. 3).

13. В большинстве случаев варианты ответов замыкают задания (так было и в примерах выше), образуя завершенное истинное или ложное высказывание. Но иногда ответы приходится ставить в середине или за одно-два слова от конца содержательной основы задания теста. Тогда можно использовать такой вариант:

Инструкция

: Выберите один правильный ответ.
Невская битва произошла в … году.

1. 1198
2. 1240
3. 1242
4. 1245

14. Ответ на одно тестовое задание не должен служить ключом к правильным ответам на другие задания теста. Это нарушает условие локальной независимости заданий. В этом случае невозможно сделать корректный вывод о том,  знает ли испытуемый ответ на второе и последующие задания, или он не справился с ними потому что неправильно ответил на первый вопрос. 

Как подобрать дистракторы

К каждому тестовому заданию нужно подобрать правдоподобные неправильные варианты ответа (дистракторы). Это одна из самых сложных задач, стоящих перед составителем тестов. Перед вами основные рекомендации по подбору дистракторов: 

1. Все предложенные в задании дистракторы должны быть правдоподобными, теоретически вероятными.

Наиболее хороши дистракторы, подобранные на основе типичных ошибок, которые допускают тестируемые, или на основе распространенных заблуждений.

2. Все дистракторы к заданию должны быть одинаково привлекательными для тестируемых, не знающих правильного ответа.

Дистрактор, который никто не выбирает в качестве правильного ответа, обычно называют неработающим. Если в задании имеется хотя бы один неработающий дистрактор, удалите его, и вы сразу увидите реальное, а не формальное число ответов к заданию теста. 

Если все дистракторы в задании не работают, все испытуемые выполнят даже сложное задание верно, выбрав единственный правдоподобный ответ. Например, такое задание: 

Инструкция

: Выберите один правильный ответ.
Во вращении предплечья наружу участвует

1. двуглавая мышца плеча
2. двуглавая мышца бедра 
3. икроножная мышца
4. прямая мышца живота
5. собственно жевательная мышца

Даже не будучи знатоком данной предметной области, нетрудно догадаться, что мышцы, расположенные на нижней конечности, животе или черепе, не могут приводить в движение предплечье. Получается, что в тесте нет ни одного работающего дистрактора. Имеется всего один работающий вариант ответа, его и выберут испытуемые как единственно правильный. 

Вы спросите: «А что же здесь плохого»? Как мы писали выше, педагогические тесты создаются для объективной оценки структуры и качества знаний. А о какой объективной оценке можно говорить, если правильный ответ можно просто угадать, не имея совсем никакого представления о предмете? Конечно, если целью тестирования было узнать, отличает ли испытуемый живот или бедро от предплечья, то можно сказать, что все прошло успешно. Но все же перед тестами обычно ставятся более серьезные задачи.    

Если в предложенном задании мы заменим неработающие дистракторы на правдоподобные, теоретически вероятные (все перечисленные мышцы тем или иным образом двигают предплечье), справиться с ним так просто будет нельзя:

Во вращении предплечья наружу участвует

1. плечевая мышца
2. двуглавая мышца плеча
3. трехглавая мышца плеча
4. локтевая мышца
5. круглый пронатор

3. Дистракторы должны быть однородными, подобранными по общему (единому) основанию. 

Пример 1: Задание с однородными дистракторами

Инструкция

: Выберите один правильный ответ.
Телиоспоры возникают из

1. урединиоспор
2. эциоспор
3. базидиоспор
4. пикниоспор

Здесь все дистракторы подобраны по одному основанию, т.к. все они отвечают на вопрос «из чего?» и характеризуют то, из чего могут возникнуть телиоспоры.  

А в следующем задании дистракторы подобраны неудачно. 

Пример 2: Задание с неоднородными дистракторами

Инструкция

: Выберите несколько правильных ответов.
Телиоспоры возникают

1. из урединиоспор
2. из эциоспор
3. поздней осенью на том же мицелии, на котором летом формировались урединиоспоры
4. весной в результате слияния дикариона и последующего мейоза

В этом задании два первых ответа выбраны по одному основанию т.к. все они отвечают на вопрос «из чего?». Третий ответ подобран по другому основанию, поскольку соответствует вопросам «когда?» и «где?». 

Последний ответ не совпадает по основанию выбора ни с одним из предыдущих, он отвечает на вопросы «когда?» и «в результате чего?».

Самая частая причина появления в заданиях неоднородных дистракторов понятна – при невозможности подобрать нужное число дистракторов по одному основанию автор теста увеличивает их число, включая дополнительные, выбранные по другому основанию ответы. 

Иногда причиной является желание автора проверить с помощью одного задания как можно больше знаний испытуемых. Возможно, это оправдано спецификой предмета, однако некорректно с точки зрения требований тестовой технологии. 

Тестовое задание должно проверять один элемент знания. Если это не так, то становится неясным, с каким именно элементом знания тестируемый не справляется, в чем заключена причина невыполнения задания.

4. Все ответы должны быть параллельными по конструкции и грамматически согласованными с основной частью задания теста.

5. Все повторяющиеся в вариантах ответа слова (как в примере ниже) следует перенести в формулировку заданий.

Инструкция

: Выберите один правильный ответ.
Заштрихованная территория на карте России показывает районы

1. газовых месторождений
2. нефтяных месторождений
3. месторождений каменного угля
4. месторождений калийной соли

Вот что получится после небольшой правки этого примера:

Инструкция

: Выберите один правильный ответ.
Заштрихованная территория на карте России показывает районы месторождений

1. газовых
2. нефтяных
3. каменного угля
4. калийной соли

6. Рекомендуется использовать длинные задания и короткие ответы. В противоположном случае на прочтение и анализ ответов тратится слишком много времени.

7. Из числа неправильных исключаются ответы, вытекающие один из другого.

8. Ни один из дистракторов не должен быть частично правильным ответом, который при определенных условиях превратится в правильный ответ.

9. Ответы не должны отрицать смысл самого задания. «Почему? – спросите вы, – ведь так часто делают». Давайте разберемся на примере следующего задания:

Инструкция

: Выберите один правильный ответ.
PDF-файл можно преобразовать в документ Word, если на вкладке «Файл» выбрать команду

1. Открыть
2. Сохранить как 
3. Экспорт
4. PDF-файл нельзя преобразовать в документ Word

В этом примере четвертый ответ прямо противоречит основной части, утверждающей существование возможности преобразовать PDF-файл в документ Word. Налицо явная логическая ошибка. В задании же не спрашивается, можно ли преобразовать, а утверждается, что можно, а варианты ответов представляют собой перечисление способов преобразования.   

Если четвертый ответ – дистрактор, то в качестве правдоподобного ответа его вряд ли выберет хотя бы один тестируемый. Тогда этот ответ как неработающий дистрактор необходимо удалить из теста.

Если именно четвертый ответ является верным, все задание будет нерабочим, т.к. большинство тестируемых увидят логическую несообразность формулировок и пропустят задание, посчитав его ошибкой разработчика теста.

Если цель задания – выяснить, знает ли испытуемый, можно ли вообще преобразовать PDF-файл в документ Word или нет, лучше сформулировать вопрос по-другому, без нарушения логики: 

Преобразовать PDF-файл в документ Word

1. можно
2. нельзя

10. Не следует использовать в заданиях ответы типа «все вышеперечисленные», «ни один из вышеперечисленных» или, того хуже, – «все ответы неправильные» и «правильного ответа нет». Эта рекомендация, кстати, так же часто вызывает вопросы и несогласие аудитории, как и предыдущая. 

С точки зрения большинства тестологов, применение подобных ответов не оправдано по следующим причинам:

• повышение вероятности угадывания правильного ответа, так как чаще всего это будет неработающий дистрактор, добавленный составителем «для количества» при трудностях с подбором качественных дистракторов;
• нарушение логического закона исключенного третьего – если инструкция предписывает выбрать один верный ответ, то в задании он должен быть. Это придает однозначность замыслу самого задания и не допускает противоречивых толкований у испытуемых.

11. Не рекомендуется использовать слова «всегда», «никогда», «ни одного» и т.п., так как в отдельных случаях они способствуют угадыванию.

12. Частота выбора одного и того же номера места для правильного ответа в различных заданиях теста должна быть примерно одинакова или номер места для правильного ответа выбирается в случайном порядке.

13. Дистракторы из одного задания не используются в качестве ответов к другим заданиям теста.

14. Все ответы к одному заданию должны быть примерно одной длины. Если это трудновыполнимо, возможен вариант, когда в задании половина длинных ответов, половина коротких. Это нужно для того, чтобы исключить вероятность угадывания правильного ответа по признаку его полноты или краткости. Многие разработчики тестов грешат тем, что в их заданиях правильные ответы почти всегда или длиннее, или короче неправильных. Эта тенденция очень быстро «считывается» испытуемыми и делает общий результат теста необъективным. Следующая рекомендация имеет такое же обоснование.

15. Правильный ответ не должен быть длиннее других.

16. Дистракторы располагаются в логической последовательности: числа – по возрастанию, буквы – по алфавиту. Это удобнее при поиске тестируемым правильного ответа.

17. Количество дистракторов к заданию подбирается таким образом, чтобы задание не было слишком громоздким, но и чтобы исключить большую вероятность угадывания правильного ответа. Поэтому чаще всего в заданиях бывает три или четыре дистрактора и один правильный ответ.

В отдельных случаях, например, в заданиях с выбором нескольких правильных ответов, количество дистракторов может достигать шести–семи.

18. Число дистракторов и правильных ответов в разных заданиях может быть разным. Оно не должно быть одинаковым во всех заданиях теста.

Источник

По какому принципу придумывают тестовые задания

Из десяти принципов разработки тестовых заданий закрытой формы, которые выделяет В. С. Аванесов, предлагаю рассмотреть основные. Для наглядности будем это делать на примерах.

1. Принцип противоречия применяется при создании заданий с двумя вариантами ответов. Здесь один ответ отрицает другой. Например:

Инструкция

: Выберите один правильный ответ.
Поощрения в трудовую книжку

1. записываются
2. не записываются

2. Принцип противоположности ответов близок по смыслу к принципу противоречия, но при противоречии используется отрицание, а при противоположности один ответ заменяется другим, антонимичным по смыслу. Например:

Инструкция

: Выберите один правильный ответ.
С увеличением заряда ядра активность щелочных металлов

1. возрастает
2. убывает

Возможность промежуточных состояний при использовании принципа противоречия позволяет увеличить число ответов, например, до трех. Например:

Инструкция

: Выберите один правильный ответ.
При движении тягового органа конвейера реле скорости

1. включено
2. выключено
3. заблокировано

3. Тесты, основанные на принципе однородности, содержат ответы, относящиеся к одному роду, виду, или отображают основные стороны, грани явления. Например:

Инструкция

: Выберите один правильный ответ.
Основателем андрагогики как науки является

1. Ноулз
2. Джарвис
3. Холтон
4. Ушинский

Инструкция

: выберите несколько правильных ответов.
Буква «о» пишется в словах

1. пл_вец
2. пок_рить вершину
3. распол_гать 
4. осн_щенный
5. ум_лять значение

4. Принцип кумуляции означает, что второй ответ вбирает в себя (аккумулирует) содержание первого, третий – содержание второго и т.д.

Пример:

Инструкция

: Выберите один правильный ответ.
Чтобы задать движение точки естественным способом, надо знать

1. траекторию
2. траекторию и закон движения
3. траекторию, закон движения, начало отсчета
4. траекторию, закон движения, начало отсчета, скорость

Тестируемые, привыкшие давать полные и правильные ответы, выбирают обычно последний ответ в таких заданиях, ошибочно полагая, что он всегда самый правильный. Поэтому при разработке заданий по принципу кумуляции полезно иметь большую часть правильных ответов не на последнем месте. 

5. Принцип сочетания. Используется сочетание слов (знаков) по два или по три, реже четыре, в каждом ответе.

Пример 1: сочетание более или менее однородных и правдоподобных пар ответов

Инструкция

: Выберите один правильный ответ.
Ф. Шопен писал

1. оперы и симфонии
2. балеты и оратории
3. мазурки и ноктюрны

Пример 2: сочетание одного слова (понятия) с несколькими другими

Инструкция

: Выберите один правильный ответ.
НЕ имеют ядра клетки крови

1. эритроциты и лейкоциты
2. эритроциты и тромбоциты
3. эритроциты и лимфоциты
4. эритроциты и базофилы

Пример 3: сочетание ответов по правилу цепочки, когда последнее слово в первом ответе становится первым во втором ответе, последнее во втором – первым в третьем и т.д.)

Инструкция

: Выберите один правильный ответ.
Служебными частями речи являются

1. предлоги, союзы, частицы
2. частицы, союзы, местоимения
3. местоимения, частицы, предлоги

6. При использовании принципа градуирования ответы располагаются по возрастанию (увеличению) или по убыванию (уменьшению). Этот принцип применим для заданий с тремя и большим числом ответов. Например:

Инструкция

: Выберите один правильный ответ.
Растворимость газов при повышении температуры

1. увеличивается
2. остается без изменений
3. уменьшается

Согласно ч. 3 ст. 5.63 КоАП РФ, нарушение должностным лицом порядка или сроков рассмотрения жалобы влечет наложение административного штрафа в размере … рублей.

1. от трех тысяч до пяти тысяч 
2. от пяти тысяч до десяти тысяч 
3. от десяти тысяч до пятнадцати тысяч 
4. от двадцати тысяч до тридцати тысяч 

7. Принцип формулирования заданий с ответами, правильными в различной мере, требует изменения инструкции, содержания задания и логики подбора ответов.

Инструкция, как мы уже говорили, обычно пишется так: Выберите наиболее правильный ответ.

Задача таких заданий – проверить сопоставительные знания, а ответы формулируются так, чтобы был реальный выбор между ответами, правильными в разной степени. Например:

Инструкция

: Выберите наиболее правильный ответ.
Зигота – это

1. одна яйцеклетка
2. оплодотворенная яйцеклетка
3. диплоидная клетка, образующаяся в результате оплодотворения
4. одноклеточная стадия развития многоклеточного организма млекопитающих

В этом задании наиболее правильным считается третий ответ (он наиболее емко и точно описывает все характеристики зиготы), следующий по степени правильности – второй ответ (он содержит совершенно правильное, но менее полное определение зиготы), затем четвертый (потому что зиготы образуются не только у млекопитающих). На последнем месте по степени правильности находится первый ответ – он самый неполный, ведь одной яйцеклетки для образования зиготы явно недостаточно.

Задания на выбор наиболее правильного ответа разрабатывать довольно сложно: наиболее правильный ответ далеко не всегда должен быть самым полным. В противном случае тестируемый при выполнении задания будет выбирать правильный ответ только по признаку полноты. 

Составили тест? Не поленитесь и пройдите по этому чек-листу.

Проверка качества тестовых заданий

• Соответствует ли задание целям тестирования?
• Все высказывания логичны?
• Все формулировки однозначны и лаконичны?
• Технологичен ли тест? (Задания становятся технологичными, если их содержание точно и быстро понимается испытуемыми, и если форма заданий способствует процессу компьютеризации тестирования)
• Правильно ли выбрана форма задания?
• Содержание корректно?
• Правила оценки ответов разработаны заранее и соответствуют форме теста?
• Правильно ли расположены элементы задания?
• Инструкции одинаковы для всех тестируемых?
• Инструкция соответствует форме и содержанию задания?

В этой статье мы обсудили основные аспекты составления тестовых заданий закрытой формы с одним или несколькими правильными ответами. Благодарю вас за внимание и терпение и надеюсь, что эта статья будет полезной для вас. 

Если вы считаете, что стоит продолжить цикл подобных статей и поговорить о методике составления тестовых заданий других видов, напишите, пожалуйста, об этом в комментариях. А если вам нужны готовые инструменты оценки качества обучения, обращайтесь к нам в «Сетевую Академию ЛАНИТ». Будем рады помочь.