Множественный выбор

Оценка, на которую отвечают, выбирая правильные ответы из списка вариантов

Вопрос с несколькими вариантами ответов, в котором в качестве возможных ответов могут быть указаны дни недели.

Множественный выбор ( MC ), ^[1] объективный ответ или MCQ (для вопроса с множественным выбором ) — это форма объективной оценки , в которой респондентам предлагается выбрать только правильный ответ из вариантов, предложенных в виде списка. Формат множественного выбора чаще всего используется в образовательном тестировании, в маркетинговых исследованиях и на выборах , когда человек выбирает между несколькими кандидатами, партиями или политиками.

Хотя Э. Л. Торндайк разработал ранний научный подход к тестированию студентов, именно его помощник Бенджамин Д. Вуд разработал тест с множественным выбором. ^[2] Тестирование с множественным выбором стало популярным в середине 20-го века, когда были разработаны сканеры и машины для обработки данных, чтобы проверять результаты. Кристофер П. Соул создал первые экзамены с множественным выбором для компьютеров на компьютере Sharp Mz 80 в 1982 году. Он был разработан, чтобы помочь людям с дислексией справляться с сельскохозяйственными предметами, поскольку латинские названия растений могут быть трудны для понимания и написания. ^{[ необходима цитата ]}

Номенклатура

Single Best Answer ( SBA или One Best Answer ) — это письменная форма экзамена MCQ, широко используемая в медицинском образовании . ^[3] Эта форма, из которой кандидат должен выбрать лучший ответ, отличается от форм Single Correct Answer , которые могут вызывать путаницу, когда более одного из возможных ответов имеют некоторую обоснованность. Форма SBA четко указывает, что более чем один ответ может иметь элементы, которые являются правильными, но один ответ будет лучшим.

Структура

Машиночитаемый лист с пузырьками для теста с множественным выбором

Задания с множественным выбором состоят из основы и нескольких альтернативных ответов. Основа — это начало — проблема, которую нужно решить, заданный вопрос или неполное утверждение, которое нужно завершить. Варианты — это возможные ответы, из которых может выбирать испытуемый, при этом правильный ответ называется ключом , а неправильные — отвлекающими . ^[4] Только один ответ может быть отмечен как правильный. Это контрастирует с заданиями с множественным выбором, в которых более одного ответа может быть отмечено как правильный.

Обычно правильный ответ приносит определенное количество баллов в общую оценку, а неправильный ответ не приносит ничего. Однако тесты могут также присуждать частичные баллы за неотвеченные вопросы или штрафовать студентов за неправильные ответы, чтобы препятствовать угадыванию. Например, тесты SAT Subject снимают четверть балла с оценки сдающего тест за неправильный ответ.

Для расширенных элементов, таких как элемент прикладных знаний, основа может состоять из нескольких частей. Основа может включать расширенный или вспомогательный материал, такой как виньетка , исследование случая , график , таблица или подробное описание, которое имеет несколько элементов. Может быть включено все, что необходимо для обеспечения максимальной достоверности и подлинности элемента. Основа заканчивается вводным вопросом, объясняющим, как респондент должен ответить. В медицинских элементах с множественным выбором вводной вопрос может спрашивать «Какой наиболее вероятный диагноз?» или «Какой патоген является наиболее вероятной причиной?» со ссылкой на исследование случая, которое было представлено ранее.

Элементы теста с множественным выбором часто в разговорной речи называют «вопросами», но это неправильное название, поскольку многие элементы не сформулированы как вопросы. Например, они могут быть представлены как неполные утверждения, аналогии или математические уравнения. Таким образом, более общий термин «элемент» является более подходящим обозначением. Элементы хранятся в банке элементов .

Примеры

В идеале вопрос с множественным выбором (MCQ) следует задавать в виде «основы» с возможными вариантами ответов, например:

Если и , то что такое ? ${\displaystyle a=1}$ ${\displaystyle b=2}$ ${\displaystyle a+b}$

1. 12
2. 3
3. 4
4. 10

В уравнении найдите x . ${\displaystyle 2x+3=4}$

1. 4
2. 10
3. 0,5
4. 1.5
5. 8

Город, известный как «ИТ-столица Индии»,

1. Бангалор
2. Мумбаи
3. Карачи
4. Детройт

(Правильные ответы — B, C и A соответственно.)

Хорошо написанный вопрос с множественным выбором не содержит явно неправильных или неправдоподобных отвлекающих факторов (например, включение неиндейского города Детройт в третий пример), так что вопрос имеет смысл при прочтении с каждым из отвлекающих факторов, а также с правильным ответом.

Более сложный и хорошо написанный вопрос с множественным выбором выглядит следующим образом:

Примите во внимание следующее:

1. Шахматная доска восемь на восемь клеток.
2. Шахматная доска восемь на восемь клеток с удаленными двумя противоположными углами.
3. Шахматная доска восемь на восемь клеток, у которой удалены все четыре угла.

Какой из них можно выложить с помощью двух костяшек домино (без наложений и зазоров, и с использованием всех костяшек домино, содержащихся на доске)?

1. Я только
2. только II
3. Только I и II
4. Только I и III
5. Я, II и III

Преимущества

Тесты с множественным выбором имеют несколько преимуществ. Если авторы заданий хорошо обучены, а качество заданий гарантировано, это может быть очень эффективным методом оценки. ^[5] Если учащиеся проинструктированы о том, как работает формат заданий, и мифы, окружающие тесты, исправлены, они будут лучше сдавать тест. ^[6] Во многих оценках надежность, как было показано, улучшается с большим количеством заданий в тесте, а при хорошей выборке и заботе о специфичности случая общая надежность теста может быть дополнительно повышена. ^[7]

Тесты с множественным выбором ответов часто требуют меньше времени для проведения при заданном объеме материала, чем тесты, требующие письменных ответов.

Вопросы с множественным выбором подходят для разработки объективных оценочных пунктов, но без обучения автора вопросы могут быть субъективными по своей природе. Поскольку этот стиль теста не требует от учителя интерпретации ответов, тестируемые оцениваются исключительно по их выбору, что создает меньшую вероятность предвзятости учителя в результатах. ^[8] Факторы, не имеющие отношения к оцениваемому материалу (такие как почерк и ясность изложения), не вступают в игру при оценке с множественным выбором, и поэтому кандидат оценивается исключительно по его знанию темы. Наконец, если тестируемые знают, как использовать листы ответов или флажки онлайн-экзамена, на их ответы можно полагаться с ясностью. В целом, тесты с множественным выбором являются самыми сильными предикторами общей успеваемости учащихся по сравнению с другими формами оценки, такими как участие в классе, экзамены по конкретным случаям, письменные задания и имитационные игры. ^[9]

До широкого внедрения SBA в медицинское образование типичной формой экзамена были вопросы типа «верно-неверно». Но в 2000-х годах преподаватели обнаружили, что SBA будут лучше. ^[3]

Недостатки

Самым серьезным недостатком является ограниченность типов знаний, которые можно оценить с помощью тестов с множественным выбором. Тесты с множественным выбором лучше всего подходят для проверки четко определенных или низкоуровневых навыков. Навыки решения проблем и рассуждения более высокого порядка лучше оценивать с помощью тестов с короткими ответами и эссе. ^{[ необходима цитата ]} Однако тесты с множественным выбором часто выбирают не из-за типа оцениваемых знаний, а потому, что они более доступны по цене для тестирования большого количества студентов. Это особенно актуально в Соединенных Штатах и ​​Индии, где тесты с множественным выбором являются предпочтительной формой тестирования с высокими ставками, а размер выборки тестируемых соответственно велик.

Другим недостатком тестов с множественным выбором является возможная неоднозначность в интерпретации экзаменуемым элемента. Неспособность интерпретировать информацию так, как предполагал создатель теста, может привести к «неправильному» ответу, даже если ответ экзаменуемого потенциально действителен. Термин «множественная догадка» использовался для описания этого сценария, поскольку экзаменуемые могут попытаться угадать, а не определить правильный ответ. Тест со свободным ответом позволяет экзаменуемому аргументировать свою точку зрения и потенциально получить зачет.

Кроме того, даже если студенты имеют некоторые знания по вопросу, они не получают зачета за знание этой информации, если они выбирают неправильный ответ, и пункт оценивается дихотомически. Однако вопросы со свободным ответом могут позволить экзаменуемому продемонстрировать частичное понимание предмета и получить частичный зачет. Кроме того, если задается больше вопросов по определенной предметной области или теме, чтобы создать большую выборку, то статистически их уровень знаний по этой теме будет более точно отражен в количестве правильных ответов и окончательных результатах.

Другим недостатком экзаменов с множественным выбором является то, что студент, который не может ответить на конкретный вопрос, может просто выбрать случайный ответ и все равно иметь шанс получить за него оценку. Если случайным образом угадывать ответ, то обычно есть 25-процентный шанс дать его правильно на вопросе с четырьмя вариантами ответов. Это обычная практика для студентов, у которых не осталось времени, давать всем оставшимся вопросам случайные ответы в надежде, что они дадут хотя бы некоторые из них правильно. Многие экзамены, такие как Австралийский конкурс математики и SAT , имеют системы, которые сводят это на нет, в данном случае делая не более выгодным выбор случайного ответа, чем не давать ни одного.

Другая система нейтрализации эффектов случайного выбора — это формула оценки, в которой оценка пропорционально уменьшается на основе количества неправильных ответов и количества возможных вариантов. В этом методе оценка уменьшается на количество неправильных ответов, деленное на среднее количество возможных ответов для всех вопросов в тесте, w / ( c – 1), где w — количество неправильных ответов в тесте , а c — среднее количество возможных вариантов для всех вопросов в тесте . ^[10] Все экзамены, оцениваемые с помощью трехпараметрической модели теории ответов на вопросы, также учитывают угадывание. Это обычно не является большой проблемой, более того, поскольку шансы студента получить значимые оценки путем угадывания очень низки, когда доступно четыре или более вариантов выбора.

Кроме того, важно отметить, что вопросы, сформулированные двусмысленно, могут сбить с толку тестируемых. Общепринято, что вопросы с множественным выбором допускают только один ответ, где один ответ может инкапсулировать набор предыдущих вариантов. Однако некоторые создатели тестов не знают об этом и могут ожидать, что студент выберет несколько ответов без явного разрешения или предоставления конечных вариантов инкапсуляции.

Критики, такие как философ и сторонник образования Жак Деррида , заявили, что, хотя потребность в распространении и проверке базовых знаний является обоснованной, существуют и другие способы удовлетворения этой потребности, помимо использования шпаргалок . ^[11]

Несмотря на все недостатки, формат остается популярным, поскольку MCQ легко создавать, оценивать и анализировать. ^[12]

Изменение ответов

Теория о том, что ученики должны доверять своему первому инстинкту и придерживаться своего первоначального ответа в тесте с множественным выбором, является мифом, который стоит развеять. Исследователи обнаружили, что хотя некоторые люди считают, что менять ответы плохо, это, как правило, приводит к более высокому результату теста. Данные двадцати отдельных исследований показывают, что процент изменений «правильного на неправильное» составляет 20,2%, тогда как процент изменений «неправильного на правильное» составляет 57,8%, почти утроившись. ^[13] Изменение с «правильного на неправильное» может быть более болезненным и запоминающимся ( эффект фон Ресторффа ), но, вероятно, хорошей идеей будет изменить ответ после того, как дополнительное размышление укажет на то, что можно сделать лучший выбор. Фактически, первоначальное влечение человека к определенному варианту ответа вполне может исходить из поверхностной правдоподобности, которую автор теста намеренно встроил в отвлекающий фактор (или неправильный выбор ответа). Авторам тестовых заданий поручено делать свои отвлекающие факторы правдоподобными, но явно неверными. Таким образом, первое инстинктивное влечение тестируемого к отвлекающему фактору часто является реакцией, которую, вероятно, следует пересмотреть в свете тщательного рассмотрения каждого из вариантов ответа. Некоторые тестируемые по некоторым предметам экзамена могут иметь точные первые инстинкты относительно конкретного тестового задания, но это не означает, что все тестируемые должны доверять своему первому инстинкту.

Известные экзамены с множественным выбором

• ДЕЙСТВОВАТЬ
• AIEEE в Индии
• АП
• АСВАБ
• АМС
• Австралийский конкурс по математике
• CFA
• ЦИССП
• КЛЭП
• КОМПЛЕКС
• КЛАТ
• Гонконгский диплом о среднем образовании
• F = ma , преддверие Олимпиады по физике в США
• ФЭ
• GCE Обычный уровень
• GED
• ГРЕ
• ВОРОТА
• Экзамены по естественным наукам в рамках программы диплома IB
• ИИТ-JEE
• Индонезийский национальный экзамен
• ЛСАТ
• МХАТ
• Экзамен на право заниматься адвокатской деятельностью в нескольких штатах
• NCLEX
• PLAB для выпускников медицинских вузов из стран, не входящих в ЕЭЗ, для работы в Великобритании
• ПСАТ
• СБ
• Тест по английскому языку как иностранному
• TOEIC
• USMLE
• NTSE
• NEET(UG) в Индии
• UGC NET в Индии
• Предварительный экзамен UPSC CSE в Индии
• Вступительный экзамен в университет UTME в Нигерии

Смотрите также

• Концептуальный инвентарь
• Расширенные элементы соответствия
• Объективный тест
• Тест (оценка учащихся)
• Закрытый вопрос

Ссылки

1. Пак, Джуйонг (2010). «Конструктивная система тестирования с множественным выбором». Британский журнал образовательных технологий . 41 (6): 1054–1064. doi :10.1111/j.1467-8535.2010.01058.x.
2. «Заметки выпускников». Алькальд . 61 (5): 36 мая 1973 г. ISSN  1535-993X . Проверено 29 ноября 2020 г. .
3. Tan, LT; McAleer, JJ (2008). «Введение вопросов с одним лучшим ответом в качестве проверки знаний на выпускном экзамене для стипендиата Королевского колледжа радиологов по клинической онкологии». Clin Oncol (R Coll Radiol) . 20 (8): 571–6. doi :10.1016/j.clon.2008.05.010. PMID  18585017.
4. Кехо, Джерард (1995). «Написание тестовых заданий с множественным выбором». Практическая оценка, исследование и оценка . 4 (9).
5. Руководство по написанию статей Архивировано 29 сентября 2007 г. на Wayback Machine Национальным советом медицинских экспертов
6. Беккерт, Лутц; Уилкинсон, Тим Дж.; Сейнсбери, Ричард (2003). «Курс обучения и подготовки к экзаменам, основанный на потребностях, улучшает успеваемость студентов». Медицинское образование . 37 (5): 424–428. doi :10.1046/j.1365-2923.2003.01499.x. PMID  12709183. S2CID  11096249.
7. Даунинг, Стивен М. (2004). «Надежность: о воспроизводимости данных оценки». Медицинское образование . 38 (9): 1006–1012. doi :10.1111/j.1365-2929.2004.01932.x. PMID  15327684. S2CID  1150035.
8. ДеПальма, Энтони (1 ноября 1990 г.). «Изменения, принятые в вступительных тестах в колледж». New York Times . Получено 22 августа 2012 г.
9. Бонтис, Н.; Харди, Т.; Серенко, А. (2009). «Методы оценки навыков и знаний в классе бизнес-стратегии» (PDF) . Международный журнал преподавания и тематических исследований . 2 (2): 162–180. doi :10.1504/IJTCS.2009.031060.
10. "Формула оценки тестов с множественным выбором (коррекция на угадывание)" (PDF) . Архивировано из оригинала (PDF) 2011-07-21 . Получено 2011-05-20 .
11. Жак Деррида (1990) стр. 334-5 Еще раз сверху: о праве на философию , интервью с Робертом Маджори для Libération , 15 ноября 1990 г., переиздано в Points (1995).
12. "Тесты с множественным выбором: пересмотр плюсов и минусов". Faculty Focus | Higher Ed Teaching & Learning . 2018-02-21 . Получено 2019-03-22 .
13. Бенджамин, Луди Т.; Кавелл, Тимоти А.; Шалленбергер, Уильям Р. (1984). «Оставаться с первоначальными ответами на объективные тесты: это миф?». Преподавание психологии . 11 (3): 133–141. doi :10.1177/009862838401100303. S2CID  33889890.