Подробнее о том, как принято оформлять задания

SPL

Как написать инструкцию к тестам 
Инструкция – это общие требования к выполнению тестового задания. Она должна устранить все вопросы испытуемых об оформлении своих ответов. Кроме того, в тексте инструкции оговаривают специфику задания, например, указывают количество правильных ответов в тесте (один/несколько).

Для тестовых заданий с выбором одного правильного ответа в зависимости от способа проведения тестирования можно предложить следующие варианты инструкций.

• Выберите один правильный ответ.
  
• Внимательно прочитайте текст задания и выберите верный ответ из списка.
  
• Выпишите номер тестового задания и индекс правильного ответа. 
  
• Обведите кружком букву (номер) правильного ответа.
  
• Для ответа нажмите клавишу с буквой (номером) правильного ответа.

Иногда, по замыслу автора, при разработке задания закладываются несколько правильных ответов, среди которых есть более и менее предпочтительные. В этом случае задание может сопровождаться следующей инструкцией: «Выберите наиболее правильный ответ».
Для тестовых заданий с выбором нескольких правильных ответов в зависимости от способа проведения тестирования можно предложить следующие варианты инструкций.

• Выберите несколько правильных ответов.
  
• Выберите все правильные ответы.
  
• Отвечая на задание теста, нажимайте на клавиши с буквами (номерами) всех правильных ответов.

Для тестовых заданий на выбор неправильного ответа инструкция может быть такой: «Выберите неправильный ответ».
Для группы однотипных заданий допускается делать одну инструкцию, которая помещается в начале теста или данной группы заданий в тесте.
Как правильно сформулировать основную часть задания 
Эффективность и технологичность теста во многом зависят от того, насколько грамотно сформулированы задания. Если тестируемый не поймет смысл вопроса, ему придется отвечать наугад. А это уже минус к объективности конечного результата. Потому важно тщательно проработать каждое задание. Вот несколько рекомендаций.
1. Рекомендуется, чтобы задания в тесте были формулированы в форме утверждений, которые после ответов испытуемых естественным образом превратятся в истинные или ложные высказывания (рис. 1).

Если продолжить утверждение из основной части этого задания правильным ответом (в данном случае это вариант Б), получится истинное высказывание: Признаком протекания химической реакции между оксидом меди и водородом является изменение цвета. При «подстановке» неправильного ответа высказывание получится ложным. 
По мнению многих отечественных тестологов (В.С. Аванесова, М.Б. Челышковой, В.С. Кима и др.), смысл тестового утверждения улавливается всегда лучше, чем смысл вопроса, потому что в тестовых утверждениях нет ни одного лишнего слова и даже знака, в то время как вопрос требует ряда дополнительных слов и знаков для выражения требуемого смысла, значения и интонации. Вопросы и ответы на них иногда бывают столь неопределенными и многословными, что для выявления их истинности требуются большие затраты времени и сил, в то время как технологичная методика тестирования предполагает четкую и быструю дифференцируемость ответов.
Действительно, если трансформировать задание, составленное в форме вопроса, в логическое утверждение, мы увидим, что задание уж точно не стало хуже, а даже выиграло – стало более кратким, понятным, лаконичным. После выбора ответа такое утверждение превратится в законченное высказывание, истинность или ложность которого легко поддается пониманию и оценке. 
Пример 1. Задание в вопросительной форме:
Инструкция: Выберите один правильный ответ.
С каким из названных событий связано окончание периода разрядки международной напряженности в 1970-е гг.?

• начало Корейской войны
  
• разрыв отношений с Югославией
  
• конфликт с Китаем
  
• ввод советских войск в Афганистан

То же задание в виде логического утверждения:
Окончание периода разрядки международной напряженности в 1970-е гг. связано c

• началом Корейской войны
  
• разрывом отношений с Югославией
  
• конфликтом с Китаем
  
• вводом советских войск в Афганистан

Пример 2. Задание в вопросительной форме:
Инструкция: Выберите несколько правильных ответов.
Какие из перечисленных примеров относят к ароморфозам?

• возникновение теплокровности у позвоночных
  
• развитие трехкамерного сердца у земноводных
  
• формирование торпедообразного тела у акул
  
• развитие зародыша внутри матки
  
• появление рогов у копытных
  
• формирование крыльев у летучих мышей

То же задание в виде логического утверждения:
К ароморфозам относят

• возникновение теплокровности у позвоночных
  
• развитие трехкамерного сердца у земноводных
  
• формирование торпедообразного тела у акул
  
• развитие зародыша внутри матки
  
• появление рогов у копытных
  
• формирование крыльев у летучих мышей

Подобной трансформации легко поддается большинство заданий, сформулированных в вопросительной форме. Иногда возникают ситуации, когда, казалось бы, задание формулируется только в виде вопроса. Однако после тщательного анализа цели задания и его содержания все же удается подобрать утвердительную форму задания.
Конечно, утверждение об использовании в заданиях исключительно утвердительной формы не категорично. К тому же иногда встречаются задания, в которых вопросительная форма выглядит удобнее и короче. 
Вопросительная форма заданий по-прежнему используется при составлении тестов и в России, и за рубежом, и имеет много сторонников. Выбор остается за вами. Главное – не забывать, что выбранная вами форма задания должна быть максимально понятна для испытуемых.
Лично я являюсь сторонником формулировки заданий в виде утверждений, считаю эту форму наиболее удачной, использую только ее и ничего с собой поделать не могу.   
2. Текст задания должен содержать достаточную, недвусмысленную и релевантную информацию для ответа. 
3. Формулировка задания должна быть грамотной, согласованной с формой вариантов ответа (простите за капитанство).
4. Формулировка задания должна быть предельно лаконичной, но не в ущерб пониманию сути задания. Необходимо исключить повторы слов и, тем более, целых фраз. Чем лаконичнее задание, тем лучше оно воспринимается. 
5. Рекомендуется, чтобы основная часть задания состояла из одного предложения (не более 7-8 слов), а во всем задании было не более одного придаточного предложения. Эта рекомендация подходит, конечно, не ко всем случаям. Например, тестовое задание может представлять собой кейс/ситуационную задачу, тогда одним предложением точно не обойтись.
6. Если задание сформулировано в вопросительной форме, предпочтительнее применять прямые вопросы, представляющие собой полное предложение с вопросительным знаком в конце.
7. В основной части задания не должна присутствовать дополнительная информация, не существенная для поставленной проблемы.
8. Из текста задания нужно исключить все вербальные ассоциации, по которым можно догадаться о правильном ответе.
9. Стоит исключить из формулировки задания частицу «не». А если НЕ получается, ее надо выделить прописными буквами (как в этом предложении).
10. Исключаются задания, содержащие оценочные суждения тестируемого: «на ваш взгляд», «по вашему мнению», «что вы думаете…», «согласны ли вы с …», «как бы вы сформулировали…» и т.п. 
11. Рисунки, графики, схемы, используемые в задании, должны соответствовать тексту (рис. 2). И, конечно же, присутствие графических объектов в задании должно быть оправдано. Не стоит «добавлять картинку» просто для красоты. 

12. Элементы рисунка, графика, схемы рекомендуется обозначать по часовой стрелке (рис. 3).
 

13. В большинстве случаев варианты ответов замыкают задания (так было и в примерах выше), образуя завершенное истинное или ложное высказывание. Но иногда ответы приходится ставить в середине или за одно-два слова от конца содержательной основы задания теста. Тогда можно использовать такой вариант:
Инструкция: Выберите один правильный ответ.
Невская битва произошла в … году.

• 1198
  
• 1240
  
• 1242
  
• 1245

14. Ответ на одно тестовое задание не должен служить ключом к правильным ответам на другие задания теста. Это нарушает условие локальной независимости заданий. В этом случае невозможно сделать корректный вывод о том,  знает ли испытуемый ответ на второе и последующие задания, или он не справился с ними потому что неправильно ответил на первый вопрос. 

Как подобрать дистракторы
К каждому тестовому заданию нужно подобрать правдоподобные неправильные варианты ответа (дистракторы). Это одна из самых сложных задач, стоящих перед составителем тестов. Перед вами основные рекомендации по подбору дистракторов: 
1. Все предложенные в задании дистракторы должны быть правдоподобными, теоретически вероятными.
Наиболее хороши дистракторы, подобранные на основе типичных ошибок, которые допускают тестируемые, или на основе распространенных заблуждений.
2. Все дистракторы к заданию должны быть одинаково привлекательными для тестируемых, не знающих правильного ответа.
Дистрактор, который никто не выбирает в качестве правильного ответа, обычно называют неработающим. Если в задании имеется хотя бы один неработающий дистрактор, удалите его, и вы сразу увидите реальное, а не формальное число ответов к заданию теста. 
Если все дистракторы в задании не работают, все испытуемые выполнят даже сложное задание верно, выбрав единственный правдоподобный ответ. Например, такое задание: 
Инструкция: Выберите один правильный ответ.
Во вращении предплечья наружу участвует

• двуглавая мышца плеча
  
• двуглавая мышца бедра 
  
• икроножная мышца
  
• прямая мышца живота
  
• собственно жевательная мышца

Даже не будучи знатоком данной предметной области, нетрудно догадаться, что мышцы, расположенные на нижней конечности, животе или черепе, не могут приводить в движение предплечье. Получается, что в тесте нет ни одного работающего дистрактора. Имеется всего один работающий вариант ответа, его и выберут испытуемые как единственно правильный. 
Вы спросите: «А что же здесь плохого»? Как мы писали выше, педагогические тесты создаются для объективной оценки структуры и качества знаний. А о какой объективной оценке можно говорить, если правильный ответ можно просто угадать, не имея совсем никакого представления о предмете? Конечно, если целью тестирования было узнать, отличает ли испытуемый живот или бедро от предплечья, то можно сказать, что все прошло успешно. Но все же перед тестами обычно ставятся более серьезные задачи.    
Если в предложенном задании мы заменим неработающие дистракторы на правдоподобные, теоретически вероятные (все перечисленные мышцы тем или иным образом двигают предплечье), справиться с ним так просто будет нельзя:
Во вращении предплечья наружу участвует

• плечевая мышца
  
• двуглавая мышца плеча
  
• трехглавая мышца плеча
  
• локтевая мышца
  
• круглый пронатор

3. Дистракторы должны быть однородными, подобранными по общему (единому) основанию. 
Пример 1: Задание с однородными дистракторами
Инструкция: Выберите один правильный ответ.
Телиоспоры возникают из

• урединиоспор
  
• эциоспор
  
• базидиоспор
  
• пикниоспор

Здесь все дистракторы подобраны по одному основанию, т.к. все они отвечают на вопрос «из чего?» и характеризуют то, из чего могут возникнуть телиоспоры.  
А в следующем задании дистракторы подобраны неудачно. 
Пример 2: Задание с неоднородными дистракторами
Инструкция: Выберите несколько правильных ответов.
Телиоспоры возникают  

• из урединиоспор
  
• из эциоспор
  
• поздней осенью на том же мицелии, на котором летом формировались урединиоспоры
  
• весной в результате слияния дикариона и последующего мейоза

В этом задании два первых ответа выбраны по одному основанию т.к. все они отвечают на вопрос «из чего?». Третий ответ подобран по другому основанию, поскольку соответствует вопросам «когда?» и «где?». 
Последний ответ не совпадает по основанию выбора ни с одним из предыдущих, он отвечает на вопросы «когда?» и «в результате чего?».
Самая частая причина появления в заданиях неоднородных дистракторов понятна – при невозможности подобрать нужное число дистракторов по одному основанию автор теста увеличивает их число, включая дополнительные, выбранные по другому основанию ответы. 
Иногда причиной является желание автора проверить с помощью одного задания как можно больше знаний испытуемых. Возможно, это оправдано спецификой предмета, однако некорректно с точки зрения требований тестовой технологии. 
Тестовое задание должно проверять один элемент знания. Если это не так, то становится неясным, с каким именно элементом знания тестируемый не справляется, в чем заключена причина невыполнения задания.
4. Все ответы должны быть параллельными по конструкции и грамматически согласованными с основной частью задания теста.
5. Все повторяющиеся в вариантах ответа слова (как в примере ниже) следует перенести в формулировку заданий.
Инструкция: Выберите один правильный ответ.
Заштрихованная территория на карте России показывает районы

• газовых месторождений
  
• нефтяных месторождений
  
• месторождений каменного угля
  
• месторождений калийной соли

Вот что получится после небольшой правки этого примера:
Инструкция: Выберите один правильный ответ.
Заштрихованная территория на карте России показывает районы месторождений

• газовых
  
• нефтяных
  
• каменного угля
  
• калийной соли

6. Рекомендуется использовать длинные задания и короткие ответы. В противоположном случае на прочтение и анализ ответов тратится слишком много времени.
7. Из числа неправильных исключаются ответы, вытекающие один из другого.
8. Ни один из дистракторов не должен быть частично правильным ответом, который при определенных условиях превратится в правильный ответ.
9. Ответы не должны отрицать смысл самого задания. «Почему? – спросите вы, – ведь так часто делают». Давайте разберемся на примере следующего задания:
Инструкция: Выберите один правильный ответ.
PDF-файл можно преобразовать в документ Word, если на вкладке «Файл» выбрать команду

• Открыть
  
• Сохранить как 
  
• Экспорт
  
• PDF-файл нельзя преобразовать в документ Word

В этом примере четвертый ответ прямо противоречит основной части, утверждающей существование возможности преобразовать PDF-файл в документ Word. Налицо явная логическая ошибка. В задании же не спрашивается, можно ли преобразовать, а утверждается, что можно, а варианты ответов представляют собой перечисление способов преобразования.   
Если четвертый ответ – дистрактор, то в качестве правдоподобного ответа его вряд ли выберет хотя бы один тестируемый. Тогда этот ответ как неработающий дистрактор необходимо удалить из теста.
Если именно четвертый ответ является верным, все задание будет нерабочим, т.к. большинство тестируемых увидят логическую несообразность формулировок и пропустят задание, посчитав его ошибкой разработчика теста.
Если цель задания – выяснить, знает ли испытуемый, можно ли вообще преобразовать PDF-файл в документ Word или нет, лучше сформулировать вопрос по-другому, без нарушения логики: 
Преобразовать PDF-файл в документ Word

• можно
  
• нельзя

10. Не следует использовать в заданиях ответы типа «все вышеперечисленные», «ни один из вышеперечисленных» или, того хуже, – «все ответы неправильные» и «правильного ответа нет». Эта рекомендация, кстати, так же часто вызывает вопросы и несогласие аудитории, как и предыдущая. 
С точки зрения большинства тестологов, применение подобных ответов не оправдано по следующим причинам:

• повышение вероятности угадывания правильного ответа, так как чаще всего это будет неработающий дистрактор, добавленный составителем «для количества» при трудностях с подбором качественных дистракторов;
  
• нарушение логического закона исключенного третьего – если инструкция предписывает выбрать один верный ответ, то в задании он должен быть. Это придает однозначность замыслу самого задания и не допускает противоречивых толкований у испытуемых.

11. Не рекомендуется использовать слова «всегда», «никогда», «ни одного» и т.п., так как в отдельных случаях они способствуют угадыванию.
12. Частота выбора одного и того же номера места для правильного ответа в различных заданиях теста должна быть примерно одинакова или номер места для правильного ответа выбирается в случайном порядке.
13. Дистракторы из одного задания не используются в качестве ответов к другим заданиям теста.
14. Все ответы к одному заданию должны быть примерно одной длины. Если это трудновыполнимо, возможен вариант, когда в задании половина длинных ответов, половина коротких. Это нужно для того, чтобы исключить вероятность угадывания правильного ответа по признаку его полноты или краткости. Многие разработчики тестов грешат тем, что в их заданиях правильные ответы почти всегда или длиннее, или короче неправильных. Эта тенденция очень быстро «считывается» испытуемыми и делает общий результат теста необъективным. Следующая рекомендация имеет такое же обоснование.
15. Правильный ответ не должен быть длиннее других.
16. Дистракторы располагаются в логической последовательности: числа – по возрастанию, буквы – по алфавиту. Это удобнее при поиске тестируемым правильного ответа.
17. Количество дистракторов к заданию подбирается таким образом, чтобы задание не было слишком громоздким, но и чтобы исключить большую вероятность угадывания правильного ответа. Поэтому чаще всего в заданиях бывает три или четыре дистрактора и один правильный ответ.
В отдельных случаях, например, в заданиях с выбором нескольких правильных ответов, количество дистракторов может достигать шести–семи.
18. Число дистракторов и правильных ответов в разных заданиях может быть разным. Оно не должно быть одинаковым во всех заданиях теста.
Источник
По какому принципу придумывают тестовые задания
Из десяти принципов разработки тестовых заданий закрытой формы, которые выделяет В. С. Аванесов, предлагаю рассмотреть основные. Для наглядности будем это делать на примерах.
1. Принцип противоречия применяется при создании заданий с двумя вариантами ответов. Здесь один ответ отрицает другой. Например:
Инструкция: Выберите один правильный ответ.
Поощрения в трудовую книжку

• записываются
  
• не записываются

2. Принцип противоположности ответов близок по смыслу к принципу противоречия, но при противоречии используется отрицание, а при противоположности один ответ заменяется другим, антонимичным по смыслу. Например:
Инструкция: Выберите один правильный ответ.
С увеличением заряда ядра активность щелочных металлов

• возрастает
  
• убывает

Возможность промежуточных состояний при использовании принципа противоречия позволяет увеличить число ответов, например, до трех. Например:
Инструкция: Выберите один правильный ответ.
При движении тягового органа конвейера реле скорости

• включено
  
• выключено
  
• заблокировано

3. Тесты, основанные на принципе однородности, содержат ответы, относящиеся к одному роду, виду, или отображают основные стороны, грани явления. Например:
Инструкция: Выберите один правильный ответ.
Основателем андрагогики как науки является

• Ноулз
  
• Джарвис
  
• Холтон
  
• Ушинский

Инструкция: выберите несколько правильных ответов.
Буква «о» пишется в словах

• пл_вец
  
• пок_рить вершину
  
• распол_гать 
  
• осн_щенный
  
• ум_лять значение

4. Принцип кумуляции означает, что второй ответ вбирает в себя (аккумулирует) содержание первого, третий – содержание второго и т.д.
Пример:
Инструкция: Выберите один правильный ответ.
Чтобы задать движение точки естественным способом, надо знать

• траекторию
  
• траекторию и закон движения
  
• траекторию, закон движения, начало отсчета
  
• траекторию, закон движения, начало отсчета, скорость

Тестируемые, привыкшие давать полные и правильные ответы, выбирают обычно последний ответ в таких заданиях, ошибочно полагая, что он всегда самый правильный. Поэтому при разработке заданий по принципу кумуляции полезно иметь большую часть правильных ответов не на последнем месте. 
5. Принцип сочетания. Используется сочетание слов (знаков) по два или по три, реже четыре, в каждом ответе.
Пример 1: сочетание более или менее однородных и правдоподобных пар ответов
Инструкция: Выберите один правильный ответ.
Ф. Шопен писал

• оперы и симфонии
  
• балеты и оратории
  
• мазурки и ноктюрны

Пример 2: сочетание одного слова (понятия) с несколькими другими
Инструкция: Выберите один правильный ответ.
НЕ имеют ядра клетки крови

• эритроциты и лейкоциты
  
• эритроциты и тромбоциты
  
• эритроциты и лимфоциты
  
• эритроциты и базофилы

Пример 3: сочетание ответов по правилу цепочки, когда последнее слово в первом ответе становится первым во втором ответе, последнее во втором – первым в третьем и т.д.)
Инструкция: Выберите один правильный ответ.
Служебными частями речи являются

• предлоги, союзы, частицы
  
• частицы, союзы, местоимения
  
• местоимения, частицы, предлоги

6. При использовании принципа градуирования ответы располагаются по возрастанию (увеличению) или по убыванию (уменьшению). Этот принцип применим для заданий с тремя и большим числом ответов. Например:
Инструкция: Выберите один правильный ответ.
Растворимость газов при повышении температуры

• увеличивается
  
• остается без изменений
  
• уменьшается

Согласно ч. 3 ст. 5.63 КоАП РФ, нарушение должностным лицом порядка или сроков рассмотрения жалобы влечет наложение административного штрафа в размере … рублей.

• от трех тысяч до пяти тысяч 
  
• от пяти тысяч до десяти тысяч 
  
• от десяти тысяч до пятнадцати тысяч 
  
• от двадцати тысяч до тридцати тысяч 

7. Принцип формулирования заданий с ответами, правильными в различной мере, требует изменения инструкции, содержания задания и логики подбора ответов.
Инструкция, как мы уже говорили, обычно пишется так: Выберите наиболее правильный ответ.
Задача таких заданий – проверить сопоставительные знания, а ответы формулируются так, чтобы был реальный выбор между ответами, правильными в разной степени. Например:
Инструкция: Выберите наиболее правильный ответ.
Зигота – это

• одна яйцеклетка
  
• оплодотворенная яйцеклетка
  
• диплоидная клетка, образующаяся в результате оплодотворения
  
• одноклеточная стадия развития многоклеточного организма млекопитающих

В этом задании наиболее правильным считается третий ответ (он наиболее емко и точно описывает все характеристики зиготы), следующий по степени правильности – второй ответ (он содержит совершенно правильное, но менее полное определение зиготы), затем четвертый (потому что зиготы образуются не только у млекопитающих). На последнем месте по степени правильности находится первый ответ – он самый неполный, ведь одной яйцеклетки для образования зиготы явно недостаточно.
Задания на выбор наиболее правильного ответа разрабатывать довольно сложно: наиболее правильный ответ далеко не всегда должен быть самым полным. В противном случае тестируемый при выполнении задания будет выбирать правильный ответ только по признаку полноты. 
Составили тест? Не поленитесь и пройдите по этому чек-листу.
Проверка качества тестовых заданий

• Соответствует ли задание целям тестирования?
  
• Все высказывания логичны?
  
• Все формулировки однозначны и лаконичны?
  
• Технологичен ли тест? (Задания становятся технологичными, если их содержание точно и быстро понимается испытуемыми, и если форма заданий способствует процессу компьютеризации тестирования)
  
• Правильно ли выбрана форма задания?
  
• Содержание корректно?
  
• Правила оценки ответов разработаны заранее и соответствуют форме теста?
  
• Правильно ли расположены элементы задания?
  
• Инструкции одинаковы для всех тестируемых?
  
• Инструкция соответствует форме и содержанию задания?

В этой статье мы обсудили основные аспекты составления тестовых заданий закрытой формы с одним или несколькими правильными ответами. Благодарю вас за внимание и терпение и надеюсь, что эта статья будет полезной для вас. 
Если вы считаете, что стоит продолжить цикл подобных статей и поговорить о методике составления тестовых заданий других видов, напишите, пожалуйста, об этом в комментариях. А если вам нужны готовые инструменты оценки качества обучения, обращайтесь к нам в «Сетевую Академию ЛАНИТ». Будем рады помочь.
===========
Источник:
habr.com
===========
Похожие новости:

• [Управление разработкой, Управление персоналом, Интервью] Профессия СТО
  
• [Управление проектами, Управление персоналом] Как поменять проблемный жизненный сценарий на сценарий Счастья?
  
• [Программирование, Машинное обучение, Учебный процесс в IT, Социальные сети и сообщества, Изучение языков] 9 Reasons Why Students Don’t Want You as a Teacher
  
• [Управление персоналом] Фидбэк. Зачем развивать обратную связь в компании и как давать ее правильно: исследования, рекомендации, практики
  
• [Профессиональная литература, Управление разработкой, Управление проектами, Управление персоналом, Карьера в IT-индустрии] 10 полезных книг для менеджера и лидера в IT секторе
  
• [Терминология IT, Учебный процесс в IT, Образование за рубежом, Карьера в IT-индустрии] Наше ИТ и их Computer Science
  
• [Управление проектами, GTD, Управление персоналом, Мозг] Список задач vs Календарь — сравнение инструментов управления задачами
  
• [Учебный процесс в IT, Карьера в IT-индустрии] Яндекс.Практикум выпустил подарочные сертификаты к Новому году
  
• [Управление персоналом] Опрос: разговор о повышении зарплаты — с готовым оффером или без?
  
• [Управление персоналом, Карьера в IT-индустрии] Продакт-менеджмент как профессия: востребованность, зарплата и другие нюансы

Теги для поиска: #_uchebnyj_protsess_v_it (Учебный процесс в IT), #_kontentmarketing (Контент-маркетинг), #_upravlenie_personalom (Управление персоналом), #_lanit (ланит), #_setevaja_akademija (сетевая академия), #_testy (тесты), #_kak_sostavit_test (как составить тест), #_blog_kompanii_gk_lanit (
Блог компании ГК ЛАНИТ
), #_uchebnyj_protsess_v_it (
Учебный процесс в IT
), #_kontentmarketing (
Контент-маркетинг
), #_upravlenie_personalom (
Управление персоналом
)