Представляется, что хотя и могут быть сконструированы все типы
заданий, наиболее эффективным в данном случае без сомнения будет
задание с вариантами выбора.
На этом первом примере ясно проиллюстрирована основная труд-
ность при разработке заданий как со свободными, так и с ограничен-
ными ответами - необходимость так формулировать задания, чтобы
испытуемые, имеющие достаточный запас навыков или знаний, да-
вали правильный ответ. Это означает, что необходимо создавать
задания, на которые возможен только один правильный ответ, и
такой ответ, конечно же, должен быть точным.
82
ПРИМЕР 2.
Здесь в качестве материала для тестирования предлагаются зна-
ния об облических (зависимых) факторах в факторном анализе.
(1) Задание с произвольным ответом: Что такое облические фак-
торы?
Об облических факторах так много может быть написано и уже
написано, что любой адекватный ответ будет неизбежно длинным. В
результате возникнет безнадежная проблема попытки вычислить
баллы по данному заданию. Очевидно, что это крайне неудачный
пример, а поэтому следует быть более точным при формулировке
заданий. Прежде надо было бы конкретно решить, что же мы хотим
выяснить.
(2) Задание с ограниченным ответом: Облические факторы --
это. . . (одно слово).
Хотя в этой форме задания длина ответа ограничивается, ясно, что
это более удачное задание. Так, в качестве ответов могли бы быть
следующие слова: "коррелирующие", "подвергнутые ротации" ,
"значимые" (поскольку только значимые факторы подвергаются ро-
тации), "комплексные" (потерминологииГилфорда), "простые" (по
Кэттеллу), и так далее. Как же тогда данное задание может быть
сделано еще более конкретным?
Если мы хотим протестировать знание того, что облические фак-
торы являются коррелирующими, это, конечно же, проще всего сде-
лать при помощи альтернативного задания: "Облические факторы
являются коррелирующими. Д/Н". Если окажется, что возможность
случайного угадывания правильного ответа оказывает слишком
большое влияние на результат, то тогда должно быть сконструирова-
но задание с несколькими вариантами выбора: "Облические факторы
являются: (а) некоррелируемыми; (б) не подвергаемыми ротации;
(в) коррелируемыми; (г) ортогональными; (д) эвклидовыми." В дан-
ном задании информация тестируется весьма точно, и все дистракто-
ры были выбраны исходя из того, что каждый из них является терми-
ном описания факторов или других многомерных векторов, но под-
ходит только один правильный ответ. Таким образом, если мы хотим
протестировать знания о корреляции облических факторов, то ясно,
что обе формы заданий - альтернативного типа и с вариантами
выбора - просты и их легко сформулировать. Чтобы создать эквива-
лентные задания со свободными или ограниченными ответами, необ-
ходимо заставить испытуемого, посредством специальной фразиров-
ки задания, сосредоточиться на корреляционном аспекте зависимос-
ти факторов. Так:
В англ.языке это одно слово (Прим.ред,)
83
Задание со свободным ответом:
Каким образом облические факторы отличаются от ортого-
нач-ьных?
Ответ на задание будет засчитан как правильный, если испытуе-
мые укажут, что облические факторы коррелируют. Однако, это
задание все еще является "слабеньким", поскольку испытуемые мо-
гут дать правильный ответ,- облические факторы размещены отно-
сительно друг друга не пот гг".""- -
сительно
--"" имиры размещены отно-
niCJibHO друг друга не под прямыми углами. Следовательно, эта
форма, хотя и лучшая, чем в исходной формулировке, все еще не
является достаточно эффективной.
Какая информация о психологическом значении может быть
получена из угла, образуемого облическими факторами?
Наконец-то этот вопрос отточен; теперь возможен только один
правильный краткий ответ. Если испытуемые знают об облических
факторах, они должны упомянуть о корреляциях; если они сделают
это, то получат свои баллы.
Нет никакого сомнения в том, что создание заданий, подобных
этому (которое наконец-то выглядит достойным анализа заданий, о
чем будет говориться далее), - гораздо более трудная задача, чем
конструирование подобных точно работающих заданий с нескольки-
ми вариантами выбора. Выигрыш, получаемый разработчиком тес-
тов от применения заданий со свободными ответами, подобных при-
веденному выше, состоит в том, что для испытуемых они более инте-
ресны, менее очевидны как проба проверки знаний и предполагают
некоторый элемент логических рассуждений, - вот почему задания
со свободными ответами затрагивают больше сведений, чем задания
с вариантами выбора. Так, наше задание с вариантами выбора могло
было быть выполнено при условии, что испытуемые знали, о том, что
облические факторы коррелируют. Однако, чтобы выполнить зада-
ние со свободным ответом, испытуемый должен знать: (1) что обли-
ческие факторы коррелируют; (2) что корреляция связана с зависи-
мостью; (3) что корреляция является психологически значимой. Сле-
довательно, задание со свободным ответом является более богатым и
более трудным. Чтобы протестировать фрагмент (2) из этого задания,
пришлось бы построить еще одно задание с вариантами выбора.
Именно относительная сложность делает задания со свободными от-
ветами более привлекательными, чем задания с вариантами выбора,
которые неизбежно будут закостеневшими и примитивными.
Задание с ограниченным ответом:
/70 углам между облическими факторами может быть получена
их. . . (одно слово)
84
Такая форма задания с ограничением на ответ привлекательна
тем, что, поскольку для его выполнения нужно указать только одно
слово, обеспечивается превосходная надежность, а ответ считается
правильным или нет, без привлечения каких-либо субъективных
суждений.
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114