ТОП авторов и книг ИСКАТЬ КНИГУ В БИБЛИОТЕКЕ
ш а о И 1 to s л 1 1правильное принятие.S t С-х (и С U 1 л <о ? S 1" о. >1Ї <и о. х ш
;(38)
(шибочное неп зиняти/
(22)
///
т////
///м-//1111/
itfMiiii///ч
////тii/ill/
Прзвильное/////Mf-iw iiiiii/
непри (3нитие 3)тiiчillОшибочное пр (7)инятие
/iii
s X т 5 1/
той. Таким о, которые ост нормативные по-
ного успеха вао тесте Даала соответсеи,
бораприменяется при клиническоеa Тестировании
ошибоозо Р практике "Ри, если
ложительным в меди "азываются ит называется
Этот Рогии Результаты JC если п означает,
--
видов "?"Їоз относительно вьи учитывать
нота), а ределенных исключить н о не-
иснытуемых. Вно вьо характер Р серьезные
должен быть дос одимо, J может н граждан-
ожных афицированныи Ря на отбор Jo боль-
достаточно здесь Ует важнее нансла неудач.
щерб или У условиях быв большего ием
"Р-
установленвТо о можно
критериальнораспределение Р, методу ег, 1966;
Kuo-Cheng Hs ep потери, свя
156 ПРИНЦИПЫ ПСИХОЛОГИЧЕСКОГО ТЕСТИРОВАНИЯ
работой вновь принятых сотрудников с 60 до 84 может служить основа-
нием для оценки преимуществ от использования теста.
Теория статистических решений была разработана А. Уолдом
(A. Wald, 1950) применительно к решениям, принимаемым при контроле
качества промышленных изделий. Модификация этого подхода примени-
тельно к составлению и интерпретации психологических тестов была
осуществлена Л. Кронбахом и Г. Глесером (L. J. Cronbach, G. С. Glesser,
1965). Теория решений в принципе представляет собой попытку придать
процессу принятия решения математическую форму, с тем чтобы исполь-
зовать имеющуюся информацию для выработки в конкретных обстоя-
тельствах наиболее эффективных решений. Математические процедуры,
применяемые в теории решений, весьма сложны, и лишь немногие из них
имеют форму, приемлемую для непосредственного использования
в практических задачах тестирования. Некоторые из основных понятий
теории решений, однако, помогают лучше объяснить ряд касающихся те-
стов вопросов. Часть идей, составивших основу теории решений, была
введена в тестирование еще до того, как был разработан формальный
аппарат этой теории.
Предсказание результатов. Своего рода предвестником теории
решений в психологическом тестировании явились таблицы Тейлора-
Расселла (Н.С. Taylor, J.T. Russell, 1939), позволившие определить вы-
игрыш в точности отбора от использования теста. Для работы с табли-
цами нужно знать коэффициент валидности теста, индекс отбора
и базовый уровень, т.е. oi носи тельные количесгно coip\ шиков, спра-
вляющихся со своими обязанностями и набранных случайно (без исполь-
зования теста). Изменение любого из этих параметров может повлиять
на прогностическую эффективность теста.
В качестве примера приведем одну из таблиц Тейлора-Расселла, от-
вечающую базовому уровню 0,60 (табл. 14). В верхней ее части приве-
дены различные значения индекса отбора, в крайнем левом столбце-
коэффициенты валидности, а в с троках-относительное число успехов
среди принятых на работу по результатам теста. Разность между такой
величиной и 0,60 указывает на выигрыш от применения теста.
Очевидно, если индекс отбора равен 1,0, т.е. когда приему подлежат
все претенденты, ни один тест, как бы валиден он ни был, не улучшит ка-
чества отбора. Из табл. 14 видно, что при индексе отбора, равном 0,95,
даже тест с коэффициентом валидности, равным 1,0, повышает долю ус-
пехов только на 0,03 (с 0,60 до 0,63). Напротив, если из поступающих
нужно отобрать только 5Ї/", то тест обеспечивает рост правильно приня-
тых с 0,60 до 0,82. Этот рост представляет инкрементную валидность те-
ста (L. Sechrest, 1963), или рост прогностической валидности теста,
и указывает на роль теста в улучшении отбора лиц, которые в дальней-
шем будут удовлетворять минимальным требованиям критериального
выполнения. Применяя таблицы Тейлора-Расселла, необходимо, конеч-
но, знать валидность теста для группы именно того типа, по которой
определялся базовый уровень. Иными словами, польза от применения
теста оценивается не вероятностью успеха отобранных с его помощью
претендентов (если, конечно, до этого поступавшие на работу не при-
нимались наугад, что маловероятно), а тем, насколько улучшает проце-
дуру отбора, основывающуюся на сведениях о предыдущей деятельно-
157
ВАЛИДНОСТЬ ИЗМЕРЕНИЕ И ИНТЕРПРЕТАЦИЯ
Инкрементная валидность теста зависит не только от индекса отбо-
ра, но и от базового уровня, в чем можно убедиться, сравнивая разные
таблицы Тейлора-Расселла. Рассмотрим случай, когда валидность теста
равна 0,40, а индекс отбора-0,70. Какова в этих условиях инкрементная
валидность при базовом уровне 0,50? 0,10? 0,90? Обращение к соответ-
ствующим таблицам Тейлора-Расселла показывает, что процент успе-
хов повысится в первом случае с 50 до 75Їо, во втором-с 10 до 21Ї(, и
в трет ьем-с 90 до 99Ї. Таким образом, приращение числа успехов при
базовом уровне 0,50 составит 25" тогда как при более крайних его зна-
чениях приращение меньше: соответственно II и 9Ї/,.
Поведение инкрементной валидноста при базовых уровнях, близких
к нулю или единице, представляет особый интерес для клинической пси-
хологии, где базовый уровень равен доле случаев патологии в тестируе-
мой популяции (A.M.Buchwald, 1965; E.E.Cureton, 19570; P.E.Meehl,
A. Rosen, 1955; J.S. Wiggins, 1973). Например, если у У/о клинической по-
пуляции имеется органическое поражение мозга, то базовый уровень для
данного диагноза в данной популяции будет 5Їц. Хотя введение валидно-
го теста повысит точность диагностики, выигрыш будет максимальным,
если базовый уровень близок к 0,50. При низком базовом уровне, озна-
чающем крайне редкий патологический случай, инкрементная валидность
Таблица 14
Ожидаемая величина успехов при исполыовании теста с данной валидностью и данным ин-
дексом отбора для баювою уровня 0,60 (H.
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130 131 132 133 134 135 136 137 138 139 140 141 142 143 144 145 146 147 148 149 150 151 152 153 154 155 156 157 158 159 160 161 162 163 164 165 166 167 168 169 170 171
;(38)
(шибочное неп зиняти/
(22)
///
т////
///м-//1111/
itfMiiii///ч
////тii/ill/
Прзвильное/////Mf-iw iiiiii/
непри (3нитие 3)тiiчillОшибочное пр (7)инятие
/iii
s X т 5 1/
той. Таким о, которые ост нормативные по-
ного успеха вао тесте Даала соответсеи,
бораприменяется при клиническоеa Тестировании
ошибоозо Р практике "Ри, если
ложительным в меди "азываются ит называется
Этот Рогии Результаты JC если п означает,
--
видов "?"Їоз относительно вьи учитывать
нота), а ределенных исключить н о не-
иснытуемых. Вно вьо характер Р серьезные
должен быть дос одимо, J может н граждан-
ожных афицированныи Ря на отбор Jo боль-
достаточно здесь Ует важнее нансла неудач.
щерб или У условиях быв большего ием
"Р-
установленвТо о можно
критериальнораспределение Р, методу ег, 1966;
Kuo-Cheng Hs ep потери, свя
156 ПРИНЦИПЫ ПСИХОЛОГИЧЕСКОГО ТЕСТИРОВАНИЯ
работой вновь принятых сотрудников с 60 до 84 может служить основа-
нием для оценки преимуществ от использования теста.
Теория статистических решений была разработана А. Уолдом
(A. Wald, 1950) применительно к решениям, принимаемым при контроле
качества промышленных изделий. Модификация этого подхода примени-
тельно к составлению и интерпретации психологических тестов была
осуществлена Л. Кронбахом и Г. Глесером (L. J. Cronbach, G. С. Glesser,
1965). Теория решений в принципе представляет собой попытку придать
процессу принятия решения математическую форму, с тем чтобы исполь-
зовать имеющуюся информацию для выработки в конкретных обстоя-
тельствах наиболее эффективных решений. Математические процедуры,
применяемые в теории решений, весьма сложны, и лишь немногие из них
имеют форму, приемлемую для непосредственного использования
в практических задачах тестирования. Некоторые из основных понятий
теории решений, однако, помогают лучше объяснить ряд касающихся те-
стов вопросов. Часть идей, составивших основу теории решений, была
введена в тестирование еще до того, как был разработан формальный
аппарат этой теории.
Предсказание результатов. Своего рода предвестником теории
решений в психологическом тестировании явились таблицы Тейлора-
Расселла (Н.С. Taylor, J.T. Russell, 1939), позволившие определить вы-
игрыш в точности отбора от использования теста. Для работы с табли-
цами нужно знать коэффициент валидности теста, индекс отбора
и базовый уровень, т.е. oi носи тельные количесгно coip\ шиков, спра-
вляющихся со своими обязанностями и набранных случайно (без исполь-
зования теста). Изменение любого из этих параметров может повлиять
на прогностическую эффективность теста.
В качестве примера приведем одну из таблиц Тейлора-Расселла, от-
вечающую базовому уровню 0,60 (табл. 14). В верхней ее части приве-
дены различные значения индекса отбора, в крайнем левом столбце-
коэффициенты валидности, а в с троках-относительное число успехов
среди принятых на работу по результатам теста. Разность между такой
величиной и 0,60 указывает на выигрыш от применения теста.
Очевидно, если индекс отбора равен 1,0, т.е. когда приему подлежат
все претенденты, ни один тест, как бы валиден он ни был, не улучшит ка-
чества отбора. Из табл. 14 видно, что при индексе отбора, равном 0,95,
даже тест с коэффициентом валидности, равным 1,0, повышает долю ус-
пехов только на 0,03 (с 0,60 до 0,63). Напротив, если из поступающих
нужно отобрать только 5Ї/", то тест обеспечивает рост правильно приня-
тых с 0,60 до 0,82. Этот рост представляет инкрементную валидность те-
ста (L. Sechrest, 1963), или рост прогностической валидности теста,
и указывает на роль теста в улучшении отбора лиц, которые в дальней-
шем будут удовлетворять минимальным требованиям критериального
выполнения. Применяя таблицы Тейлора-Расселла, необходимо, конеч-
но, знать валидность теста для группы именно того типа, по которой
определялся базовый уровень. Иными словами, польза от применения
теста оценивается не вероятностью успеха отобранных с его помощью
претендентов (если, конечно, до этого поступавшие на работу не при-
нимались наугад, что маловероятно), а тем, насколько улучшает проце-
дуру отбора, основывающуюся на сведениях о предыдущей деятельно-
157
ВАЛИДНОСТЬ ИЗМЕРЕНИЕ И ИНТЕРПРЕТАЦИЯ
Инкрементная валидность теста зависит не только от индекса отбо-
ра, но и от базового уровня, в чем можно убедиться, сравнивая разные
таблицы Тейлора-Расселла. Рассмотрим случай, когда валидность теста
равна 0,40, а индекс отбора-0,70. Какова в этих условиях инкрементная
валидность при базовом уровне 0,50? 0,10? 0,90? Обращение к соответ-
ствующим таблицам Тейлора-Расселла показывает, что процент успе-
хов повысится в первом случае с 50 до 75Їо, во втором-с 10 до 21Ї(, и
в трет ьем-с 90 до 99Ї. Таким образом, приращение числа успехов при
базовом уровне 0,50 составит 25" тогда как при более крайних его зна-
чениях приращение меньше: соответственно II и 9Ї/,.
Поведение инкрементной валидноста при базовых уровнях, близких
к нулю или единице, представляет особый интерес для клинической пси-
хологии, где базовый уровень равен доле случаев патологии в тестируе-
мой популяции (A.M.Buchwald, 1965; E.E.Cureton, 19570; P.E.Meehl,
A. Rosen, 1955; J.S. Wiggins, 1973). Например, если у У/о клинической по-
пуляции имеется органическое поражение мозга, то базовый уровень для
данного диагноза в данной популяции будет 5Їц. Хотя введение валидно-
го теста повысит точность диагностики, выигрыш будет максимальным,
если базовый уровень близок к 0,50. При низком базовом уровне, озна-
чающем крайне редкий патологический случай, инкрементная валидность
Таблица 14
Ожидаемая величина успехов при исполыовании теста с данной валидностью и данным ин-
дексом отбора для баювою уровня 0,60 (H.
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130 131 132 133 134 135 136 137 138 139 140 141 142 143 144 145 146 147 148 149 150 151 152 153 154 155 156 157 158 159 160 161 162 163 164 165 166 167 168 169 170 171