Руководство по конструированию тестов.≈ Киев, 1994 icon

Руководство по конструированию тестов.≈ Киев, 1994




Скачати 382.4 Kb.
НазваРуководство по конструированию тестов.≈ Киев, 1994
Сторінка1/2
Дата04.06.2013
Розмір382.4 Kb.
ТипРуководство
  1   2
1. /Кляйн/Кляйн Мелани Зависть и благодарность.pdf
2. /Кляйн/МЕЛАНИ КЛЯЙН К вопросу о ПА маниакально депрессивных состоян.doc
3. /Кляйн/МЕЛАНИ КЛЯЙН ПА игровая этика ее история и значение.doc
4. /Кляйн/Мелани Кляйн Заметки о некоторых шизоидных механизмах.doc
5. /Кляйн/Мелани Кляйн Скорбь и ее отношение к маниакально дипресивным.doc
6. /Кляйн/Мелани Кляйн Создание надежных тестов конструирование тестов.doc
7. /Кляйн/Мелани Кляйн Создание надежных тестов личные опросники разра.doc
8. /Кляйн/Меляни Кляйн ПА Школа Мелани Кляйн.doc
Психоанализ. Школа мелани кляйн
Руководство по конструированию тестов.≈ Киев, 1994
Руководство по конструированию тестов.≈ Киев, 1994
Скорбь и ее отношение к маниакально- депрессивным состояниям
М. кляйн " заметки о некоторых шизоидных механизмах" Введение
Мелани кляйн психоаналитическая игровая техника: ее история и значение
Мелани кляйн к вопросу о психогенезе маниакально-депрессивных состояний




П. Клайн

СОЗДАНИЕ НАДЕЖНЫХ ТЕСТОВ: КОНСТРУИРОВАНИЕ ТЕСТОВ ДРУГИХ ТИПОВ


http://optimalist.by.ru/lit/index.shtm
Клайн П. Справочное руководство по конструированию тестов.≈ Киев, 1994

В этой главе будет обсуждаться разработка заданий и подбор материала для других типов психологических тестов. Многое из того, что уже обсуждалось, особенно в предыдущей главе, применимо и здесь, а поэтому не будет упоминаться вновь. Основное внимание будет уделено приемам, специфичным для конструирования объективных тестов личности или темперамента, проективных тестов, инструментов измерения настроения и интересов и, наконец, шкалам аттитюдов. Начнем с объективных тестов.

Объективные тесты


Определение

Определение, используемое здесь, принадлежит Кэттеллу и его коллегам (напр., Cattell, 1957). Объективный тест ≈ это тест, цель которого скрыта от испытуемого (а поэтому результаты не могут быть фальсифицированы), и данные, полученные с его помощью, могут быть оценены независимо от лица, проводящего тестирование и интерпретацию. Преимущество таких тестов состоит в их практическом значении. Когда испытуемые не могут произвольно манипулировать показателями, такой тест может быть использован в процедурах профотбора. Это означает, что на протяжении многих лет может быть накоплено огромное количество подлинно жизненных критериальных данных о соответствии между профессиональными успехами и переменными объективных тестов. Кроме того, отсутствие возможности произвольного искажения результатов полезно и в тех областях, в которых предъявляются менее жесткие требования, таких как профориентация и психиатрия. Однако и в случае объективных тестов мы не можем быть уверены, что испытуемые не будут искажать их результаты.

В объективных тестах произвольная фальсификация псе же возможна. Так, в тесте "Slow Line-Drawing Test" испытуемые могут чертить линии не так плавно, как они в состоянии это делать. Однако, они не знают, ни как это скажется на их показателях, ни даже самих показателей. Подобное неповиновение инструкциям само по себе симптоматично для определенных черт личности, и на деле может быть использовано как переменная объективного теста.

Последнее предложение дает нам ключ к разрешению основной и имеющей глубокие корни проблемы конструирования объективных тестов. В соответствии с нашим определением, почти любое задание, которое может быть объективно оценено и не является непосредственной реакцией на вопрос (как в тестах личности), может быть объективным тестом. Например, данную страницу рукописи можно использовать для получения следующих объективно тестируемых переменных:

(1) Продолжительность времени написания.

(2) Количество слов на странице.

(3) Количество существительных.

(4) Количество глаголов.

(5) Количество зачеркиваний.

(6) Давление пера при письме.

(7) Количество имен собственных.

Конечно же, психологическое значение таких переменных неизвестно ≈ это вторая проблема, связанная с объективными тестами. Следовательно, в процессе создания объективных тестов нам предстоит решить и эту проблему. На каком основании мы можем отбирать объективные тесты (которых, по определению, может быть очень много), чтобы хоть в какой-то мере надеяться на то, что они валидны? Если тест является очевидно валидным, то он уже не является объективным, так как может быть угадана его цель. Следовательно, нам необходимы некие общие принципы для конструирования объективных тестов ≈ таксономия объективных тестов.

Преимущества объективных тестов

При наличии упомянутых выше проблем, возникающих при разработке объективных тестов, вполне резонно спросить, стоит ли пытаться их разрабатывать, особенно если учесть то, что их единственное преимущество, ≈ значительно меньшая вероятность фальсификации результатов, нежели в других методиках. В конце концов, лучше иметь валидный тест, результаты которого, вероятно, могут быть искажены испытуемым, чем невалидный, но противостоящий всем попыткам фальсификации.

Саttell и Kline (1977) утверждают, что существует теоретическое преимущество объективных тестов, и столь значительное по сравнению с опросниками, что усилия, затраченные на разработку валидных объективных тестов, вполне оправданы. Дело прежде всего а том, что значение (смысл) слов и содержание вопросов изменяются со временем, а это ставит под вопрос состоятельность лонгитюдных исследований личности. Значение наших вопросов (утверждений), конечно же, изменяется от культуры к культуре, поэтому проведение кросс-культурных исследований личности при помощи опросников чрезвычайно сложно, если вообще возможно. Неоспорим и тот факт, что с различиями в понимании наших заданий мы сталкиваемся при обследовании разных общественных классов в рамках одной и той же культуры. Kelly (1955) как-то даже заявил, что значения слов настолько различны для разных индивидуумов, что любая форма стандартизированного тестирования не имеет сколько-нибудь значительной диагностической ценности. Вследствие этого Келли и его последователи придавали особое значение методике репертуарных решеток, где каждая решетка была индивидуальна для испытуемого, чьи качества исследовались. Несколько примеров убедят в наличии этого обстоятельства.

(1) "Нравятся ли вам веселые вечеринки?" (англ.: "Are you like gay parties?"). По-русски этот вопрос звучит весьма прилично и вполне приемлем как задание теста. По-другому дело обстоит с его английским вариантом. Примерно до 1960 года этот вопрос (в англоязычных странах) не имел гомосексуального подтекста. "Gay party" ≈ это была вечеринка, отличавшаяся доброжелательным отношением ее участников друг к другу, живым весельем и юмором. Сегодня словосочетание "gay party" означает "встреча для гомосексуалистов".

(2) "Нравится ли вам игра "Урони платок"?" Этот вопрос имеет смысл только в условиях северо-американской культуры: ни в Англии, ни в других странах Европы в эту игру не играют и, следовательно, там ее скрытый смысл не известен. Поэтому этот вопрос нельзя использовать в кросс-культурных исследованиях.

(3) "Регулярно ли вы ходите в кино?" Сейчас положительный ответ на этот вопрос указал бы на неподдельный интерес к фильмам. А двадцать лет назад, до всеобщего распространения телевидения, посещение кинотеатра было принятой большинством людей формой развлечения, и ответ "нет" мог, вероятно, представлять интерес.

Объективные тесты, напротив, должны помочь выявить данные, которые не подвержены влиянию изменяющегося смысла заданий, а, следовательно, необходимы для изучения тех преобразований личности, которые происходят во времени, а также для сравнения различных групп.

Принципы конструирования объективных тестов

Поскольку возможно предположить существование огромного количества разнообразных объективных тестов, необходимо, чтобы их разработчики руководствовались некоторыми общими принципами. Cattell и Warburton (1967) в руководстве по объективным тестам личности и мотивов, а в нем перечислены 688 тестов для измерения более чем 2300 переменных, считают это количество лишь небольшой частью тех, которые могли бы быть разработаны. Однако, эти авторы отдают себе отчет в том, что прежде чем подумать об отказе от разработки объективных тестов из-за их ошеломляющего потенциального количества (ибо даже многие из приведенных в их руководстве переменных остались без экспериментального опробования и с неустановленной валидностью), необходима некоторая их таксономия, и это сделано в упомянутой книге. Приведем краткое изложение.

Психологические тесты могут отличаться один от другого по следующим признакам:

(1) Инструкции. Ясно, что они важны, поскольку определяют то, как испытуемый воспринимает тест (хотя испытуемые могут не всегда придавать им значение).

(2) Материал теста. Он может быть взят из социальной области или, например, из физики.

(3) Особенности оценивания полученных от испытуемого ответов.

Понятно, что эти три элемента не являются независимыми, так как инструкции должны отражать определенный стимульный материал. Кэттелл и Уорбертон предпочли объединить первые два элемента и обозначить это термином "стимульно-инструктивная ситуация" (stimulus-instruction situation).

СТИМУЛЬНО-ИНСТРУКТИВНАЯ СИТУАЦИЯ


Стимульно-инструктивная ситуация изменяется в зависимости от ряда параметров:

(1) Реакция или ее отсутствие. В общем требуется реакция на стимул. Но это не всегда так, как, например, в тестах на чувствительность к боли.

(2) Ограниченность versus неограниченность способов реагирования. В тестировании не известны случаи неограниченного разнообразия ответов. Предполагается, что испытуемые (как аргументируют Кэттелл и Уорбертон) не будут жевать материал тестов или портить его. Однако ответы могут быть относительно свободными, как, например, в тесте Роршаха, или с накладываемыми на них ограничениями, как при измерении времени реакции.

(3) Ответы, придуманные (созданные самостоятельно) versus отобранные из набора вариантов. Значение этого параметра очевидно. Примером последних являются ответы типа "правда-неправда'', а примером первых ≈ описание рисунков Теста тематической апперцепции (Thematic Apperception Test ≈ TAT).

(4) Единичные versus повторяющиеся ответы.

(5) Последовательность ответов: упорядоченная versus неупорядоченная. Это относится к тому, до какой степени от испытуемых требуется давать ответы в определенном порядке.

(6) Однородность versus разнородность ответов. В некоторых тестах требуются ответы одного и того же вида, а в других предусмотрены ответы различных типов.

(7) Естественность темпа versus ограниченность времени на ответы. Сравните такие инструкции, как, например: "Работайте со свойственной вам скоростью", "Не тратьте слишком много времени на каждый вопрос" и "Работайте настолько быстро, насколько это возможно."

(8) Завершенность (окончательность) реакции versus реагирование на реакцию. Испытуемый реагирует либо на материал теста, либо на свою собственную реакцию, например, тот или иной стимул как-либо оценивается, вызывает ассоциации или воспоминания.

Cattell и Warburton (1967) считают, что это основные, не требующие дополнительной аргументации, параметры вариативности, связанные со стимульно-инструктивной ситуацией. Однако, ими представлены и три других, более субъективных параметра, которые при разработке объективных тестов могут приобрести особое значение.

(9) Явный смысл versus неявный. Некоторые тесты не имеют никакого вне их лежащего значения, такие как измеряющие время реакции. Однако в определенных тестах (там, где интересуются мнением о чем-либо) это присутствует. Большинство видов искажений и сложностей, связанных с субъективным истолкованием слов и понятий возникают именно в тех тестах, значение которых неявно.

(10) Представление теста в виде отдельных заданий versus целостное представление. Этот параметр касается различий между тестами, состоящими из отдельных заданий или из одного единственного.

(11) Психологическая сущность действия, необходимого для выполнения задания. Этот параметр учитывает, требуется ли для ответа: (а) знания (напр., верное суждение); (б) мнение о чувствах, отношениях; или (в) опознание или распознание.

Как утверждают Cattell и Warburton (1967), существуют еще два параметра:

(12) Различия в мотивах приемлемости ситуации тестирования.

(13) Различия в свободе выхода из ситуации тестирования.

Вышесказанное обуславливает существование 2 типов стимульно-инструктивных ситуаций.

Значение приведенных классификационных принципов огромно: если бы мы конструировали такой материал для объективных тестов, в целом содержавший бы в себе все эти параметры, то использовали бы все возможные виды материала. Это особенно важно, поскольку при применении этих тестов всегда есть опасность, что для данного теста специфично проявляется больше вариативности, чем это желательно.

Как уже говорилось, еще одним важным источником различий между тестами является то, каким образом обрабатываются показатели, полученные с их помощью. Cattell и Warburton (1967) в исследовании ответов на тесты вводят некоторые параметры обработки показателей по тесту. Хотя эти параметры и не являются полностью независимыми от стимульно-инструктивных параметров, приведенных выше, они существенно отличны.

Прежде чем перейти к описанию этих параметров, следует подчеркнуть, что ответы на тесты образуют весьма значительное число переменных. Например, если бы мы рассматривали в качестве объективного теста личностный опросник, то, в добавление к стандартной шкале подсчета показателей могли бы быть вычислены следующие переменные: время выполнения теста, время выполнения половины теста, количество подтвержденных ответов "да", количество подтвержденных ответов "нет", количество альтернативных ответов, количество пропущенных заданий, количество неопределенных ответов ("не знаю", "не уверен"). Следует заметить, что все эти показатели, в отличие от показателя по стандартной шкале, являются объективными, поскольку ни один испытуемый не может знать, что они измеряют, и они могут быть измерены с высокой надежностью, не зависящей от лица, проводящего тестирование.

Параметры оценивания ответов

(1) Объективность versus субъективность оценивания. Этот момент касается в основном тех тестов, в которых используются задания на самооценку. Будет ли ответ испытуемого оцениваться так, как это предполагается инструкцией или каким-либо неизвестным для него образом? В этом нет никакого обмана для испытуемых. Например, объективным тестом является тест критических оценок (Critical Evaluations Test, Т8, Cattell и Warburton (1967)). В нем испытуемых просят указать, является ли определенная производительность труда, ≈ например, если у официантки уходит десять минут на то, чтобы принести шесть порций на столик, ≈ очень хорошей, хорошей, плохой, очень плохой. А в этом тесте между прочим определяется количество критических оценок. Субъективное содержание заданий не имеет отношения к оценке. Таким образом, этот тест, внешне напоминающий опросник, является, фактически, полностью объективным, как это и определено в начале данной главы. Разумеется, все те тесты, которые будут обсуждаться в этой главе, являются объективными в смысле этого первого параметра.

(2) Целостное поведение (весь организм) versus физиологическая реакция (часть организма). Типичной физиологической реакцией может быть покраснение от смущения или тремор.

(3) Измерение одного возможного ответа versus классификация разнообразных ответов (параметрическое оценивание versus непараметрическое) . Параметрически измеряются такие особенности ответа: время, количество ошибок, повторений. Непараметрически раскрывается количество и разнообразие классов ответов. В этом смысле многие тесты на креативность оцениваются непараметрически.

(4) Общее количество ответов versus часть, соответствующая некоторому критерию. Это пересекается с описанным выше третьим параметром, поскольку, как указывают Cattell и Warburton, различные оценки могут быть любой из указанных здесь категорий.

(5) Единый однородный показатель versus разнотипные относительные показатели. Определить единый показатель можно только тогда, когда тест оценивается в целом, как в случае личностных опросников. Разнотипные относительные показатели могут определяться в следующих формах: различия во времени выполнения первой и второй частей теста; запоминание материала при обычных условиях и при отвлекающих обстоятельствах. И, наконец, Cattell и Warburton добавили шестой параметр: (6) Нормативное оценивание versus ипсативное (личностное). Однако этот параметр, по-видимому, представляет совершенно иной тип классификации, чем та, о которой шла речь выше, так как он оказывает влияние на все тесты и более правильно было бы отнести его к области стандартизации, а не конструирования тестов. Если мы примем в рассмотрение и этот параметр, у нас получится 26 возможных типов оценивания ответов.

Таким образом, выделенные параметры, связанные со стимульно-инструктивной ситуацией и оцениванием ответов, позволят нам конструировать тесты любого типа. Однако, такой подход, хотя и является полезным, все же не может помочь нам в том, что касается содержания объективных тестов. Кроме того, показано, что потенциальное количество типов объективных тестов действительно огромно: 213x26, что значительно больше 50000. Многие из них, однако, нежизнеспособны, но даже при этом их количество все еще слишком велико. Выделенные параметры указывают, до какой степени могут различаться задания каждого возможного типа объективных тестов, которые проходили испытания. Мы никогда не будем испытывать недостатка в заданиях!

Для использования в практике конструирования объективных тестов эта классификационная схема должна быть сокращена. Кэттелл и Уорбертон подчеркивают, что особую важность имеют шестьдесят четыре варианта, полученные из трех наиболее важных ситуаций и параметров оценивания, генерирующих по восемь возможных вариантов. Огромное количество тестов в их сборнике не покрыло все шестьдесят четыре типа, так что такая краткая версия таксономии тестов также еще оставляет пространство деятельности для творческого разработчика тестов. Такая таксономия, основывающаяся на характеристиках тестов, может помочь разработчику создавать разнообразные тесты, но есть одна основная трудность: как мы узнаем, что созданные средства измерения будут измерять, например, переменные темперамента, а не другие? Иными словами, как нам получить тест для измерения темперамента, а не, например, способностей? Данная таксономия в этом помочь не может, и разработчику тестов нужна дальнейшая информация.

Различия между объективными тестами способностей, темперамента и динамики (мотивов)

Один из методов определения того, что же измеряют объективные тесты, ≈ подвергнуть их факторному анализу вместе с хорошо известными отличительными переменными (маркерами) этих трех модальностей (способностей, темперамента, мотивов). С помощью факторного анализа будет выяснено, переменные какой модальности измеряет данный тест. Однако, хотя это и эффективная процедура, необходимая до реального использования любого объективного теста, она не указывает нам, как можно сконструировать тест нужного нам типа. Это лишь адекватное средство проверки, но не руководство для конструирования тестов.

Cattell и Warburton (1967) посвятили обсуждению этой проблемы довольно много места, а здесь мы лишь кратко подытожим их рассуждения, поскольку они обеспечивают некоторое рациональное основание для выбора содержания заданий (в дополнение к таксономии, призванной помочь в выборе формы тестов).

(1) Различаются два вида ситуаций (ситуационализм, фактически, не является противоположностью психологии черт): побуждающие (incentives) и связанные с осуществлением действия (complexities).

(2) При изменении побудителей (incentives) изменяются показатели динамических тестов. При изменении деятельностей (complexities) изменяются также показатели тестов способностей. Тесты темперамента включают все остальные ситуации.

(3) Определение побудителей (incentives): побудители порождают стремление к некоторой цели и являются символом цели или удовлетворения от достижения цели, что само по себе может быть выявлено только анализом этого процесса. Это статистический анализ последовательности поведения во времени. Данная последовательность является набором действий, ведущих к достижению цели. Побуждающая ситуация, таким образом, распознается по ее отношению к цели (то есть по общим колебаниям в силе стремления и постоянству доминирования). Kline и Grindley (1974) действительно показали именно такие флуктуации между динамическими измерениями и ситуациями.

(4) Определение деятельностей (complexities). Когда побудители в данных обстоятельствах уже распознаны, можно определить и деятельность: это все то, что не является побудителем.

(5) Конечно, на практике это означает, что измерение динамики и способностей тесно взаимосвязано. Однако, могут быть получены относительно "чистые" средства измерения для каждой из этих областей. Например, если бы у нас были очень простые средства измерения способностей, то различия в показателях отражали бы не способности, а динамику (например, насколько испытуемые старательно выполняют задание). Таким образом, можно так управлять уровнями деятельностей и побудителей, что объективные тесты могут стать практически ''чистыми" средствами измерения каждой модальности.

(6) Нет необходимости говорить, что все тесты, сконструированные таким образом, должны быть подвергнуты проверке при помощи факторного анализа. Нужно убедиться, что то, что они измеряют, соответствует тому, что от них ожидали. Все тесты, предположительно измеряющие способности, должны дать близкие результаты, то же касается измерения мотивационных, динамических переменных.

С этим логическим обоснованием, с различиями между побудителями и деятельностями, у разработчика объективных тестов уже есть некоторое руководство, по крайней мере относительно выявления того, что его тесты измеряют, хотя все они по-прежнему должны подвергаться последующей проверке факторным анализом.

Однако, как сейчас должно быть очевидно читателю, эти принципы и таксономии интересны и, возможно, могут явиться стимулом к работе, но, вероятно, слишком абстрактны для практического использования при конструировании реальных тестов. Cattell и Warburton ( 1967), осознавая это, в своей работе чистосердечно признают, что при конструировании объективных тестов им помогало лишь интуитивное предвидение, основанное на значительном опыте исследований в этой области. Это мы сейчас кратко и обсудим.

Практические советы для разработки объективных тестов личности и мотивов

Следует избегать следующих пяти ошибок, которые Cattell и War-burton (1967) у поминают как распространенные среди любителей, и о которых необходимо знать, прежде чем приступать к работе по конструированию объективных тестов.

(1) Не останавливайтесь на очевидно валидных заданиях из опросников.

(2) Не применяйте задач или заданий-головоломок (загадок). С их помощью вы скорее всего будете измерять факторы способностей.

(3) Не возлагайте слишком большие надежды на "стрессовую ситуацию". Как утверждают Cattell и Warburton (1967), это может сработать для выявления агрессии или страха, но ведь есть еще и другие эмоции.

(4) Эстетические и стилистические предпочтения могут эффективно выявить лишь некоторые аспекты личности. Однако, будет абсурдом ожидать, что такие тесты выявят все возможные аспекты. Нужно учитывать тот очевидный факт, что на ответы по этим тестам влияют уровень образования и культуры.

(5) Избегайте упрощенных способов использования проективных тестов. Wenig (1952) показал, что такие тесты диагностируют весьма широкий комплекс параметров, требующий факторно-аналитического исследования.

(6) Используйте задания-вопросы, точно соответствующие определенным типам поведения.

Вышесказанное является основой для создания эффективных объективных тестов.

Решение некоторых общих проблем, связанных с объективными тестами

Существует ряд проблем, из-за которых интерпретация показателей любого теста (не только объективного) может стать сомнительной, и их следует учитывать при конструировании объективных тестов. Подробное обсуждение этих проблем, к которому можно отослать читателей, представлено в книге Cattell и Warburton (1967). Кратко подытожим те положения, о которых идет речь в этой работе.

РАЗЛИЧИЯ В МОТИВАЦИИ ИСПЫТУЕМЫХ


Различия в мотивации испытуемых при разработке тестов имеют особое значение в научных исследованиях, тогда как при отборе и выдаче рекомендаций значение этого источника индивидуальных различий по-видимому минимально. В конце концов, если для выполнения объективного теста требуется, например, значительная концентрация внимания, почему испытуемый должен делать усилия, чтобы выполнить все наилучшим образом? С другой стороны, встречаются испытуемые, которые вообще все делают наилучшим образом. Cattell и Warburton (1967) обсуждают пять приемов построения объективных тестов, призванных в некоторой мере минимизировать различия в мотивации испытуемых.

(1) Поделите тест на две части. Получаемым показателем является отношение или разность оценок по первой и второй части, и две части сравниваются, при том резонном предположении, что у каждого испытуемого мотивация на выполнение каждой части одинакова, и таким образом этот эффект устраняется. Примером такой методики является тест "силы Эго", основанный на эффективности запоминания при отвлекающих факторах. В этом тесте показателем "силы Эго" является разность между оценкой по запоминанию чисел в обычных условиях и оценкой по запоминанию чисел в том случае, когда они перемежаются шутками. Это явно полезный прием для проектирования объективных тестов.

(2) Используйте в качестве мотивов базовые эрги, а не чувства. В терминологии Кэттелла (см. Cattell и Child, 1975; Cattell и Kline, 1977) эрги ≈ это базовые влечения, такие как голод, половое влечение или страх, тогда как чувства ≈ это то, что прививается, формируется при обучении и воспитании в определенной культуре, например, религиозные чувства или чувства по отношению к своей семье. Поскольку, как обсуждалось у Cattell и Child (1975), базовые эрги менее подвержены изменчивости, чем чувства, то количество различий вследствие изменений в мотивации сокращается, если при выполнении теста в качестве мотивов широко вовлекаются базовые эрги. Проще всего при этом управлять страхом (удара электрическим током) или сексуальными желаниями (предъявляя картинки с обнаженными), хотя следует отдавать себе отчет, что эти влечения не могут проявиться так, как в реальности (по степени возбуждения), ибо существуют определенные этические нормы, реализующиеся и в ситуации тестирования.

(3) Ограничивайте подсчет показателей стилистическими или формальными аспектами выполнения теста. Эти переменные менее подвержены изменениям мотивации, чем большинство других. Кэттелл и Уорбертон выбрали почерк как пример того показателя, который обычно остается распознаваемым для каждого индивидуума в разнообразнейших ситуациях.

Характеризуя эти три приема преодоления мотивационных искажений, необходимо отметить один очевидный, но важный момент: они применимы в основном к тестам темперамента, а не динамики.

(4) Вполне возможно, что мотивационный уровень испытуемого при работе над всей батареей тестов может быть отделен факторным анализом (вероятно, в один или более факторов) от других независимых факторов. Если это так, то переменные, имеющие тенденцию быть нагруженными такими факторами, могут быть отброшены.

(5) И наконец, разработчик объективного теста может намеренно искать способ задействовать мотивы каждого испытуемого таким образом, чтобы они были активно вовлечены в тестовые процедуры, но при этом следует постоянно помнить о том, что нельзя выходить за границы той системы ценностей, которой привержены испытуемые. К сожалению, это тот принцип, который легче понять, чем воплотить в практику.

ЛИЧНОСТЬ И ТЕСТОВАЯ СИТУАЦИЯ


Проявления личности связаны с социумом, однако при тестировании социум представлен только в виде тестовых ситуаций. Это, конечно, еще одна существенная проблема тестирования, кстати давшая повод ситуационалистам (напр., Mischel, 1968) подвергнуть сомнениям эффективность личностных тестов. Так, Mischel утверждал, что факторы, полученные при помощи традиционных личностных опросников, являются по своему существу факторами ситуации тестирования.

Чтобы преодолеть эту трудность, Cattell и Warburton (1967) предложили индивидуальные тестовые ситуации, которые несомненно включают в себя социальные взаимодействия. Однако, эти же авторы, к сожалению, утверждают, что такие мини-ситуации трудно создавать и трудно использовать в практической психологии, таким образом значительно уменьшая их значение для достижения каких-либо иных целей, кроме теоретических. Правда, эти авторы надеются, что последующие исследования позволят измерять при помощи других объективных средств более простого вида те факторы, которые определяются тестами мини-ситуаций. Если это произойдет, то от ситуационных тестов можно будет отказаться. Однако, без них разработчик объективных тестов не может испытывать уверенность в том, что он измерял социальное поведение (поведенческие проявления личности). Было разработано несколько групповых тестов, нагруженных факторами социального взаимодействия (они перечислены в Cattell и Warburton, 1967), но в этой области еще многое предстоит сделать.

ВЛИЯНИЕ СПОСОБНОСТЕЙ И ДОСТИЖЕНИЙ НА ПОКАЗАТЕЛИ ОБЪЕКТИВНЫХ ТЕСТОВ


Это основная трудность, которая должна быть преодолена при конструировании объективных тестов личности (тестов темперамента и динамики). Например, известно (Cattell и Child, 1975), что информация о релевантных цели обследования предметах и явлениях является эффективным средством измерения интереса. Элементарная рефлексия, однако, с очевидностью показывает, как может быть искажено такое измерение. Незначительный интерес у студента к конным бегам (а корпуса естественно-научных факультетов Киевского университета находится рядом с ипподромом ) может привести к некоторому запасу знаний, который не может быть сравним со знаниями менее интеллектуального человека, для которого это было единственным видом отдыха. Информационный тест, следовательно, будет работать неправильно.

Таким образом, должны разрабатываться приемы проектирования тестов, которые минимизируют влияние способностей и достижений. Cattell и Warburton (1967) дают следующие рекомендации.

(1) Устраняйте, насколько возможно, из объективных тестов переменные способностей ≈ например, направленные на выявление отношений, словарный запас, общие знания.

(2) Как было ранее показано на примере разных мотивов, разбивайте тест на две части и используйте отношение или разность показателей. Это устраняет влияние уровня способностей испытуемого, как это происходило и с уровнем мотивации.

(3) Подвергните тесты факторному анализу и устраните те, которые нагружены факторами способностей.

(4) Используйте в батарее объективных тестов настолько широкий набор проб содержательного материала, навыков и интересов, насколько это возможно.

Переменные поведения должны обеспечивать разнообразие ролевых ситуаций, так как личностные факторы лучше всего, вероятно, выражаются в различных ролях. Содержание также должно быть подобрано таким образом, чтобы затронуть интересы всего диапазона выборочной совокупности испытуемых. Это также важно, поскольку a priori маловероятно, что одна частная тестовая форма, пусть даже эффективная, сможет охватить полностью всю личностную сферу, то есть всю гамму факторов.

ГРУППОВЫЕ ИЛИ ИНДИВИДУАЛЬНЫЕ ТЕСТЫ


Ориентируйтесь на разработку простых тестов для группового тестирования, а не индивидуальных тестов. Это необходимо как для исследований больших выборок, так и в практической психологии, где групповая работа является необходимостью. Следует, однако указать, что создание групповой версии индивидуального теста требует значительной изобретательности и исследовательских усилий для демонстрации того, что каждая из этих версий действительно измеряют одну и ту же переменную. В то же время некоторые объективные тесты, например, те, основу которых составляют физиологические измерения, нельзя преобразовать в групповую форму.

В дополнение к этим полуформальным рекомендациям Cattell и Warburton (1967) обсуждают интуитивные основания некоторых из своих тестов, поскольку при разработке объективных тестов все еще необходимо определенное чутье, интуиция, ибо нет еще единого алгоритма. Будет достаточно лишь перечислить эти основания, так как разработчики тестов могут их либо использовать, либо нет, иначе говоря, некоторые разработчики могут обладать достаточным воображением, чтобы творить тесты с их помощью, тогда как другие не смогут делать этого, поскольку правила, вытекающие из этих оснований, не могут быть точно сформулированы. Наиболее важными основаниями являются: (1) клиническая интуиция; (2) наблюдение в повседневной жизни случаев, являющихся определяющими для характеристики личности; (3) повседневная устная речь ≈ пословицы и поговорки; (4) эмоциональные ситуации в играх, например, в карточных; (5) поведение, наблюдаемое в ходе беседы; и (6) литературные источники.

Cattell и Warburton (1967) также утверждают, что ряд положений, которые, по их мнению, являются нечетко сформулированными психологическими принципами, весьма помогал им при разработке тестов. Однако автор данной книги счел эти положения слишком расплывчатыми, чтобы их использовать (напр., "избирательное действие восприятия и памяти в соответствии с общей ориентацией") при практической разработке тестов, хотя они весьма полезны для понимания оснований некоторых объективных тестов Кэттелла.

И наконец, Cattel и Warburton считают, что при разработке объективных тестов могут быть полезны некоторые из экспериментально-психологических открытий (таких как те, которые касаются, например, взаимосвязей между обусловливанием и научением, ЭЭГ и характеристиками личности; см. Eysenck, 1967).

Таковы советы относительно формы и содержания объективных тестов для пытающихся их создавать, тестов, которые будут коррелировать с некоторыми внешними критериями. Есть надежда, что все эти советы окажут свое воздействие, побуждая читателей к разработке тестов. Несмотря на это, следует еще раз подчеркнуть, что ни один тест не может использоваться, прежде чем не будет продемонстрировано, что он измеряет те переменные, для измерения которых предназначен.

Объективные тесты и факторы личности


Cattell и Warburton обсуждают также вопрос о том, как можно проектировать объективные тесты по отношению к явным конструктам, под которыми они, естественно, понимают личностные факторы. Конечно, принципы, обсуждаемые ниже, могли бы использоваться и для разработки тестов, не основанных на факторной стратегии. Однако, факторно-аналитические конструкты по определению имеют очевидное подтверждение (их факторные нагрузки), следовательно они представляют прекрасный объект для измерений (в отличие от многих клинических конструктов, за которыми может не быть никакой реальности, кроме воображения их создателей).

Суть этого метода состоит в использовании переменных-маркеров для уже установленных факторов (существуют их разнообразные списки, см., напр., Howarth, 1976, для факторов личностных опросников), а затем разработки тестов, которые, вероятно, нагружены этими факторами. Последующий факторный анализ выявляет тесты, которые нагружены этими факторами. Этот метод идеально подходит для разработки объективно-тестовых средств измерения, эквивалентных факторам, известным по другим тестам ≈ полезная процедура, поскольку, по крайней мере, с точки зрения профотбора, результаты выполнения объективных тестов не могут быть фальсифицированы. Однако, как показывают на примерах Cattell и Warburton, этот метод может привести к открытию новых факторов, не обнаруживаемых ни при каком другом типе тестирования. Это можно легко себе представить в случае, когда множество объективных тестов формируют фактор, размещенный между двумя факторами-маркерами.

При разработке объективных тестов по уже установленным факторам, если мы хотим получить точные результаты, следует помнить о следующих моментах:

(1) Необходимо воспроизведение всех факторных структур на различных выборках. В идеале, как показывает Nunnaliy (1978), для таких исследований требуется в десять раз больше испытуемых, чем переменных, с которыми ведется работа. Однако, в случае повторения выделенной факторной структуры, такое строгое требование не является, вероятно, необходимым.

(2) Изучение тестов, нагруженных некоторым фактором, помогает уточнить конструкт рассматриваемого фактора. Так иногда нагруженность объективных тестов помогает узнать что-то новое о тех факторах, которые считались хорошо изученными.

(3) Гораздо более интересным является то, что факторные нагрузки могут помочь прояснить, что же измеряют объективные тесты (вечная проблема объективных тестов).

(4) Исходя из факторной нагруженности тестов нередко можно создать новые тесты. Другими словами, непосредственное наблюдение за тем, как выявляются переменные (то есть как бы взгляд назад) чрезвычайно полезно как вспомогательное средство при разработке тестов. Таким образом, одним из наиболее важных путей создания объективных тестов является изучение тех реальных факторов, которые из них выделяются. Их порой трудно идентифицировать без последующего использования факторного анализа и разнообразного экспериментального материала, но по крайней мере при попытке измерения таких факторов разработчик объективных тестов будет нацелен на статистически значимый конструкт.
  1   2

Схожі:

Руководство по конструированию тестов.≈ Киев, 1994 iconРуководство по применению статистических методов Составители: к т. н. Э. М. Векслер. В. Н. Рифа Киев 2000
Практическое руководство по применению статистических методов содержит рекомендации по практическому использованию простейших методов...
Руководство по конструированию тестов.≈ Киев, 1994 iconКиевский институт инвестиционного менедмента теория игр составил: Василевич Л. Ф. Киев 1998
Пособие представляет собой конспект лекций. Кроме того, оно содержит большое количество тестов и задач, которые можно использовать...
Руководство по конструированию тестов.≈ Киев, 1994 iconКиевский институт инвестиционного менедмента теория игр составил: Василевич Л. Ф. Киев 1998
Пособие представляет собой конспект лекций. Кроме того, оно содержит большое количество тестов и задач, которые можно использовать...
Руководство по конструированию тестов.≈ Киев, 1994 iconРуководство для врачей: в 3-х т.,Т. 1, под общей редакцией Ф. И. Комарова Г. М.: Медицина, 1997
Внутренние болезни под ред проф. Г. И. Бурчинского. – Киев, „Вища школа”, 1987. – 576 с
Руководство по конструированию тестов.≈ Киев, 1994 iconРуководство по терапевтической гомеопатии: Пер с англ. М.: Атлас, 1994. 205 с
Аллен Х. К. Основания и показания к назначению и характеристики ведущих гомеопатичекских препаратов и нозодов со сравнением их патогенезов:...
Руководство по конструированию тестов.≈ Киев, 1994 iconСборник тестов по инженерной графике
Сборник тестов по инженерной графике. Сборник тестовых заданий для самостоятельного контроля знаний студентов 1 курса бакалавров...
Руководство по конструированию тестов.≈ Киев, 1994 iconРуководство по совершенствованию iso 19011: 2000 Руководство по проведению аудита системы менеджмента качества и окружающей среды

Руководство по конструированию тестов.≈ Киев, 1994 iconРуководство по ведению учета (описание конфигурации). Фирма "1С". Москва. 2000. (Редакция М. 2001)
Парус” – Консультант, версия 3 для Windows // Руководство пользователя. К., 1999
Руководство по конструированию тестов.≈ Киев, 1994 iconЗакон України від 24 лютого 1994 р. Відомості Верховної Ради України. 1994. №26. Ст. 204

Руководство по конструированию тестов.≈ Киев, 1994 iconДокументи
1. /lec1 Надежность вычислительных устройств.doc
2. /lec10...

Руководство по конструированию тестов.≈ Киев, 1994 iconРуководство по анестезиологии под редакцией профессора
П69 Практическое руководство по анестезиологии /Под ред. В. В. Лихванцева. — М.: Медицинское информацион­ное агентство, 1998. — 288...
Додайте кнопку на своєму сайті:
Документи


База даних захищена авторським правом ©zavantag.com 2000-2013
При копіюванні матеріалу обов'язкове зазначення активного посилання відкритою для індексації.
звернутися до адміністрації
Документи