Прежде чем приступать к созданию теста, необходимо четко знать, для чего он нужен. Ясный ответ на этот вопрос - необходимое условие работы. Поэтому первым шагом будет формулирование цели будущего теста. После этого следует обратиться к разработке спецификации будущего теста. Наиболее удобно сделать это в виде таблицы, в котором по горизонтали будут располагаться содержательные области, которые предполагается измерять, а по вертикали - их манифестации, или пути, по которым содержательные области могут проявляться.
Ясное понимание цели будущего теста, естественно, облегчает построение перечня того, что предстоит измерять. При спецификации манифестаций важно обеспечить выделение различных форм их реализации.
В каждом задании может быть задан только один вопрос или сформулировано одно утверждение. Нельзя допускать появления заданий, в которых присутствует формулировки типа: "для этого человека и других людей", "как и другие" и тому подобное. Каждое задание (вопрос) должен быть предельно просто и ясно. Необходимо избегать двусмысленных формулировок и придерживаться, насколько это возможно, наиболее простых вариантов ответов. В то же время необходимо стремиться к тому, чтобы обследуемые не могли догадываться о том, для измерения какой черты предназначено то или иное задание. В противном случае ответы будут отражать их точку зрения на выраженность у себя этой черты, а не реальное положение дел.
Задания должны отражать конкретные, а не общие аспекты изучаемой области поведения.
Везде, где только можно, следует избегать употребления таких слов, как "часто", "редко" и тому подобное. Иначе говоря, в формулировке заданий нужно очень осторожно прибегать к словам, указывающим на частоту действий. Также следует избегать терминов, выражающих чувства. Лучше представить задание в контексте поведения.
Очень важно, чтобы любой из предлагаемых вариантов ответа воспринимался испытуемым как возможный, вероятный. Ответ, воспринимаемый обследуемым как неправильный, будет иметь малую вероятность выбора.
После разработки всех заданий к ним следует вернуться через некоторое время и попытаться еще раз оценить их формулировки, еще раз убедиться в том, что все они легко понимаются и не содержат двусмысленностей. Для этого требуется привлечь хотя бы двух-трех экспертов. В личностных опросниках, как правило, используются три типа заданий: дихотомические, трихотомические и задания с рейтинговыми шкалами. Весьма популярны задания с альтернативным выбором (дихотомические), которые просты для понимания, легки и удобны для обработки. Это задание требует наименьшего времени на ответы. К их недостатком относится то, что обследуемые часто не удовлетворены предполагаемой альтернативой, хотели бы видеть больше вариантов ответа. Задания трихотомитрические (три варианта ответа, например "да", "не знаю", "нет") также распространены в опросниках, и их преимуществом является то, что обследуемые могут более точно выразить себя, нежели в случае альтернативы.
Какие-либо правила, определяющие количество вариантов выбора ответа, отсутствуют. Обычно не рекомендуется использование более семи в опросниках, использующих рейтинговые шкалы. Важно обеспечить достаточное количество градаций ответа, с тем, чтобы обследуемые были в состоянии адекватно выразить самих себя. Следует помнить о том, что в разрабатываемом опроснике желательно использовать только один тип заданий.
Разработчикам тестов хорошо известно, что от оформления, формы представления методики, что определяется как ее очевидная (лицевая) валидность, зависит, насколько серьезно воспринимается она испытуемыми в качестве инструмента обследования. В любом опроснике должен быть представлен блок основной информации, который включает в себя его название, а также вопросы, касающиеся имени, пола, возраста, образования и некоторых других необходимых для исследователя данных. Обязательно указывается дата заполнения опросника.
Инструкция должна быть ясной, доступной для понимания. В ней должно быть указано, как выбрать ответ и каким образом отмечать его в отроснике. Здесь же содержится дополнительная информация, которую разработчик считает необходимым сообщить обследуемому.
Для компоновки текста опросника следует руководствоваться такими рекомендациями.
а) Нумеруется каждое задание.
б) Каждая строка на странице болжна быть короткой и содержать не более 10-12 слов.
в) Все задания располагаются по прямой вертикальной полосе сверху вниз в левом углу страницы.
Варианты ответов должны быть представлены так, чтобы получилась прямая вертикальная полоса сверху вниз в правом углу страницы.
г)Каждое задание нужно отделить друг от друга, лучше это сделать используя свободное пространство, а не горизонтальную линию.
д) Если используется более чем один тип заданий, одинаковые задания группируются вместе. Каждый тип задания требует разных инструкций и своих вариантов ответов.
е) Опросник печатается так, чтобы он имел эстетически привлекательный вид.
Анализ заданий по результатам, полученным в пилотажном исследовании, имеет своей целью отбор наилучших заданий для окончательной версии опросника и включает в себя определенные доли ответивших правильно и дискриминантности каждого анализа. Первый шаг состоит в том, чтобы составить таблицу анализа заданий, в котором каждая колонка представляет задание, а каждая строка - обследуемого. Когда речь идет о разработке личностных опросников, в таблицу вписывается соответствующий балл по каждому заданию, а при этом имеется в виду, что обратные задания (с противоположным содержанием) оцениваются так же, как и прямые задания, но в противоположном направлении континуума оценок. Затем суммируются баллы по каждой клетке для получения общего балла по каждому ряду (испытуемые) и общего балла по каждой колонке (задания).
Следующим шагом будет вычисление показателя, определяющего долю испытуемых, ответивших в соответствии с "ключом" опросника или индекса эффективности задания.
Также нужно удостовериться, посмотрев на результаты в таблице анализа заданий, в том, что хороший индекс эффективности, то есть лежащий где-то посередине между крайними оценками, не просто означает выбор средних оценок в оценочном континууме каждым испытуемым, а представляет собой вариацию различных оценок.
Задания только тогда следует включать в окончательную версию опросника, когда они измеряют те же самые личностные особенности, что и другие, предназначенные для этого задания. Это основной критерий.
Тест обычно считается надежным, если с его помощью получаются одни и те же показатели для каждого исследуемого при повторном тестировании.
В психометрике слова надежность имеет два значения. На одном из них - надежности по внутренней согласованности. Вполне естественно считать, что если некоторая переменная измеряется частью теста, то другие его части, не будучи согласованными с первой, измеряют нечто другое. Для того чтобы быть валидным, тест должен быть согласованным. Существует несколько способов определения надежности.
Надежность ретестовая - предполагает повторное предъявление того же самого теста тем же испытуемым и примерно в тех же условиях, что первоначальное, а затем установление корреляции между двумя рядами данных. При использовании этого метода определения надежности нужно отдавать себе отчет в том, что испытуемые могут запомнить свои ответы и воспроизвести их во второй раз, поэтому повторное тестирование должно быть отделено от первого более-менее значительным временным интервалом, обычно не менее месяца.
Надежность параллельных форм предусматривает создание эквивалентных форм опросника и предъявление их одним и тем же испытуемым для того, чтобы затем оценить корреляцию между полученными результатами. Основная проблема, препятствующая широкому распространению этого способа определения надежности, - необходимость подготовки двух наборов знаний, что чрезвычайно сложно, поскольку требуются убедительные доказательства их эквивалентности.
Надежность частей тела определяется путем деления опросника на две части (обычно на четные и нечетные задания), после чего и рассчитывается корреляция между этими частями. Обычно к этому способу определения надежности рекомендуется прибегать только в тех случаях, когда необходимо быстро получить результаты.
Во многих случаях перед разработчиком теста встает задача "сжатия" информации или, иначе говоря, компактного описания изучаемых явлений при наличии множества наблюдений или переменных. Факторный анализ как раз является методом снижения размерности изучаемого многомерного явления.
Как хорошо известно, одной из типичных форм представления экспериментальных данных является матрица, столбцы которой соответствуют результатам (значениям), полученным в результате их применения. Визуальный анализ сколь-нибудь значительной по величине матрицы невозможен, а поэтому требуется исходную информацию сжать, извлечь из нее наиболее важное, существенное. Прежде всего исследователю необходимо получить корреляционную матрицу (подсчет коэффициентов корреляции).
В психологическом тестировании цель факторного анализа заключается в том, чтобы найти несколько фундаментальных факторов, которые объяснили бы большую часть дисперсии в группе оценок по различным тестам или другим психометрическим измерениям. Существует несколько процедур факторного анализа, но не все они предполагают две стадии: 1) факторизацию матрицы корреляций, с тем, чтобы получилась первоначальная факторная матрица; 2) вращение факторной матрицы, с тем, чтобы обнаружить наиболее простую конфигурацию факторных нагрузок.
Стадия факторизации в этом процессе призвана определить количество факторов, необходимых для объяснения связей между различными тестами, и обеспечивает получение первичных оценок нагрузки (веса) каждого теста по каждому фактору. Вращение факторов необходимо для того, чтобы сделать их более понятными (интерпретируемыми) с помощью создания конфигурации факторов, в которой совсем немного тестов имеют высокие нагрузки, тогда как большая часть тестов имеют низкие нагрузки по любому фактору.
Факторно-аналитический подход позволяет также оценить надежность теста. Как известно, полная дисперсия теста равна сумме дисперсий для общих факторов, плюс дисперсии специфических факторов, плюс дисперсия погрешности. Следовательно, мы осуществим факторный анализ теста, возведем в квадрат и суммируем нагрузки его факторов, то мы получим его надежность, поскольку нагрузки факторов представляют корреляцию теста с общими или специфическими факторами. Однако следует помнить, что такой способ установления надежности более всего подходит для уже факторизованного теста, нежели для тестов, которые могут измерять широкий набор разных факторов, часть которых могут не входить в батарею изучаемых исследователем.
Одним из важных отличий психометрических тестов является то, что они стандартизированы, а это позволяет сравнить показатели, полученные одним испытуемым, с таковыми в генеральной совокупности или соответствующих группах. Тем самым достигается адекватная интерпретация показателя определенного испытуемого. Таким образом, стандартизация теста наиболее важна в тех случаях, когда осуществляется сравнение показателей обследуемых. При этом вводится понятие нормы, или нормативных показателей. Для получения стандартных норм нужно тщательно отобрать большее количество испытуемых в соответствии с ясно обозначенным критерием. При формировании выборки стандартизации следует учитывать ее объем и репрезентативность. В руководствах по тестам чаще всего указывают то, что для простого уменьшения стандартизированной погрешности достаточно будет выборка из 500 испытуемых. Однако репрезентативность выборки зависит не от ее объема.
Сегодня на практике все больше используется такой тип производной оценки, как стандартные показатели, удовлетворяющий большинству требований, предъявляемых к психологическому измерению. Такие показатели выражают отличие индивидуального результата испытуемого от среднего в единицах стандартного отклонения соответствующего распределения. Стандартные показатели получают двумя путями: линейным и нелинейным преобразованием первичных ("сырых") оценок.
Созданием стандартизированного теста и его публикацией обычно завершается работа психолога, однако следует помнить о том, что с течением времени необходим пересмотр (ревизия) теста.
Личностные опросники
Личностные опросники - классический образец субъективного диагностического подхода. Опрос - один из наиболее надежных способов получения знания о личности, и поэтому вполне понятно давнее стремление исследователей к его объективизации. Это находит свое выражение прежде всего во все более возрастающих требованиях к надежности и валидности личностных опросников.
Работая с личностными опросниками, которые были, есть в обозримом будущем будут наиболее популярными инструментами оценки личности, каждый специалист-психолог должен четко знать, что предоставляет собой эти психодиагностические методики, что скрывается за их фасадом.
Личностные опросники внешне представляют собой разной величины перечни вопросов или утверждений, на которые обследуемый должен отвечать в соответствии с предложенной ему инструкцией. Количество вопросов (утверждений) значительно варьирует. Множество личностных опросников, разработанных к настоящему времени, по диагностической направленности можно подразделить на:
·опросники черт личности (например, опросники Р. Кеттела);
·опросники типологические (например, опросники Г. Айзенка);
·опросники мотивов (например, опросник А. Эдвардса);
·опросники интересов (например, опросники Г. Кюдера);
·опросники ценностей (например, опросник Д. Супера);
·опросники установок (например, шкала Л. Терстоуна).
В соответствии с принципом, положенным в основу конструирования, следует различать:
·опросники факторные, для конструирования которых используется факторный анализ (например, опросники Р. Кеттела);
·опросники эмпирические, которые создаются на основе критериально-ключевого принципа (например, MMPI).
Наконец, все личностные опросники могут быть разделены на те, которые предназначены для измерения какого-либо одного качества (свойства) или нескольких. Обозначим их как одномерные и многомерные. Фактически все опросники могут быть использованы не только для индивидуального, но и при группвом обследовании.
В личностных опросниках наиболее распространенные следующие формы вопросов (утверждений),
а) Вопросы, предусматривающие ответы типа "да-нет".
б) Вопросы, предусматривающие ответы типа: "да", "нечто среднее", "нет". Добавляется неопределенный ответ.Как правило, неопределенные ответы неинформативны, а в опросниках со средней категорией ответов может актуализироваться соответствующая установка, искажающая получаемую информацию. Использование такой формы вопросов связано с тем, что у некоторых истытуемых возникает раздражительность, отказ от работы в том случае, когда их заставляют отвечать утвердительно или отрицательно.
в) Вопросы, предусматривающие ответы типа: "правда-ложь", или так называемые альтернативные задания.
г) Вопросы, предусматривающие ответы типа: "нравится- не нравится" (одно слово или фраза). Редко используемая форма вопросов.
д) Вопросы, предусматривающие ответы по рейтинговым шкалам. К вопросам прилагаются шкалы: скажем, 7-бальная с коайним значением "всегда" и "никогда". Основные проблемы, возникающие при такой форме вопросов, связанные с пониманием обследуемых терминов, указывающих на частоту, и возможность появления я стараюся показать свое превосходство. Варианты ответов: "всегда", "очень редко", "часто", "от случая к случаю", "редко", "очень редко", "никогда".
е) Вопросы, предусматривающие ответы, являющиеся вариантами "да-затрудняюсь ответить-нет". Это могут быть такие ответы, как "обычнно-иногда-никогда", "согласен-не уверен-не согласен" и так далее. Подбор того или иного варианта обуславливается смысловыми особенностями вопроса (утверждения).
ж) Вопросы, предусматривающие ответы на основе выбора из нескольких предложенных обследуемому развернутых высказываний. Обычно это завершающие предложенные фразы, одну из которых и необходимо избрать. Используется два, три и более вариантов выбора.
С помощью тестирования устанавливают психологические качества человека, наличие или отсутствие определенных способностей (дидактических, коммуникативных, организаторских), привычек, научений. Главным инструментам во время использования этого метода является тест.
Тест - специально разработанные задания и проблемы ситуации, использования которых в результате колличественных и качественных оценок может стать показателем развития определенных психологических качеств, способностей личности.
Современная психодиагностика использует такие основные виды тестов:
- тесты интелекта (задачи на логическое отношение, обобщенность, смекалку);
- тесты достижений (речь идет о выявлении степени конкретных знаний);
- личные тесты (с целью изучения характеристик личности, их психологических качеств);
-проэктивные тесты (используются в процессе изучения личности и характеристик, в существовании которых человек полностью не уверен, не понимает или не хочет признавать у себя, например, плохие черты способностей).
По форме тестовые методы делят на вербальные, невербальные и смешанные. Эффективность их зависит от правильности использования тестов, придерживания условий психологического тестирования: правильно примененный тест дает возможность собрать за кототкий срок много ценного материала для качественного психологическго анализа, которые повышает продуктивность исследовательной работы.
Метод групповой оценки личности. Построен он на феномене групповых явлений про каждого участника группы в результате познания людей про каждого участника группы в результате познания людей в процессе их общей деятельности и общения. Предусматривает получение характеристики человека во время оценивания характеристики человека во время взаимных исследований с использованием приемов непосредственного оценивания за n-бальной шкалой, ранжирования (последовательное размещение) качеств, попарного их сравнения и другое.
Метод изучения документов. Традиционно документами считаются специально созданные предметы, назначены для передачи и сохранения информации. Ними могут быть какая-нибудь информация, что содержит данные про отношения в группе, влияния трудовой деятельности на человека и так далее. В психологической литературе документы делятся на такие типы:
- за статусом: официальные (государственные материалы, статистические отчетные архивы, приказы и другое); неофициальные (анкеты, жалобы, мемуары, письма, фотографии);
-по форме: письменные документы (печатные, машинописные, рукописные); фонетические (магнитные записи, пластинки, лазерные диски); иконографические (кино-, видио-, фотодокументы, произведения живописи);
-по источнику информации: первичные (созданные на основании прямого наблюдения или непосредственного опроса); вторичные (обработанная и обобщенная первичная информация);
- по способу персонофикации: личные (автобиография, личные карточки, характеристики, заявления, анкеты, жалобы); безличностные (отчеты, протоколы, архивные документы).
Работа с документами требует от исследования специальной подготовки. Особенно важными являются умения определять достоверность информации, которая подана в документах (выяснить, с какой целью составлен документ, кто его автор и инициатор; проанализировать намерения личностей, которые составляли документ; отделить описание событий и их оценку; установить, был ли автор документа свидетелем зафиксированного события, передал ли ее со слов других или составил документ на основании данных, полученных от других людей, и так далее).
Метод социометрии. Созданный он американским социальным психологом Джекобом (Якобом) Морено (1892-1974) для изучения эмоционально-психологических отношений в малой социальной группе. Его процедура направленна на опрашивание каждого участника малой группы с целью установления возможности его участия (неучастия) в определенном виде совместной деятельности или ситуации. Конечные результаты использования социометрии могут быть представлены в форме социологических матриц, социограмм, которые графически отображают структуру отношений в группе или социометрических индексов, которые колличественно отображают психологические отношения в группе. Метод социометрии имеет и определенные недостатки, поскольку во время его использования невозможно узнать про мотивы межличностных предпочтений или протестов. Нередко его результаты создаются неискренними ответами и так далее.
В социальной психологии использует и другие меоды и методики: шкалы измерения социальных установок, аппаратурный метод и тому подобное. Для получения достоверных ведомостей досканально одновременно использовать неккоторые несколько методов: если их результаты сохраняются, это повышает уверенность в правильности сделанных выводов.
Получаемые с помощью личностных опросников данные приводятся в виде количественных оценок, которые во многомерных шкалах, как правило, преобразуются в разного типа стандартизированные показатели. Результаты для наглядности могут быть представлены, например, в виде "профиля личности" или "дискограммы".