СТАНДАРТ ТРЕБОВАНИЙ К ПСИХОДИАГНОСТИЧЕСКИМ МЕТОДИКАМ
Требования к конструированию психодиагностических методик
1.1. Методики должны создаваться на основе теоретических представлений и эмпирических свидетельств об изучаемых концептах, и конструктах. Разработчик должен однозначно выбрать из множества представлений об изучаемом явлении одно и документально зафиксировать его.
1.2. Структура методики, включая количество заданий для выявления конкретного параметра (диагностического фактора), должна быть логически и/или эмпирически обоснована и задокументирована.
1.3. Выбор формы (формат) тестовых заданий (пунктов) и формы ответов на задания должен быть обоснован и задокументирован.
1.4. Пункты методики не должны выходить за пределы содержательной области. Это позволяет сформировать репрезентативную выборку содержания методики.
1.5. Отбор пунктов (тестовых заданий) должен сопровождаться их эмпирической проверкой и доводиться до соответствия принятому уровню психометрических параметров.
1.6. При конструировании шкал разработчику методики можно ориентироваться на достижение величины коэффициентов внутренней согласованности пунктов в шкале от 0,7 до 0,9. При этом для личностно-характерологических методик допустимы несколько более низкие значения 0,6 – 0,8, чем для тестов достижений и специальных способностей. Вместе с тем необходимо параллельно контролировать величину дискриминативности шкалы, поддерживая ее на максимально высоком уровне.
1.7. При использовании для отбора пунктов экспертов их квалификация н степень согласованности решений должны быть проверены и задокументированы.
1.8. При расчете тестового балла, исходя из различного «веса» вопросов и/или ответов, вся процедура по созданию, обоснованию и назначению «весовых» коэффициентов должна быть обоснована и задокументирована.
|
|
1.9. При использовании в методике пунктов со свободными ответами должны быть представлены обоснованные и документированные критерии оценки ответов. В этом случае в инструкции для специалистов, занимающихся обработкой результатов, должны быть представлены не только критерии, но и примеры – образцы ответов, относимых к определенным категориям.
1.10. При разработке индивидуально адаптируемого компьютерного теста должны быть представлены доказательства: об обоснованности и проверке необходимого множества пунктов, имеющих необходимый диапазон различения; об обосновании выбора исходного положения (начала) и условий завершения процедуры; об исключении взаимовлияния соседних пунктов; об обоснованности способов обработки результатов.
1.11. Если кроме полной формы методики разрабатывается краткая форма с помощью уменьшения количества вопросов исходных пунктов, то спецификация краткой формы должна быть как можно ближе к полной, а все психометрические параметры не должны отличаться более, чем на 10 – 15 процентов от их значений для полной формы.
Требования к надежности методики
2.1 Требование надежности распространяется на результаты измерения методики в целом, отдельных параметров (диагностических факторов) и их комбинации, которые предлагается пользователю содержательно интерпретировать.
2.2. Для психометрической проверки методики на ее надежность необходимо проводить вычисление по нескольким видам надежности, поскольку каждый вид надежности фиксирует различные источники ошибок измерения. Рекомендуется проверка, по крайней мере, по двум видам надежности по внутренней согласованности и по ретестовой стабильности, а при наличии параллельных форм – и по показателю их эквивалентности.
|
|
2.3. Каждый метод определения надежности должен быть ясно описан вместе с соответствующими для него статистическими процедурами. Также должны быть описаны подходы, использованные для отбора обследованных в выборке, предназначенной для проверки надежности, и приведены описательные статистики этой выборки или выборок.
2.4. Размеры выборки для исследования одного вида надежности должны составлять не менее 100 человек Оптимальным является проведение нескольких исследований на различных выборках для каждого из видов надежности. В особых случаях допускается меньший размер выборки, но не менее 50 человек.
2.5. Надежность по внутренней согласованности должна находиться в пределах от 0,70 до 0,90. При этом для личностно-характерологических тест-опросников, имеющих высокие показатели внешней валидности допустимый диапазон может быть 0,6 – 0,8.
2.6. Надежность по ретестовой стабильности должна находиться в пределах коэффициентов корреляции от 0,60 до 0,80. При этом необходимо документально обосновать продолжительность интервала между повторными тестированиями, в зависимости от объективной стабильности и измеряемого методикой свойства (феномена). В случаях высокой зависимости измеряемого свойства (феномена) от изменчивых ситуационных или внутренних факторов, допускается корреляция в интервале 0,4 – 0,6,
|
|
2.7. Величина надежности эквивалентных форм должна быть в пределах коэффициентов корреляции от 0,6 до 0,8. Эти коэффициенты могут быть ниже на 0,1 – 0,2, если они рассчитываются при объединении с процедурами повторного тестирования по разным формам.
2.8. Пользователи теста должны быть проинформированы обо всех факторах, которые могут серьезно повлиять на надежность. В том числе об уровне интенсивности работы иди продолжительности выполнения методики (батареи методик) обследуемым, которые могут повлиять, на надежность полученных данных.
2.9. Если существуют общепринятые теоретические или эмпирические причины дня ожидания, что коэффициенты надежности будут значительно различаться в разных популяциях, то разработчики и издатели должны обеспечить пользователя данными о надежности в каждой из популяций, для которых тест рекомендуется.
2.10. Когда тест имеет длинную и короткую форму, данные о надежности должны быть представлены отдельно и желательно на основании проверки при независимом проведении и на различных выборках.