Другие психологические методы - психологическое наблюдение, психологический эксперимент, экспертные оценки - также могут поставлять эмпирические данные об индивидуальных различиях между людьми. И эти данные используются в схемах постановки психологического диагноза. Но по отношению к названным методам реализуются другие схемы рассуждений, соответствующие логике проверки исследовательских психологических гипотез. Общим остается, однако, стремление психологов приблизить свой диагноз к такому, который был бы поставлен при использовании максимально валидных и надежных методических процедур.
Валидность психодиагностической методики - это комплекс показателей, отражающих разные аспекты оценки ее соответствия (или адекватности) как диагностической процедуры той психологической реальности или тем психологическим конструктам, измерение которых предполагается. По определению видного американского тестолога А. Анастази, "валидность теста - понятие, указывающее нам, что тест измеряет и насколько хорошо он это делает" [Анастази А. - 1982. - Т. 1. - С. 126]. Таким образом, валидность свидетельствует о том, пригодна ли методика для измерения определенных качеств, особенностей и насколько эффективно она это делает. В первом понимании валидность характеризует сам измерительный инструмент, и проверка этого аспекта валидности называется теоретической валидизацией. Проверка второго аспекта валидности называется прагматической (или практической) валидизацией. Теоретическая валидность дает информацию о степени измерения методикой теоретически выделяемой черты (например, умственного развития, мотивации и т.д.).
Наиболее распространенным способом определения теоретической валидности методики является конвергентная валидность, т. е. сопоставление данной методики с авторитетными родственными методиками и доказательство наличия значимых связей с ними. Сопоставление с методиками, имеющими другое теоретическое основание, и констатация отсутствия значимых связей с ними называется дискриминантной валидностью. Если референтных методик не существует, то только постепенное накопление разнообразной информации об изучаемом признаке, анализ теоретических предпосылок и экспериментальных данных, длительный опыт работы с методикой позволяют раскрыть ее психологический смысл.
Другой вид валидности - прагматическая валидность - проверка методики с точки зрения ее практической значимости, эффективности, полезности. Для проведения такой проверки, как правило, используются так называемые независимые внешние критерии, т.е. показатели проявления изучаемого свойства в жизни. Среди них могут быть успеваемость, профессиональные достижения, достижения в различных видах деятельности, субъективные оценки (или самооценки). При подборе внешнего критерия необходимо соблюдать принцип его релевантности изучаемому методикой признаку, т. е. между диагностируемым свойством и жизненно важным критерием должно быть смысловое соответствие. Если, например, методика измеряет особенности развития профессионально важных качеств, то для критерия необходимо найти такую деятельность или отдельные операции, где именно эти качества реализуются.
Что касается величин коэффициентов валидности, то они по разным причинам всегда ниже, чем коэффициент надежности. По мнению ведущих психодиагностов, низким признается коэффициент валидности порядка 0,20-0,30, средним - 0,30 - 0,50, высоким - выше 0,60.
Степень соответствия получаемых с помощью диагностического средства эмпирических данных тому конструкту, который описывает предполагаемую (латентную) психологическую переменную, определяется как конструктная валидностъ методики.
Степень соответствия тем заданий (содержания "пунктов" в тесте) сфере диагностируемых психических свойств характеризует содержательную валидностъ методики.
Психодиагностические методики могут быть направлены как на выявление актуального уровня эмпирических составляющих, или "признаков", подводимых под то или иное понятие (диагностируемой латентной переменной), так и на прогноз степени представлен-ности выявляемых свойств в практических видах деятельности или изменений признаков в будущем.
Текущая валидностъ в узком смысле - это "установление соответствия результатов валидизируемого теста независимому критерию, отражающему состояние исследуемого тестом качества в момент проведения исследования" [Бурлачук Л. Ф., Морозов С. М. - 1989. - С. 29]. Этот критерий может быть как внешним, например успешность субъекта в определенном виде деятельности или принадлежность к той или иной группе испытуемых, так и психологическим, но связанным с использованием другой методики.
Прогностическая валидностъ характеризует не степень соответствия на уровне актуально измеряемого психического свойства, а возможность предсказания какой-то другой - второй переменной по показателям или "признакам" выраженности первой, собственно диагностируемой переменной.
Ретроспективная валидностъ определяется на основе критерия, отражающего событие или состояние качества в прошлом. Она также может свидетельствовать о предсказательных возможностях методики.
Надежность - составляющая оценки свойств психодиагностической методики, отражающая степень точности измерения и стабильности результатов с точки зрения контроля разных источников вариативности психологических показателей: вариативности самого измеряемого свойства; вариативности данных в силу множественных соответствий латентного свойства и эмпирических "признаков"; устойчивости самой шкалы в контексте процедурных компонентов методики; возможности получения сходных результатов в другое время или подверженности изменениям со стороны других процессов и свойств (например, противостояния разных пунктов опросника фактору "социальной желательности" ответа).
Известный специалист в области психодиагностики К. М. Гуре-вич предлагает выделять три типа надежности: надежность самого измерительного инструмента, стабильность изучаемого признака и константность, т.е. независимость результатов от личности экспериментатора [Гуревич К.М. - 1975. - С. 162 - 176]. С учетом этого следует различать и показатели, характеризующие тот или иной тип надежности, называя их соответственно коэффициентами надежности, стабильности или константности. В таком порядке следует проводить проверку методик: вначале следует проверить инструмент измерения, затем выявить меру стабильности изучаемого свойства и только после этого перейти к критерию константности.
Качество методики определяется тем, насколько хорошо она составлена, насколько однородна, что свидетельствует о ее направленности на диагностику одного и того же свойства, признака. Для проверки надежности инструмента по показателю однородности (или гомогенности), как правило, используют метод "расщепления". Для этого все задания психодиагностического инструмента делятся на четные и нечетные (по нумерации), отдельно обрабатываются, а затем подсчитываются коэффициенты корреляции между этими рядами. Об однородности методики свидетельствует отсутствие существенной разницы в успешности решения выделенных частей, что выражается в достаточно высоких коэффициентах корреляции - не ниже 0,75 - 0,85. Чем выше эта величина, тем однороднее методика, тем выше ее надежность. Существуют специальные способы увеличения надежности разрабатываемого метода [Анастази А. - 1982].
Для проверки стабильности изучаемого признака используется метод, получивший название "т е с т - р е т е с т", который заключается в проведении повторного психодиагностического испытания той же выборки испытуемых через определенный промежуток времени, вычислении коэффициента корреляции между результатами первого и второго испытания. Этот коэффициент и представляет собой показатель стабильности исследуемого признака. Как правило, повторное обследование проводится через несколько месяцев (но не более полугода). Нельзя проводить повторное испытание слишком быстро после первого, поскольку есть опасность, что испытуемые будут воспроизводить свои ответы по памяти. Однако этот срок не может быть слишком большим, поскольку в этом случае возможно изменение, развитие самой исследуемой функции. Коэффициент стабильности считается приемлемым в том случае, когда его величина не ниже 0,80.
Коэффициент константности определяется путем корреляции результатов двух психодиагностических испытаний, проведенных на одной и той же выборке испытуемых с соблюдением идентичности условий, морозными экспериментаторами. Он должен быть не ниже 0,80.
Таким образом, качество любой психодиагностической методики зависит от степени ее стандартизованности, надежности и валидности. При разработке любой диагностической методики ее авторы должны проводить соответствующую проверку и сообщать в руководстве к ее применению полученные результаты.
Не следует путать уровень психометрического обоснования психодиагностической методики и вид, или метрику, построенной психологической шкалы, отражающей уровень результатов измерения. Качественные данные, соответствующие описательным или - в лучшем случае - классификационным параметрам представления диагностируемых психических свойств, не обязательно будут свидетельствовать о меньшей надежности методики, чем в случае получения количественных показателей. Качественные характеристики позволят отнести испытуемых - как обследуемых субъектов или классифицируемых "объектов" - к той или иной группе; условием является, однако, возможность полного охвата в этих предполагаемых группах всех признаков классификации. Количественные характеристики позволят не только сопоставлять людей между собой уже по их принадлежности к разным группам (или классам признаков), но и установить порядок их расположения друг за другом с точки зрения выраженности диагностируемого признака (порядковая шкала) или осуществить сравнения, на сколько единиц или во сколько раз тот или иной признак более или менее выражен у одного субъекта по сравнению с другим, что позволяют определить шкала интервалов и шкала отношений (см. п. 6.6).