4) критерии случайностей (применяются, когда цель исследования касается, например, проблемы отбора для работы таких лиц, которые менее подвержены несчастным случаям).
Внешний критерий должен отвечать трем основным требованиям:
♦ он должен быть релевантным;
♦ свободным от помех;
♦ надежным.
Под релевантностью имеется в виду смысловое соответствие диагностического инструмента независимому жизненно важному критерию. Другими словами, должна быть уверенность в том, что в критерии задействованы именно те особенности индивидуальной психики, которые измеряются и диагностической методикой. Внешний критерий и диагностическая методика должны находиться между собой во внутреннем смысловом соответствии, быть качественно однородными по психологической сущности. Если, например, тест измеряет индивидуальные особенности мышления, умение выполнять логические действия с определенными объектами, понятиями, то и в критерии нужно искать проявление именно этих умений. Это в равной степени относится и к профессиональной деятельности. Она имеет не одну, а несколько целей, задач, каждая из которых специфична и предъявляет свои условия к выполнению. Из этого вытекает существование нескольких критериев выполнения профессиональной деятельности. Поэтому не следует проводить сопоставление успешности по диагностическим методикам с производственной эффективностью в целом. Необходимо найти такой критерий, который по характеру выполняемых операций соотносим с методикой.
Если относительно внешнего критерия неизвестно, релевантен он измеряемому свойству или нет, то сопоставление с ним результатов психодиагностической методики становится практически бесполезным. Оно не позволяет прийти к каким-либо выводам, которые могли бы дать оценку валидности методики.
Требования свободы от помех вызываются тем, что, например, учебная или производственная успешность зависит от двух переменных: от самого человека, его индивидуальных особенностей, измеряемых методиками, и от ситуации, условий учебы, труда, которые могут привнести помехи, «загрязнить» применяемый критерий. Чтобы в какой-то мере избежать этого, следует отбирать для исследования такие группы людей, которые находятся в более или менее одинаковых условиях. Можно использовать и другой метод. Он состоит в корректировке влияния помех. Эта корректировка носит обычно статистический характер. Так, например, производительность следует брать не по абсолютным значениям, а в отношении к средней производительности рабочих, работающих в аналогичных условиях.
Когда говорят, что критерий должен иметь статистически достоверную надежность, это означает, что он должен отражать постоянство и устойчивость исследуемой функции.
Поиски адекватного и легко выявляемого критерия относятся к очень важным и сложным задачам валидизации. В западной тестологии много методик дисквалифицировано только потому, что не удалось найти подходящего критерия для их проверки. Например, у большей части анкет данные по их валидности сомнительны, так как трудно найти адекватный внешний критерий, отвечающий тому, что они измеряют.
Оценка валидности методик может носить количественный и качественный характер.
Для вычисления количественного показателя — коэффициента валидности — сопоставляются результаты, полученные при применении диагностической методики, с данными, полученными по внешнему критерию, тех же лиц. Используются разные виды линейной корреляции (по Спирмену, по Пирсону).
Сколько испытуемых необходимо для расчета валидности?
Практика показала, что их не должно быть меньше 50, однако лучше всего более 200. Часто возникает вопрос, какой должна быть величина коэффициента валидности, чтобы она считалась приемлемой? В общем отмечается, что достаточно того, чтобы коэффициент валидности был статистически значим. Низким признается коэффициент валидности порядка 0,20-0,30, средним — 0,30-0,50 и высоким — свыше 0,60.
Но, как подчеркивают А. Анастази [10, т. 1], К. М. Гуревич [31] и др., не всегда для вычисления коэффициента валидности правомерно использовать линейную корреляцию. Этот прием оправдан лишь тогда, когда доказано, что успех в какой-то деятельности прямо пропорционален успеху в выполнении диагностической пробы. Позиция зарубежных тестологов, особенно тех, кто занимается профпригодностью и профотбором, чаще всего сводится к безоговорочному признанию того, что для профессии больше подойдет тот, кто больше выполнил заданий в тесте. Но может быть и так, что для успеха в деятельности нужно обладать свойством на уровне 40 % решения теста. Дальнейший успех в тесте уже не имеет никакого значения для профессии. Наглядный пример из монографии К. М. Гуревича [31]: почтальон должен уметь читать, но читает ли он с обычной скоростью или с очень большой скоростью — это уже не имеет профессионального значения. При таком соотношении показателей методики и внешнего критерия наиболее адекватным способом установления валидности может быть критерий различий.
Возможен и другой случай: более высокий уровень свойства, чем это требует профессия, служит помехой профессиональному успеху. Так, еще на заре XX в. американский исследователь Ф. Тейлор нашел, что наиболее развитые работницы производства имеют невысокую производительность труда. То есть высокий уровень их умственного развития мешал им высокопроизводительно трудиться. В этом случае для вычисления коэффициента валидности более подошел бы дисперсионный анализ или вычисление корреляционных отношений.
Как показал опыт работы зарубежных тестологов, ни одна статистическая процедура не в состоянии полностью отразить многообразие индивидуальных оценок. Поэтому часто для доказательства валидности методик используют другую модель — клинические оценки. Это не что иное, как качественное описание сущности изучаемого свойства. В этом случае речь идет об использовании приемов, не опирающихся на статистическую обработку.
Вопросы и задания
1. Дайте определение понятию «стандартизация методик».
2. Что такое репрезентативная выборка? Как она строится?
3. Назовите приведенные в главе критерии оценки результатов диагностических испытаний.
4. Что такое надежность методики? Назовите виды надежности.
5. Что такое валидность методики? Назовите ее основные виды.
Рекомендуемая литература
1. Анастази А. Психологическое тестирование: В 2 кн. / Под ред. К. М. Гуревича, В. И. Лубовского. Кн. 1. - М., 1982.
2. Бурлачук Л. Ф. Психодиагностика. — СПб., 2003.
3. Бурлачук Л. Ф., Морозов С. М. Словарь-справочник по психологической диагностике. — Киев, 1989.
4. Гайда В. К., Захаров В. П. Психологическое тестирование. — Л., 1982.
5. Гуревич К. М. О надежности психофизиологических показателей // Проблемы дифференциальной психофизиологии. Т. 6. — М., 1969.
6. Гуревич К. М. Надежность психологических тестов // Психологическая диагностика. Ее проблемы и методы. — М., 1975.
7. Гуревич К. М. Статистика — аппарат доказательства психологической диагностики // Проблемы психологической диагностики. — Таллин, 1977.
8. Гуревич К. М. Что такое психологическая диагностика. — М., 1985.
9. Гуревич К. М. Проблемы дифференциальной психологии. — М.; Воронеж, 1998.
10. Носс И. Н. Введение в технологию психодиагностики. — М., 2003.
11. Общая психодиагностика / Под ред. А. А. Бодалева, В. В. Столина. - М., 1987.
12. Основы психодиагностики / Под ред. А. Г. Шмелева. — Ростов н/Д, 1996.
ЧастьII
ДИАГНОСТИКА
КОГНИТИВНОЙ
СФЕРЫ
Глава 1
Диагностикаинтеллектаиумственного развития
Проблема интеллекта, интеллектуальных способностей, интеллектуального (умственного) развития в психологии относится к числу старейших. Порой представляется, что это «вечная» проблема, относящаяся к «инвариантному ядру» (выражение М. Г. Ярошевского) этой науки, т. е. к той системе категорий и проблем, которые подвергаются исследованию на всем протяжении ее возникновения, развития и существования. Более того, идеи относительно его происхождения и сущности высказывались учеными еще в период донаучного развития психологии (например, античными мыслителями Гераклитом, Парме-нидом, Платоном, Аристотелем др.).
Значимость проблемы интеллекта и умственного развития в первую очередь определяется той ролью, которую они играют в разрешении комплекса социальных и индивидуально-психологических проблем человека. Интеллект опосредует успешность деятельности, выполняемой человеком, от него зависит разумность его поведения и взаимоотношений с окружающими, социальная ценность и социальный статус индивида. Он является ведущим, стержневым качеством не только когнитивного, но и целостного личностного развития. С ним связаны направленность и установки личности, система ее ценностей и самоотношение, он формирует личностный облик. Интеллект играет важнейшую роль в структуре целостной индивидуальности. Без уяснения его сущности неполным является понимание человека как Homosapiens.
Вместе с тем интеллект остается многозначным понятием, отражающим способности человека к познанию, достижению целей, адаптации, решению проблем и многое другое. Помимо того, что этим понятием пользуются психологи, им оперируют также в философии, социологии, педагогике, кибернетике, физиологии и других областях научного знания. Кроме того, оно существует в обыденном сознании,
является понятием житейским (отождествляемым с умом). В каждой из областей знания вырабатываются свои представления об интеллекте, не поддающиеся простому объединению с другими или рациональному обобщению. Без предварительного уточнения значения, которое ему придается в том или ином исследовании, нельзя понять результаты этого исследования.