При эмпирической операционализации понятий основная задача состоит в достижении согласованного мнения по поводу явлений реальной действительности, через которые может быть описано то или иное теоретическое понятие. Например, как мы можем установить степень общественной активности респондента? Наиболее эффективным способом работы экспертов при решении задач подобного рода является очный опрос методом обмена мнениями ("отнесенной оценки"). Так, в исследования социальных потребностей молодежи этот метод использовался для эмпирической интерпретации понятий относящихся к характеристике потребностей молодежи, в частности эстетических. Опрос экспертов позволил установить эмпирические референты, по которым можно судить, проявляются ли у респондентов изучаемые потребности[6]. Полученное операциональное определение эстетической потребности, явилось в дальнейшем основой для разработки измерительной шкалы.
Выдвижение рабочих гипотез - многоступенчатый процесс логического вывода: от теоретических положений концептуальной модели к эмпирически проверяемым суждениям. Безусловно, этот процесс может быть интенсифицирован коллективной работой экспертов. Наибольший эффект достигается применением методов обмена мнениями и стимулированного наблюдения.
Разработка методики сбора информации, предназначенной для проверки гипотез, включает построение системы показателей и шкал, на основе которых затем составляются методические документы (анкеты, карточки наблюдения, планы-интервью, макеты статистических таблиц и т.д.). В этой части процедурного раздела программы наиболее широки возможности применения экспертных методов. Например, в упоминавшемся исследовании по изучению и прогнозированию социальных потребностей молодежи, опросы экспертов применялись для разработки системы показателей и шкал измерения потребностей, а также шкалы, учитывающей прогностический фон - влияние на потребности других социальных процессов.
В соответствии с операциональным рассмотрением художественно-эстетической потребности в процессе мозговых атак было составлено более ста утверждений, свидетельствующих о наличии или отсутствии художественно-эстетической потребности, которые легли в основу составленного опросника[7].
Построение шкалы измерения потребностей по методу эстремальных групп явилось результатом семи этапов работы, один из которых - составление списка вопросов и определение числа и вида ответов на них, причем таких, которые обладали бы различительной способностью, т.е., делали возможной корреляцию их с уровнем paзвития потребности респондента. Это, как правило, требует дополнительной информации о характере избранной потребности, о фактоpax, влияющих на нее, о видах проявления данной потребности в поведении, сфере сознания, эмоциональной жизни респондентов. В целях возможно большего разнообразия вопросов применялся метод "мозговой атаки", которая расширяет ассоциативную основу коллективной интеллектуальной деятельности[8].
Построение с помощью экспертных оценок шкалы - одна из двух возможных процедур измерения активности фона наряду с математико-статистической обработкой данных по показателям базовой модели за период основания прогноза.
Применение процедур второго типа возможно в том случае, когда исследователь располагает полными и достаточно надежными данными, характеризующими динамику как профиля так и фона. Если же таких данных в распоряжении исследователя нет - а это типичная ситуация для прогнозирования в социологии, - ему приходится прибегать к опросу экспертов. Кроме того, экспертные оценки необходимы как вспомогательный, контрольный метод и в том случае, когда возможно применение математико-статистических процедур.
Шкалированный опрос экспертов был использован в работе Б.С. Батыгина для построения системы показателей образа жизни. Выбор экспертного метода обосновывается применением эмпирического определения значимости показателей, разработанных в современной социологии и статистике и основанных на построении многомерных моделей, на данном этапе построения системы затруднено. Экспертные оценки используются, как правило, в ситуациях, когда точность информации, необходимой для принятия решения, относительно невелика. Притом, при выборе данного метода сыграли определенную роль соображения экономичности и простоты экспертизы.
Опрос экспертов обнаружил гораздо больше нерешенных теоретических и методологических проблем, чем достоверных решений, однако, несмотря на приблизительность оценок он удобнее и экономичнее более сложных техник статистического определения значимости показателя[9].
При рассмотрении роли экспертного метода в разработке методики сбора информации необходимо подчеркнуть также тот факт, что шкалы высшего для социологического измерения типа - интервальные - строятся исключительно на основе экспертных оценок в технике парных сравнений (шкала Терстоуна), равных интервалов и последовательных категорий[10]. Работа с экспертами широко применяется и в других случаях, когда мы обращаемся к выборочной группе из массива обследуемых для того, чтобы глазами будущих испытуемых проверить соотносительную значимость оценок, придаваемых пунктам шкалы.
Различные процедуры с использованием экспертных оценок все чаще применяются при разработке методике ГОЛ (групповой оценки личности). В качестве примера можно привести исследование, проведенное социологической лабораторией Киевского университета, при составлении банка шкал для измерения творческой активности был использован один из вариантов экспертного опроса, разработанный в рамках подхода к изучению частоты поступков.
Процедура состояла в том, что от группы экспертов (21 человек) требовалось указать личностные свойства и поступка своих знакомых и друзей, которых, по их мнению, можно назвать творчески активными личностями. Эти черты и поступки должны были служить примером проявления творческой активности или отражать ее наличие у данного человека. Затем группе экспертов (31 человек) предлагалось оценить по полученному списку качеств известных им творчески активных людей, используя следующую шкалу: 5 - качество, присущее полностью; 4 - присуще отчасти; 3 - выражено очень слабо; 2 - отсутствует полностью. Кроме того, эксперты могли указать на неприменимость качества для оценки конкретного человека или на отсутствие достаточных знаний о его проявлении. Полученные ретроспективные оценки усреднялись, что давало возможность вычленить те качества личности, по которым наблюдалась высокая согласованность мнений экспертов.
На втором этапе исследования экспертам было предложено из списка качеств отобрать такой необходимый и достаточный их под-набор, который, по их мнению, наилучшим образом характеризует творческую активность личности. Чаще всего (более чем в 50% случаев) назывались следующие качества: наличие собственного взгляда на вещи, разносторонность интересов, критическое отношение к себе, упорство и целеустремленность, способность оставит след в духовном мире другого человека; постоянная готовность дойти до самой сути; постоянное переосмысление известного; целостность личности; постоянное самообразование; способность пожертвовать отдыхом ради работы.
После того, как методические документы подготовлены, они должны пройти стадию логической проверки и практического апробирования - пилотажа. Перед социологом встает задача определить, насколько методика соответствует целям исследования, позволяет ли она проверить выдвинутые рабочие гипотезы, направлена ли именно на тот аспект предмета исследования, которого касаются гипотезы, например, измеряет ли шкала потребностей в общественно-политической деятельности именно эту потребность, не смешивая ее с потребностью в лидерстве, стремлением к достижению карьеристских целей и т.п. Проверка готовой методики на надежность, устойчивость и обоснованность выполняется параллельно двумя способами: о помощью логического анализа и пробного использования ее на микровыборке - пилотажа. В первом случае можно с успехом применять опрос экспертов: в форме консультаций по поводу подготовленных методик (свободное интервью, реже - "мозговая атака" и обмен мнениями), а также с помощью заочных методов - от сбора мнений до дельфийской техники. Наиболее эффективны здесь обмен мнениями и формализованный заочный опрос экспертов[11].
В процессе пилотажа методик применение экспертных методов ограничено, поскольку здесь подготовленные и логически проверенные документы проходят практическую апробацию. Однако и тут возможно привлечение экспертов, во-первых, для определения численности и состава пилотажных групп, во-вторых, для обсуждения, итогов пилотажа, внесения исправлений и дополнений в документы. Но наиболее эффективен здесь обмен мнениями.
В упомянутом исследовании по изучению и прогнозированию социальных потребностей молодежи экспертный метод применялся для проверки на обоснованность подготовленного опросника. В соответствии с требованиями метода "известной группы" по установленной на одной из сессий "мозговых атак" выборке были определены две группы респондентов - с высоким и низким уровнем изучаемой художественно-эстетической потребности[12].
Обоснование выборки завершает разработку программы. На этом этапе необходимо принять решение о том, каким будет исследование - сплошным или выборочным. Затем, если исследование выборочное, надо определить способ и соответственно ему объем выборки. Что касается последнего, то тут роль экспертов минимальна: для определения объема выборки существуют детально разработанные статистические процедуры. Однако эксперты могут быть полезны для определения способа отбора - операции, требующей учета многих особенностей предмета исследования и связей в нем. Коллективное решение этой задачи, безусловно, поможет избежать ошибок репрезентативности и, следовательно, систематических ошибок в результатах исследования. К сожалению, этот момент учитывается далеко не всегда. Обоснование выборки остается пока одним из слабых звеньев в практике наших социологических исследований.