Эволюционный операционализмЧасть 2: Формальная икоммуникативная модели

Лекция седьмая

Д.М. Рогозин

14.03.2014 Шанинка 1

Курс лекций по методологии социологического исследования, читаемый на факультете социальных наук Московской высшей школы социальных и экономических наук (Шанинки) в октябре 2013 – апреле 2014.

Моему Учителю Г.С. Батыгину посвящается

Лекция шестая:

Эволюционный операционализм. Часть 2:Формальная и коммуникативная модели (7, 14 марта 2014)

14.03.2014 Шанинка 2

Диагностическая поцедура, или

модели операционализации

Прямая

Индикативная

Формальная

КоммуникативнаяН

ечет

кост

ь п

рав

ил

со

отв

етст

вия max

max

min Акцент на качестве данных

14.03.2014 Шанинка 3

Формальная модель

4

Стремление к качеству всё оправдывает

14.03.2014 Шанинка

Литература

1. Докторов Б.З. О надежности измерения в социологическом исследовании. М.: Наука, 1979.

2. Левада Ю.А. Варианты адаптивного поведения // Мониторинг общественного мнения: экономические и социальные перемены. 2002. № 1. С. 7-19.

3. Carmines E.G., Zeller R.A. Reliability and validity assessment. London: Sage Publications, 1979.[MSSES 300.18 CAR]

4. Crondach L.J. Test validation // Educational measurement / Ed. by R.L. Thorndike. Washington, DC: American Council on Education, 1971. P. 443-507.

5. Nunnally J.C. Psychometric theory. 2nd ed. New York: McGraw-Hill, 1978. [Albert SlomanLibrary BF 39]

6. Spector P.E. Summated rating scale construction: An introduction. London: Sage Publication, 1992. [MSSES 300.72 SPE]

14.03.2014 Шанинка 5

Качество опросного инструмента

1. Теоретический концепт или конструкт не может быть непосредственно обнаружен в социальной реальности и для его операционализации требуетсяследовать формальным процедурам конструирования и валидизациивыбранной совокупности переменных.

2. В этом формальная модель дублирует индикативную модель П. Лазарсфельда, однако никак не оговаривается неясность и смутность концептуальных определений и основной акцент в построении операционального определения переносится с анализа теоретических

конструктов и индикаторов на определение надежности и валидности опросного инструмента.

3. Тем самым впервые ставится вопрос о стандартах качества опросного инструмента, определяются процедуры измерения и контроля качества.

14.03.2014 Шанинка 6

Когда и в каком контексте в работах Ландберга, Додда и Лазарсфельдапоявляются рассуждения о качестве измерения? Приведите работы других авторов, в которых качество измерения стало центральной темой.

Подумать, написать (1)

14.03.2014 Шанинка 7

Надежность

Г.С. Батыгин определяет надежность как «вероятность отклонения приписываемого объекту значения от истинной его характеристики» [Батыгин, 1995, с. 73].

Предполагается, что истинная характеристика объекта неизменна, отражает его онтологический статус и не зависит от любых внешних воздействий.

Если одни и те же измирительные инструменты на одних и тех же объектах показывают разные значения, это связывается с ошибкой измерения, или ненадежностью процедуры.

14.03.2014 Шанинка 8

Способы расчета надежности

Наиболее распространены два способа расчета надежности:тест-ретест надежность — воспроизводство получаемых значений при повторных замерах;

внутренняя надежность (internal-consistency reliability) — наличие корреляции между переменными, отражающими один концепт [Spector, 1992, p. 6].

Коэффициенты корреляции можно так же считать в разных наборах переменных (разные концепты), разделяя инструмент исходя из теоретических или методических представлений.

В первом варианте коэффициент корреляции расчитывается между двумя операциональными определениями — «параллельные измерения»;

во втором — в рамках одного определения формальным способом выделяется две группы, например, четные и нечетные вопросы — «деления шкалы» [Батыгин, 1995, с. 73-74].

14.03.2014 Шанинка 9

Экспертность ответов

Проводение тест-ретеста опирается на упрощенную бихевиористкую модель «стимул —реакция»: один и тот же объект испытывает один и тот же стимул, поэтому отклонения в его реакциях от средней величины представляют не что иное, как ошибку измерения.

Проводя массовые опросы, исследователь считает, что респондент отвечает в точности на тот вопрос, который ему задан, адекватно его воспринимая и соотнося с собственными представлениями об интересующем исследователя предмете.

Респондент рассматривается в качестве эксперта своим ментальным и физическим состояниям, что само по себе, подчеркивает Г.С. Батыгин, по крайней мере сомнительно:

«Одно из неявных допущений в социологических исследованиях — наделение респондента вымышленными прерогативами эксперта по отношению к себе и социальному окружению. Предположение, что все люди полностью отдают себе отчет в том, что они думают и делают, по меньшей мере, сомнительно» [Батыгин, 1995, с. 54].

Предельный и наиболее логичный способ трансформации опроса в экспертизу —предложить респонденту программные вопросы, сформулированные в сниженной, обыденной лексике.

14.03.2014 Шанинка 10

Директор «Левада-Центра» (www.levada.ru), бывший директор Всероссийского центра изучения общественного мнения (ВЦИОМ).

Родился в г. Винница (Украина). В 1952 г. окончил философский факультет МГУ им. Ломоносова. С 1956 г. работал в разных институтах АН СССР. В 1966 защитил докторскую диссертацию по философии. В 1969 году «за идеологические ошибки в лекциях» был лишен звания профессора.

Основные работы:

Современное христианство и социальный прогресс. М., 1962. Социальная природа религии. М., 1965.

Лекции по социологии. М., 1969.

Есть мнение. М., 1990 (в соавторстве).

Статьи по социологии. М., 1993.

Советский простой человек. М., 1993 (в соавторстве).

От мнений к пониманию: социологические очерки 1993—2000. М., 2000.

Шанинка 11

Юрий Александрович Левада(24.04.1930-16.11.2006)14.03.2014

Операнд адаптации к жизни по Ю. ЛевадеКакое из следующих высказываний точнее всего описывает ваше отношение к нынешней жизни? (в % от общего числа опрошенных в каждом замере, 2001 г., N = 2400 человек)

Вариант ответа май июль сент окт. нояб

«Я никак не могу приспособиться к нынешней

жизни» 15 14 14 15 15

«Я свыкся с тем, что пришлось отказаться от

привычного образа жизни; жить, ограничивая

себя и в большом и в малом»

27 29 27 30 30

«Мне приходится “вертеться”, хвататься за

любую возможность заработать, лишь бы

обеспечить себе и близким терпимые условия

жизни»

28 29 27 30 30

«Мне удалось использовать новые возможности,

чтобы добиться большего в жизни» 7 7 8 5 7

«Я живу, как и раньше, для меня в последние

годы ничего особенно не изменилось» 15 17 16 16 16

Затрудняюсь ответить 8 7 9 9 6

14.03.2014 Шанинка 12

Повторяемость распределений

Надежность анкетного вопроса определяется Ю.А. Левадой исходя из получаемый распределений:

«Первый, наиболее очевидный вывод — устойчивая повторяемость распределения опрошенных по выделенным группам (типам поведения). Респонденты достоточно четко определяют свою принадлежность к предложенным исследователям группам. Это позволяет рассматривать результаты отдельных исследований как представительные для всего ряда (курсив мой — РД), а также использовать при анализе объединенный массив данных» [Левада, 2002, с. 7].

Приведенная аргументация — характерный признак формального подхода к проектированию опросного инструмента.

14.03.2014 Шанинка 13

14.03.2014 Шанинка 14

Валидность

Валидность операции — это совпадение результата измерения с

намерениями исследователя, сформулированными в виде теоретических конструктов.

Измерение валидности возможно лишь как «интерпретация данных, полученных посредством специально разработанных процедур» [Cronbach, 1971, p. 447], поэтому понятие теоретического конструкта сводится к определенному набору альтернативных операциональных определений (прямая модель).

Как определяются и соотносятся категории валидности и надежности у разных исследователей? В чём причина столь разнообразных подходов к определению ключевых для формальной модели параметров?

Подумать, написать (2)

14.03.2014 Шанинка 15

14.03.2014 Шанинка 16

Типология валидностиCarmines E.G., Zeller R.A. Reliability and validity assessment. London: Sage Publications, 1979.

КРИТЕРИАЛЬНАЯ(criterion-related validity)

СОДЕРЖАТЕЛЬНАЯ(content validity)

КОНСТРУКТИВНАЯ(construct validity)

текущая

предикативная

наиболее близкий концепту индикатор входит в структуру собранных данных

величина наиболее близкого концепту индикатора станет известна только по прошествии какого-то времени

14.03.2014 Шанинка 17

Критериальная валидность

Критериальная валидность строится посредством сравнения результатов измерительных процедур с внешним по отношению к ним поведению, которое и выступает критерием для их валидизации [Nunnally, 1978, p. 87].

Для получения количественных оценок критериальной валидности, как правило основанных на коэффициентах корреляции [Carmines, Zeller, 1979, p. 17], внешнее поведение также требуется операционализировать и представить в форме некоторых наборов чисел.

Процедурно критериальная валидность совпадает с внутренней надежностью, поскольку оба показателя рассчитываются исходя из корреляции нескольких признаков. Отличие состоит лишь в том, что в расчете надежности исследователь не располагает теоретическими или эмпирическими данными относительно наиболее приближенного к концепту индикатора, говоря же о валидности всегда выделяется некоторый основной,

наиболее близкий к концепту показатель.

14.03.2014 Шанинка 18

Содержательная валидностьСодержательная валидность отражает концепт полноты, или адекватности. По Д. Наннели содержательная валидность показывает насколько некоторая выборочная совокупность индикаторов адекватно представляет все аспекты выделенного исследователем концепта [Nunnally, 1978, p. 93].

Э. Кармайнес и Р. Целлер [Carmines, Zeller, 1979, p. 20-21] выделяют четыре взаимосвязанных этапа в построении содержательной валидности:

(1) определение целостной и полной области смыслов, относящейся к определенной ситуации измерения;(2) организация выборки (по возможности случайной) из общей области смыслов;(3) помещение выбранных позиций в тестируемую форму;(4) определение того, насколько полно выбранные индикаторы репрезентируют смысл исследуемого концепта.

Следуя логике содержательной валидности невозможно получить ее числовые характеристики не прибегая к другим показателям.

14.03.2014 Шанинка 19

Конструктивная валидность

Конструктивная валидность — наиболее распространенный и цитируемый показатель: «конструктивная валидность вплетена в ткань социальных наук, она занимает центральное место в измерении абстрактных теоретических концептов» [Carmines, Zeller, 1979, p. 23].

Для ее построения следует пройти три этапа:(1) определить и точно описать теоретические связи между анализируемыми концептами;

(2) установить эмпирические отношения между операциональными определениями выбранных концептов;

(3) проинтерпретировать полученные данные с точки зрения того, насколько они проясняют представление о конструктивной валидности.

Carmines E.G., Zeller R.A. Reliability and validity assessment. London: Sage Publications, 1979.

14.03.2014 Шанинка 20

Психометрический подходОсновная исследовательская задача – конструирование и опробированиемоделей, описывающих латентные признаки. [Nunnally, 1978; Zeller, Carmines, 1980; Golombok, 1999].

Э. Хит и Д. Мартин выделяют четыре основные процедуры [Heath, Martin, 1997, p. 72]:

(1) составление избыточного множества анкетных вопросов, которые бы репрезентировали теоретический конструкт;(2) сбор эмпирических данных на выборке с параметрами аналогичными совокупности людей, у которых предполагается проводить измерение выбранного конструкта;(3) отбор наиболее релевантных переменных из первоначального списка и составление мультииндикативного инструментария;(4) оценка надежности, полноты (dimensionality) и валидности опросного инструмента.

Наиболее важной процедурой в формальной модели считается выбор релевантных переменных (третья процедура), которому предшествует определение критериев оценки релевантности.

14.03.2014 Шанинка 21

Критерии оценки релевантности переменных по П. Спектру

Универсальные критерии релевантности – это коэффициенты корреляциимежду каждым признаком и оставшейся совокупностью переменных, что позволяет говорить о надежности инструмента. И только после составления устойчивого набора переменных проводить валидизацию операциональногоопределения.

П. Спектр выделяет пять процедур [Spector, 1992, p. 8]:(1) определение конструкта;(2) разработка шкалы;(3) пилотаж;(4) администрирование и анализ переменных — определение надежности;(5) валидизация и нормирование.

В психологических исследованиях модель, как правило, работает на больших совокупностях переменных, поскольку считается, что больший набор переменных обеспечивает большую надежность операциональногоопределения

Spector P.E. Summated rating scale construction: An introduction. London: Sage Publication, 1992.

14.03.2014 Шанинка 22

Формальная модель впсихологических исследованиях

Вопросник детского поведения, разработанный М. Раттером состоит из 26 вопросов [Rutter, 1967].

Общий вопросник здоровья, составленный Д. Голдбергом, — из 60 вопросов, которые отобраны из 200, в той или иной мере отражающих концепт здоровья [Goldberg, 1972].

Э. Хит и Д. Мартин отмечают, что в клинической практике обычно используется сокращенный вариант опросника, составленного из 30 или даже 12 вопросов [Heath, Martin, 1997, p. 78].

14.03.2014 Шанинка 23

Формальная модель всоциальных исследованиях

Шкала C. Стауфера, направленная на измерение установок по отношению к «свободе слова» (аналог шкалы социальной дистанции Богардуса).

Шкала политической эффективности А. Кэмпбелла.

Индекс постматериализма Рональда Инглехарта.

Приведите другой пример (3)

14.03.2014 Шанинка

Samuel Andrew StoufferJune 6, 1900 - August 24, 1960

Samuel A. Stouffer served as the 42nd President of the American Sociological Association. His Presidential Address, "Measurement in Sociology," was delivered on September 1, 1953 at the Association's Annual Meeting in Berkeley, California, and was later published in the American Sociological Review (ASR December 1953 Vol 18 No 6, pp 591-597).

14.03.2014 Шанинка 25

Шкала Стауфера

Интервьюер зачитывает пять непопулярных суждений, относящихся катеизму,

расизму,

коммунизму,

милитаризму,

гомосексуализму.

Затем справшивает у респондента, какие ограничения должны быть наложены на подобные высказывания: следует ли человеку, разделяющему эти взгляды, разрешить

(1) публичные выступления,

(2) преподавание в колледже,

(3) допустимо ли держать в общественной библиотеке книгу, в которой содержатся такие высказывания.

Источник: [Садмен, Брэдберн, 2002, с. 134-136]

14.03.2014 Шанинка 26

Первый блок анкетных вопросов по шкале Стауфера

Всегда встречаются люди, чьи идеи воспринимаются отсальными как вредные или опасные. Например, так воспринимаются те, кто выступает против церкви и религиозной жизни.

А. Если бы такой человек захотел выступить в вашем городе (поселке/сообществе) с речью, направленной против церкви и религи, следует ему позволить говорить или нет?Б. Следует ли такому человеку позволить преподавать в колледже или университете или нет?В. Если бы несколько человек в вашем сообществе предложили изьять из общественной библиотеки написанную таким человеком книгу, направленную против церкви и религии, были бы вы согласны с таким предложением или нет?

С. Садмен и Н. Брэдберн отмечают, что результаты исследования могут обрабатываться разными способами: от простого арифметического подсчета положительных и отрицательых ответов до взвешенного учета всех ответов, включая ответ «не знаю» [Садмен, Брэдберн, 2002, с. 135].

14.03.2014 Шанинка 27

Шкала политической эффективности

А. Кэмпбелл, Г Гурин и В. Миллер концепт политической эффективности

определяли как психологическое ощущение сооучастия в политической жизни, представление о собственной значимости и возможности влиять на социальные и политические процессы [Campbell, Gurin, Miller, 1954, p. 187].

Определение эффективности ограничено до конкретной демократической модели политического устройства, что сужает рамки применимости концепта и усиливает его объяснительный потенциал.

14.03.2014 Шанинка 28

Шкала политической эффективностиВ ходе операционализации ими предложено пять переменных, которые принимают вид шкалы Лайкерта, то есть по каждому высказыванию респондент должен высказать свое согласие или несогласие:

1. Я думаю, государственные деятели уделяют мало внимания тому, что беспокоит таких людей как я.2. Основная причина того, как развиваются события в этой стране — это то, как мы голосуем на выборах.3. Голосование — это единственный способ для таких как я хоть как-то поучаствовать в политической жизни страны.4. Такие люди как я не могут ничего сказать о том, что делает наше правительство.5. Иногда политики и государственные деяетели высказываются и ведут себя настолько сложно и непредсказуемо, что такие люди как я не могут понять что происходит.

Согласие со вторым и несогласие с первым, третьим, четвертым и пятым утверждениями соответствуют максимальному значению на шкале политической эффективности, противоположные суждения — минимальному.

14.03.2014 29

Концепт постматериализма

Inglehart R. Culture shift in advanced industrial society. Princeton: Princeton University Press, 1989.

Inglehart R. Modernization and postmodernization: Cultural, economic, and political change in 43 societies. Princeton: Princeton University Press, 1997.

Приведите другие источники. Кто критиковал концепт? На чём основана критика? (4)

Шанинка

14.03.2014 Шанинка 30

Индекс постматериализма

• Индекс постматериализма Р. Инглехарта основан на допущении, что люди всё чаще отдают предпочтение интеллектуальным и эстетическим потребностям и реже — материальным, независимо от их экономического положения [Inglehart, 1971, p. 991-992], что является прямой критикой шкалы Маслоу.

• Операциональное определение концепта постматериализма состоит из четырех утверждений, респонденту предлагается выбрать только два, наиболее важных с его точки зрения.

• Явные постматериалисты будут выбирать вторую и четвертую задачи, а материалисты — первую и третью, остальные составят смешанную группу, что позволяет построить трехразрядную шкалу и рассчитать индекс постматериализма.

14.03.2014 Шанинка 31

Анкетные вопросы по Р. Инглехарту

В политике не всегда можно однозначно определить свои пожелания. На карточке представлено несколько политических целей. Если бы вам пришлось выбирать из них, то какую вы поставили бы на первое место, какую на второе?

1. Поддерживать порядок в стране

2. Дать людям больше возможностей участвовать в принятии государственных решений

3. Препятствовать росту цен

4. Защищать свободу слова

14.03.2014 Шанинка 32

Причины непопулярности формальной модели

• (1) Социология и политология не располагают большим количеством абстрактных концептов, образующих формальные теории; во многих исследованиях социолога в первую очередь интересует мнения и переживания людей, нежели анализ собственных теоретических конструктов.

• (2) Основные усилия социологов и политиологов направлены не на анализ индивидов, а на обнаружение корреляций между переменными; не на анализ отдельных вопросов, а на репрезентативность выборки в целом.

• (3) Многие социологи и политологи придерживаются фейерабентовскогопринципа «все пройдет» (anything goes) и не желают тратить ресурсы на валидизацию полученных результатов

Источник: [Heath, Martin, 1997, p. 82]

14.03.2014 Шанинка 33

1. Приведите хотя бы одну типологию валидности, отличающуюся от представленной в лекции. Попробуйте сопоставить типологии и обосновать достоинства и недостатки каждой.

2. Постарайтесь отыскать хотя бы одну работу, в которой отражена процедура валидизации операциональных определений. Перечислите аргументы в пользу полученной шкалы.

Подумать, написать (5)

Коммуникативная модель

3414.03.2014 Шанинка

© http://profishermen.ru

Литература

1. Батыгин Г.С. Лекции по методологии социологических исследований. М.: Аспект Пресс, 1995. С. 49-54.

2. Nowak S. Methodology of sociological research: General problems / Transl. from Polish by M.O. Lepa. Dordrecht: D. Reidel Publishing Company, 1968. [РГБ Ин 77-15/44]

14.03.2014 Шанинка 35

14.03.2014 Шанинка 36

Три функции вопрос-ответной коммуникации

Вопрос – это не формулировка, а процесс преобразования речи, который включает по крайней мере три этапа (по Новаку): коммуникативный, экспрессивный и когнитивный.

Коммуникативная функция отвечает за передачу сообщения и

адекватное, обусловленное контекстом ситуации, его восприятие.

Экспрессивная — за выражение намерений и интенций коммуникантов,

их лингвистических и экстралингвистических навыков, позволяющих довести до другого некоторое сообщение.

Когнитивная — за формулирование и трансляцию суждений, взгядов,

описаний прошлых событий, которые говорящий намерен донести до собеседника.

14.03.2014 Шанинка 37

Триада Стефана Новака

Свойства

объекта

Убеждения и

мнения

коммуникатора

Содержание

сообщения

Концептуально

осмысленное

содержание

сообщения

когнитивное

отношение

экспрессивное

отношение

коммуникативная

функция

коммуникативное

отношение

экспрессивная

функция

дескриптивная

функция

Источник: [Батыгин, 1995, с. 51].

Real traits of the object described in the communication

The speaker’s knowledge and convictions on the subject of the communication

The original content of the communication

The content of the communication as it is received and understood by the researcher

Cognitive relation Expressive relation Communicative relation

Источник: [Nowak, 1968, p. 146].

14.03.2014 Шанинка 38

Критика традиционного подхода

В прямой, индикативной и формальной моделях ответ рассматривается как некоторая целостная величина, что и позволяет проводить прямую аналогию между естественным и гуманитарным знанием.

Основное предположение таких моделей — ответ полностью детерменирован вопросом, а любые отклонения от некоторой средней, говорят лишь об ошибках измерения и ненадежности опросного инструмента.

Коммуникативно-когнитивная модель — это критика механического взгляда на процесс коммуникации, в котором выделяется отправитель, получатель информации и транслируемое сообщение.

Г.С. Батыгин подчеркивает, что для объяснения коммуникации следует анализировать процессы преобразований, а не трансляций некоторых сообщений [Батыгин, 1995, с. 49].

14.03.2014 Шанинка 39

Подумать, написать (5)

1. Почитайте Стефана Новака.2. Попробуйте отыскать другие работы того же приода с подобной

постановкой вопроса.3. Можно ли отыскать подобные идеи в других теоритических

традициях, например, развивающих феноменологический или когнитивный подход.

14.03.2014 Шанинка 40

Спасибо за внимание

Дмитрий Михайлович Рогозин

nizgor@gmail.com

7, 14 марта 2014

14.03.2014 Шанинка 41