Конструкция вопроса и интерпретация ответа
Конструкция вопроса и интерпретация ответа
Надежность данных существенно зависит не только от содержания планируемой информации, но, конечно, и от конструкции самого вопроса, целесообразность которой диктуется конкретной задачей и условиями опроса [175].
Открытые вопросы хороши на стадии проб, определения области исследования и в функции контрольных. Предполагается, что ответ в свободной форме позволяет выявить доминанту мнений, оценок, настроений: люди отмечают те стороны явлений или говорят о том, что волнует их больше всего, о том, что доминирует в их сознании. Но самое главное состоит в том, что, реагируя на вопрос без подсказки вариантов ответа, люди лучше проявляют особенности своего повседневного, обыденного сознания, свой образ мыслей.
Например, при изучении особенностей образа жизни городской семьи мы использовали дубль закрытого и открытого вопросов для выявления разнообразных проблем, в сумме позволяющих фиксировать "уровень напряженности" семейных взаимоотношений (от "ненапряженных" до "крайне напряженных"). В закрытой формулировке спрашивалось, какие из перечисленных ниже обстоятельств имеют (не имеют) место в семейной жизни респондентов (например, как часто случаются споры по поводу денег, воспитания детей, приема гостей или организации отдыха и т. д.) со шкалой ответов от "этого не бывает" до "бывает систематически". В открытом виде спрашивалось: "Что больше всего радует Вас в Вашей семейной жизни?" и "Что более всего приносит Вам огорчения в семейной жизни?".
Контент-анализ ответов на открытый вопрос требует их классификации по тем же критериям, по которым были сформулированы вопросы закрытого типа (в нашем примере — область материальных интересов семьи, воспитание детей, интимные взаимоотношения между супругами, организация досуга и т. д.). Те группировки ответов на открытый вопрос, которые оказываются доминирующими (или, напротив, наиболее редко упоминаемыми) в позитивном и негативном аспектах ("радости" и "огорчения"), можно полагать свидетельством доминирующих интересов. Те категории ответов, которые лидируют в "радостях", но мало упоминаются в "огорчениях", — свидетельство позитивной мотивации, стимулирующей нормальные отношения, а те, что лидируют в зоне "огорчений", — область деструктивной мотивации (вспомним о позитивно-негативной асимметричности оценок).
Полного совпадения данных, полученных из вопросов закрытого и открытого типов, не бывает. Специальные методические эксперименты указывают на то, что информация, получаемая из ответов на открытый и закрытый вопросы, относительно идентична при ранжировании каких-то объектов (например, предпочтений телепрограмм, видов досуговой деятельности и т. п.), но существенно разнится при оценке степени разнообразия взглядов и позиций опрашиваемых; широты и разнообразия предпочтений; богатства мотивировок тех или иных действий и т. п. [154].
Интерпретация сведений, получаемых путем анализа ответов на закрытые вопросы с использованием контрольных — открытых, существенно богаче, более развернута и обоснованна. Так, в нашем случае в закрытых вопросах фиксировались как доминанта интересов семьи взаимоотношения между супругами и отношение к детям. В вопросах открытого типа уточнялось, что дети — это преимущественно стимулирующий фактор, а отношения между супругами — по преимуществу фактор напряжения.
Главный недостаток открытых вопросов состоит в том, что высказываемые здесь мнения и оценки связаны с какими-то неизвестными нам рамками сравнения, которые очерчивают контекст высказанных суждений. Изменение границ сопоставления суждений ведет к изменению акцентов: доминирующие пункты информации могут оказаться на периферии, периферийные — передвинуться в центр внимания опрашиваемого.
Другой недостаток открытых вопросов с трудности обработки данных. Пространные ответы предполагают последующую группировку и часто квантификацию, а контент-анализ ответов — процедура сложная и трудоемкая. Но самое главное — здесь требуется высокое искусство "расшифровки" реальных смыслов, вкладываемых респондентами в их суждения, ибо "практическое сознание" не является прямым аналогом теоретического, которое социолог использует в подобных операциях контент-анализа.
Закрытые вопросы позволяют более строго интерпретировать ответ. Рамки соотнесения оценок и суждений определяются здесь набором единых для всех опрошенных вариантов ответа. Исследователь имеет более надежные основания, чем при открытых вопросах, сопоставлять данные в равных условиях. Появляется возможность не только выяснить содержание суждений, но и измерить интенсивность оценок, шкалируя их по каждому варианту.
Например, один из вопросов Мониторинга общественного мнения, проводимого Институтом социологии РАН, начиная с 1992 г. [99], в закрытой форме выглядит так (схема 18).
Схема 18
Закрытый вопрос: "Как Вы оцениваете некоторые условия и обстоятельства Вашей жизни в настоящее время по сравнению с тем, что было у Вас полгода назад?"
Обстоятельства жизни | Лучше | Как и раньше | Хуже | Затрудняюсь ответить |
Вы питаетесь... | — | — | — | — |
Ваши возможности купить одежду, обувь стали... | — | — | — | — |
— | — | — | — | |
Вы стали отдыхать... | — | — | — | — |
Вам работается… | — | — | — | — |
Ваши перспективы в жизни... | ||||
— | — | — | — |
Указанные преимущества плюс экономичность применения закрытых вопросов ведут к тому, что они чаще используются исследователями, иногда без достаточных оснований. Главное же основание выбора меры стандартизации ответов на вопрос — уверенность исследователя в том, что предлагаемая им схема ответа максимально полно соответствует потенциальному разнообразию возможных мнений опрашиваемых. Такую уверенность можно приобрести лишь при условии тщательного пилотажа — опробовании различных форм опросников до начала сбора основной информации, к чему мы еще вернемся.
Постановка закрытых вопросов предполагает соблюдение следующих основных требований:
(1) Главное — максимально предусмотреть возможные варианты ответов. Используют также полузакрытый вариант, в котором оставляется прочерк для дополнительных комментариев и замечаний. В конце списка ответов значится: "Дополнительные замечания (укажите, какие именно)...".
Важно отвести должное место для комментария и уточнений. Рекомендуем приближенно оценить, сколько строк займет комментарий, и утроить эту величину. Если в анкете не предусмотрено достаточное место для ответов на открытый вариант вопроса, он "не работает".
(2) Формулируя варианты ответов (подсказки), следует помнить три важных правила, подтверждаемых экспериментальными исследованиями [39. С. 32—33]:
отвечающий на вопрос чаще выбирает первые подсказки, реже — последующие. Поэтому правило № 1 — первыми должны быть наименее вероятные варианты ответа;
чем длиннее подсказка, тем меньше вероятность ее выбора, так как для усвоения смысла требуется больше времени, а респондент не склонен его тратить. Поэтому правило № 2 — подсказки должны быть примерно равной длины;
чем более общий (абстрактный) характер имеет подсказка, тем меньше вероятность ее выбора. Люди часто мыслят очень конкретно, их раздражает неясность ситуации там, где исследователю она кажется предельно конкретной. Отсюда правило № 3 — все варианты ответов следует выдерживать на одном уровне, конкретности (например, спрашивая об отношениях в организации, уточнить: "в Вашей организации в данное время").
(3) Никоим образом нельзя комбинировать несколько идей в одной фразе, например: "работа интересная и хорошо оплачивается"; "работа хорошо оплачивается, но неинтересная". Вместо этого перечислим оба признака и предложим оценить их значимость по шкале интенсивности, как это сделано в схеме 18.
(4) Все возможные варианты ответов должны быть отпечатаны на одной странице, чтобы респондент мог разом охватить рамки соотнесения оценок.
(5) Нельзя печатать всю серию положительных подсказок ответов подряд и следом за нею — серию отрицательных или наоборот. В этих случаях мнение навязывается самой последовательностью предложенных вариантов.
(6) Список предложенных ответов иногда столь обширный, что опрашиваемые устают по мере продвижения к его концу и с последними группами суждений работают менее внимательно, чем с первыми, или же начинает действовать сила инерции в ответах.
В таком случае целесообразно расчленить список на три блока и предложить части опрашиваемых блокировку в одной последовательности, остальным группам — в другой. Например, перечисляются рубрики газеты (всего 21 наименование), и опрашиваемые должны ранжировать их в шкалах от "постоянно читаю" до "не читаю вообще". Разобьем список из 21 наименования на три части: (а) от 1 до 7, (b) от 8 до 14 и (с) от 15 до 21. Часть обследуемых получит список в последовательности (abc), другая — (bса), третья — (асb), четвертая — (cba), пятая — (bас) и шестая — (cab).
Смещения ответов, связанные с различным уровнем внимания к началу и концу списка, будут погашаться по закону больших чисел.
Установлено, что у некоторых людей обнаруживается эффект монотонного "за" или "против" реагирования (" галло-эффект"). Такие люди, ответив "да" на первый вопрос, отвечают "да" и на второй, и на третий, и так до 4—5 монотонных "да" или "нет" в случае ответов на однотипные вопросы. "Галло-эффект" особенно опасен, если серия суждений, в отношении которых позиции опрашиваемых заведомо сходны, сопровождается суждением, где эти позиции заведомо различаются. Например:
"В какой мере Вы согласны с тем, что: надо соблюдать существующие законы: уважительно относиться к старшим по возрасту; соблюдать данное обещание; поддержать своих друзей и близких; быть терпимым к чужим мнениям"? Последний пункт явно "выпадает" из монотонного ряда согласия, но в этом контексте он имеет большие возможности быть отмеченным утвердительно по инерции. Это явление психологической ригидности. Чтобы уберечься от искажения данных такого рода, используют простой прием: вопросы-" глушители". Перемежают однотипные вопросы и подсказки другими, отличными от них по содержанию. Иногда для такой цели используют вовсе не нужные темы, единственное назначение которых — отвлечь внимание, устранить монотонность.
(7) Ограничения выбора подсказок могут быть жесткими и нежесткими. Это зависит от программной цели вопроса и его смысла. Если по смыслу вопроса возможны комбинации разных выборов, притом в любом количестве, нельзя без особых пояснений ограничивать выбор условием: "Укажите не более трех наиболее важных пунктов", например, при перечислении возможных занятий в свободное время. Однако в том же случае, если цель вопроса — выявить доминанту интереса, отношения, оценки и т. п., ограничить выбор вполне целесообразно: "Хотя у Вас, вероятно, не одно и не два любимых занятия в свободное время, просим в предложенном перечне указать не более трех наиболее привлекательных". Обратите внимание на то, что исследователь объясняет ограничения выбора. В противном случае респондент окажется в затруднении или же вовсе не станет отвечать на вопрос ("Они полагают, что у меня только три любимых занятия?").
(8) Важную роль выполняет вариант, предполагающий возможность уклониться от ответа на закрытый вопрос: "трудно сказать", "затрудняюсь ответить", "не помню", "не знаю".
Формула уклонения от ответа подчеркивает, что респонденту представляют достаточную свободу. Это побуждает его более добросовестно относиться к опросу в целом. Замечено, что отсутствие такой формулы там, где она явно предполагается содержанием вопроса, повышает процент вообще уклоняющихся от участия в опросе [29, 37, 114].
Как отмечает О. М. Маслова [170. Т. 1. С. 104], в ответах на закрытый вопрос с множеством подсказок респондент обнаруживает такие стороны явления, которые не приходили ему в голову раньше. Он может согласиться или не согласиться с подсказкой в момент ответа, но тут же вычеркнет этот аспект из долгосрочной памяти. Это просто не является компонентом его обыденного сознания и не проявится в фактическом поведении. Мы же думаем, что получаем картину, отвечающую реальному состоянию массового сознания. И напротив, расшифровывая ответы на открытый вопрос, исследователь обнаруживает немало из того, что ускользало от его внимания и не могло быть предусмотрено в подсказках.
В целом, сопоставляя возможности открытых и закрытых вопросов, можно сказать, что при первом подходе к теме необходимо пользоваться открытыми вариантами (трудно предусмотреть разброс ответов). Поэтому на стадии разведки открытый вопрос обладает несомненными преимуществами. В описательных исследованиях удобнее пользоваться закрытыми и полузакрытыми вопросами.
В интервью развертывание беседы предполагает постановку открытых вопросов и далее уточнение ответов в зависимости от ситуации. Конечный итог по отдельным разделам интервью можно формулировать в виде закрытого вопроса, перечисляя указанные респондентом суждения с просьбой уточнить их и сопоставить. (Итак, Вы заметили, что в работе Вас привлекает хороший заработок, неплохие условия труда, благоприятная общая обстановка, нормальные отношения с руководством, уверенность в своем положении и, как Вам кажется, хорошие перспективы фирмы, причем Вам не приходится далеко ездить на работу. Теперь, рассматривая все это в целом, постарайтесь указать, что же Вы оцениваете как самое важное из сказанного?)
В анкетных обследованиях, как правило, комбинируют все варианты вопросов: открытые, закрытые и полузакрытые. Это повышает обоснованность и полноту информации.
Прямые и косвенные вопросы. В прямом варианте вопроса предусмотрен ответ, который следует понимать в том же смысле, как его понимает опрашиваемый. Ответ на косвенный вопрос предполагает расшифровку в ином, скрытом от респондента смысле.
Прямой вопрос: "Если Вас не удовлетворяют условия труда, не могли бы Вы указать, что именно (отметьте соответствующие пункты)".
— Организация работы.
— Неустойчивый заработок.
— Возможность увольнения.
— Отношения с руководством.
— Неинтересная работа.
— Недостаточная самостоятельность.
— Частота сверхурочных.
Все ответы на этот вопрос интерпретируются буквально. Косвенный вопрос ставится в случае, если затронуты проблемы, по которым опрашиваемые не склонны высказываться откровенно. Такие вопросы называют "сенситивными" (чувствительными). Способы перевода из прямой в косвенную форму зависят от содержания темы (схема 19).
Схема 19
Косвенный вопрос: "Вы сказали, что подумываете о переходе на другую работу. Куда бы Вы хотели перейти?"
Варианты ответов | Интерпретация |
В другое подразделение, без изменения специальности Хотел бы сменить специальность На любое другое место с повышением заработка | Неудовлетворенность организацией, условиями труда, взаимоотношениями с другими работниками и руководством Неудовлетворенность содержанием работы по специальности и, возможно, желание повысить заработок Неудовлетворенность заработком при "прохладном" отношении к содержанию работы |
Наиболее распространенный способ замены прямых вопросов косвенными — перевод из личной формы в безличную.
Личные и безличные вопросы, в равной мере относятся к оценкам и суждениям самого опрашиваемого, но во втором случае оценки имеют косвенный характер. Так, вместо личного прямого вопроса: "Как Вы считаете?" — задают косвенный, безличный: "Некоторые полагают, что... Какие суждения, по Вашему мнению, наиболее справедливы?" Ожидается, что опрашиваемый выберет те суждения, которых он сам придерживается.
Безличная и полубезличная форма вопроса употребляется для выявления мнений, расходящихся с общепринятыми. В вариантах ответов подчеркивается, что все они возможны и опрашиваемый не будет выглядеть "белой вороной", если согласится с каким-то суждением.
Так, в обследовании эстонских социологов выявлялись типы рабочих, консервативно или радикально настроенных по отношению к изменениям в организации и оплате труда. Вопрос формулировался как полубезличный.
"Жизнь не стоит на месте. Обновляются условия труда и экономика производства. Необходимость этого понимают все. И все же осуществление изменений, реорганизаций, нововведений часто связано с беспокойством, недоразумениями, неприятностями.
Как часто надо делать такие изменения, кто должен участвовать в их планировании и какие принципы надо при этом иметь в виду — по всем этим вопросам люди имеют самые разные точки зрения.
Ниже мы предлагаем мнения, высказанные рабочими. Укажите, пожалуйста, в каждой группе из трех суждений ту точку зрения, которая более всего совпадает с Вашей собственной.
А. "Изменения надо делать так, чтобы зарплата рабочих повышалась, тяжесть работы несущественна".
"Изменения надо делать так, чтобы работа становилась легче, менее утомительной; зарплата при этом может не повышаться".
"Мне все равно". (Этот вариант имеется и в следующих суждениях, где мы его опускаем.)
Б. "Изменения или реорганизацию надо делать тотчас, как только появляется хорошая идея".
"Изменения или реорганизации следует делать только тогда, когда по-старому работать уже невозможно".
В. "Изменениями в цехе пусть занимаются те, кто получил для этого соответствующее образование и кто работает на руководящей должности".
"И у рабочих есть право высказывать свои предложения по всем планируемым изменениям".
Г. "Изменения, предлагаемые свыше, всегда лучше из всех возможных в данный момент, и ни у кого нет оснований ворчать по этому поводу".
"Чем больше советов и предложений снизу, тем лучше".
Д. "Я непременно хотел бы участвовать в осуществлении касающихся нас реорганизаций и, если возможно, предлагать свои проекты".
"О реорганизации пусть думают другие, кто хочет пораскинуть умом. Я бы их поддержал".
Е. "Чем шире по охвату нововведения и реорганизации, тем важнее участие рабочих в решении вопросов".
"Если такие изменения меня лично не затрагивают, мне от них "ни тепло, ни холодно".
Личная и безличная формы вопросов помогают также определить степень персональной заинтересованности или "уровень" включения индивида в различные социальные ситуации.
Изобилие закрытых, прямых и личных вопросов, т. е. максимальная стандартизация, приводит к тому, что респондента раздражает "насилие" организаторов опроса: "им уже все известно заранее, и остается лишь подтвердить их схемы". Изобилие открытых, косвенных и безличных вопросов, напротив, снижает престиж исследователя в глазах опрашиваемых: "спрашивают туманно, хитрят".
Самая правильная позиция состоит в том, чтобы целесообразно комбинировать все указанные формы вопросов, понимая особенности их восприятия респондентом и особенности содержания информации, извлекаемой из его ответов. Эту позицию иллюстрирует использование разных видов вопросов в качестве основных и контрольных.
Основные и контрольные вопросы различаются по их функциям в интерпретации данных. С помощью контрольных уточняют, дополняют сведения, полученные в основных вопросах. Укажем некоторые формы контроля.
(1) Контроль по частям. Вопрос: "В какой мере Вы довольны своей работой?" — (пятичленная шкала ответов) дополняется двумя контрольными: "Хотели бы Вы перейти на другую работу?" ("да" — "нет" — "не думал") и "Если бы Вы временно не работали и могли выбирать новое место работы, вернулись бы на прежнюю работу?" ("да" — "нет" — "не знаю").
Сопоставим ответы в перекрестной схеме и вычленим наиболее обоснованные оценки (схема 20).
Схема 20
Конструирование индекса на основе комбинации основного и контрольных вопросов
В какой мере Вас устраивает Ваша теперешняя работа? | Хотели бы Вы перейти на другую работу? | |||||||||||
нет | не думал | да | ||||||||||
Предположим, что по каким-то причинам Вы временно не работаете. Вернулись бы Вы на прежнее место работы? | ||||||||||||
да | не знаю | нет | да | не знаю | нет | да | не знаю | нет | ||||
Работой не вполне доволен | 1 | 2 | 6 | 2 | 2 | 6 | 6 | 6 | 6 | |||
Скорее доволен,чем не доволен работой | 2 | 2 | 3 | 2 | 3 | 3 | 6 | 3 | 6 | |||
Трудно сказать, не знаю, безразлично | 3 | 3 | 3 | 3 | 3 | 3 | 3 | 3 | 3 | |||
Скорее не доволен,чем доволен работой | 6 | 3 | 6 | 3 | 4 | 4 | 3 | 4 | 4 | |||