Методы исследований
Есть ли у вас ощущение, что социология в России не оправдала возлагавшихся на нее надежд?
Белановский: Да. То, как мы понимали социологию и общественные науки в советское время, конечно, сильно отличается от того, что мы в итоге получили. В СССР социология обладала высоким престижем — среди образованной части населения, среди управленцев. Понятно, почему: было очевидно, что в стране фальсифицируется общественное мнение. И была надежда, что новая наука позволит совершить какой-то прорыв и узнать мнение нефальсифицированное, подлинное.
Результаты рейтинговых измерений, равно как и результаты любых других измерений, подвержены определенным колебаниям, или погрешности. Применительно к измерениям рейтингов эта погрешность делится на теоретическую и фактическую. Теоретическая погрешность определяется теорией выборки, в основе которой лежит математическая теория вероятности. Именно о ней обычно говорят социологи, указывая на так называемую ошибку выборки.
Фактическая погрешность определяется технологией измерения. Величина фактической погрешности определяется путем вычисления среднего квадратичного отклонения результатов измерения от тренда.
При проведении большого числа замеров фактическая погрешность всегда будет выше теоретической, но в идеале должна приближаться к ней. Разница между теоретической и фактической погрешностью характеризует качество технологии измерения, позволяет судить об устойчивости измерительной процедуры. О фактической погрешности рейтинговых измерений российские социологи, насколько известно, ни разу не сообщали широкой публике.
Исходная проблема, вызвавшая необходимость написания данного текста, состоит в неудовлетворительной точности прогнозов результатов выборов в региональные Заксобрания, сделанных на основе репрезентативных опросов, проведенных в соответствующих регионах.
Краткое описание исследования
Настоящее контрольное исследование было проведено в одном из российских регионов параллельно с опросом, который проводился агентством ХХХ. Цель исследования состояла в нахождении методов повышения точности прогнозов результатов региональных выборов.
Объем выборки контрольного исследования – 1600 чел. Анкета контрольного исследования совпадала с анкетой ХХХ за одним исключением: в контрольном исследовании респондентам сообщалась более подробная информация о лидерах региональных отделений политических партий (как в избирательном бюллетене).
При разработке выборки были приняты меры, предотвращающие смещение результатов вследствие географического сдвига. Для повышения надежности результатов в ходе опроса использовался 100% контроль заполнения анкет (путем обхода всех охваченных исследованием домохозяйств).
Главные выводы
Предметом анализа настоящей записки является территориально-географическая структура региональных выборок социологических опросов. В ходе анализа были выявлены определенные географические смещения, которые описаны ниже.
Необходимо отметить, что предметом данного анализа является только городская часть выборок, поскольку данные о сельской части в описании выборок отсутствуют. Однако, судя по косвенным признакам, сельская часть выборок еще сильнее сдвинута к инфраструктурным центрам, чем городская.
Опубликовано в 2003 г. под названием: «Результаты выборов сильно удивят»
За прошедшие годы в адрес социологов неоднократно звучали обвинения в ангажированности и подтасовке публикуемых ими данных. В ходе региональных выборных кампаний публикация подтасованных социологических данных - действительно не редкость. Однако в отношении наиболее известных организаций федерального уровня - ВЦИОМа и ФОМа - подобные обвинения всегда были бездоказательными и, важно подчеркнуть, непрофессионально сформулированными. Возьмем на себя ответственность утверждать, что подтасовкой данных в угоду интересам заказчиков эти фирмы никогда не занимались. Но это не означает, что рейтинговые измерения точны и что в них нет нерешенных методических проблем, искажающих результаты. Провалы прогнозов результатов выборов на базе опросов были частыми с 1993 года, и у таких ошибок есть определенная причина или, точнее, комплекс причин.
Эта записка написана в 2003 году. Причиной для ее написния послужили необъяснимые колебания рейтингов. В частности, в ноябре 2002 г. почти вдвое возрос рейтинг СПС, в январе 2003 заметно упал рейтинг ЕР, в марте 2003 г. возрос рейтинг КПРФ. В последующие месяцы все эти рейтинги вновь возвращались в «норму», соответствующую их тренду. В Администрации президента РФ эти колебания объяснялись «купленностью» рейтингов. В нашей записке они были объяснены методическими проблемами, которые, скорее всего, были непреднамеренными (это не означает, что они были простительными). К сожалению, эти объяснения не повлияли на позицию Администрации, которая осталась при мнении, что ВЦИОМ «торгует» рейтингами. Результатом стала знаменитая акция по смене руководства ВЦИОМа, после которой прежний коллектив основал существующий ныне Левада-центр. Гипотеза Администрации о «купленности» рейтингов, на мой взгляд, оказалась непродуктивной в том смысле, что из нее не вытекала задача решения методических вопросов, могущих повысить точность социологических измерений и снизить их волатильность. Эти вопросы доныне так и остались нерешенными (пояснение 2008 года).
Книга представляет собой углубленный анализ методического опыта, накопленного авторами при проведении исследования по изучению воздействия на аудиторию кинофильмов антифашистской направленности. В книге дан детальный разбор ошибок, допускаемых интервьюерами. Учитывая, что в СССР мало кто занимался проведением фокусированных интервью, знакомство с ней может представлять значительный интерес для социологов, проводящих эмпирические исследования.
Книга переведена с английского языка. Американское издание: The Fokused interview. A Manual of Problems and Procedures by Robert K.Merton, Marjorie Fiske, Patricia L.Kendall. The Free Press, Glencoe, Illinois.
Настоящая книга - первое в России учебно-методическое пособие по проведению глубокого интервью в социальных исследованиях. Глубокое интервью широко применяется в странах Запада при изучении самых различных проблем: исследованиях организаций, маркетинга, рекламы, теневой экономики, преступности и отклоняющегося поведения, проблем семьи, медицины и многих других. Издание книги ставит своей целью расширение методической базы, используемой в отечественных социальных исследованиях.
|
