Казус Санторума

Ошибки в прогнозах аналитиков

31 Марта 2012

Во вторник, 13 марта 2012 года, в политической жизни Америки  произошло событие, которого никто не ожидал. В ходе республиканских первичных выборов в двух соседних южных штатах – Алабаме и Миссисипи – победу одержал Рик Санторум, а третьим в обоих случаях был Митт Ромни. Ни опросы, ни эксперты не предсказывали такого исхода голосования. Победа Санторума не рассматривалась даже как маловероятный сценарий.

Коллизия

Алабама и Миссисипи не относятся к штатам, в которых полстеры задолго до праймериз зондирововали электоральные установки сторонников Республиканской партии, поскольку названные штаты не играли значимой роли в последних президентских избирательных кампаниях.

Сама «проблема глубокого  Юга» полстерам известна: опросы в Алабаме и Миссисипи (к этому региону относятся также Джорджия, Луизиана и Южная Каролина), проводившиеся в разные годы накануне первичных выборов, часто были неточными. Так, в 2008 году, согласно RCP-среднему, за день до голосования в Алабаме Клинтон опережала Обаму на 1,2 процентных пункта, но в действительности он стал первым с отрывом в 14 пунктов. Аналогичное явление наблюдалось и в отношении республиканских праймериз: RCP-среднее указывало на предстоящую победу Маккейна в Алабаме с преимуществом в 4 пункта, но именно столько он уступил Хаккаби, победившему в этом штате. В целом с 1972 по 2008 годы средняя погрешность в прогнозе итогов первичных выборов для Алабамы и Миссисипи составила 5,4% применительно к каждому из кандидатов. А для всех штатов страны в среднем погрешность предсказаний была много меньше – 3,5%.

Нэйт Сильвер, прогнозы которого серьезно анализируются многими политическими обозревателями, начал публиковать результаты своих модельных построений для Алабамы в пятницу 9 марта, то есть всего за четыре дня до первичных выборов в этом штате, намеченных на 13 марта (см. табл. 1). В тот момент электоральные предпочтения большинства алабамских избирателей распределялись между Гингричем, Ромни и Санторумом примерно поровну. Тем не менее можно было говорить о двух потенциальных победителях праймериз: шансы Гингрича оценивались в 40%, Ромни – в 37%. Вероятность победы Санторума была заметно ниже (23%), а для Пола, которого поддерживало явное меньшинство (7,5%), она являлась «нулевой». Выходные дни никаких изменений в предпочтения электората не внесли. Но в понедельник обнаружилось, что борьба между Гингричем и Ромни обострилась, и в этих обстоятельствах возможность победы Санторумы оказалась весьма призрачной (9%).

Прогнозы результатов голосования в Алабаме и вероятности победы кандидатов, %

ТАБЛИЦА №1
Дата Гингрич Ромни Санторум Пол
доля избирателей вероятность победы доля избирателей вероятность победы доля избирателей вероятность победы доля избирателей вероятность победы
9 марта 30,9 40 30,3 37 28,6 23 7,5 0
11 марта 30,2 40 29,7 37 28,6 23 7,5 0
12 марта 30,6 37 30,8 40 29,1 23 7,9 0
13 марта 32,5 48 32,0 43 28,1 9 6,7 0
Довери-тельный интервал 2241   2241   1937   312  

Данные, приведенные в нижней строке, были опубликованы в 2 часа 52 минуты дня голосования. Принимая во внимание границы 95%-ного доверительного интервала, можно было ожидать, что Гингрич и Ромни получат примерно одинаковую поддержку электората, а Санторум будет третьим.

Во многом схожая картина электоральных установок наблюдалась в Миссисипи, где первичные выборы также происходили 13 марта (см. табл. 2). Здесь основная борьба шла между теми же двумя политиками, но победные шансы Ромни (54%) были заметно выше, чем у Гинрича (45%). У Санторума и Пола перспектив на победу, согласно прогнозной модели Сильвера, не было; за первого из них собирались проголосовать четверть избирателей (25,9%), а за второго – втрое меньше (7,3%).

Прогнозы результатов голосования в Миссисипи и вероятности победы кандидатов, %

ТАБЛИЦА №2
Дата Ромни Гингрич Санторум Пол
доля избирателей вероятность победы доля избирателей вероятность победы доля избирателей вероятность победы доля избирателей вероятность победы
9 марта 35,4 70 31,1 26 26,0 4 6,7 0
11 марта 35,4 69 31,2 26 25,9 5 8,2 0
12 марта 32,8 47 33,1 48 27,3 5 6,8 0
13 марта 33,7 54 33,1 45 25,9 2 7,3 0
Довери-тельный интервал 2541   2441   1834   312  

Накануне дня голосования все эксперты проявляли большую осторожность в прогнозах. Сильвер следующим образом комментировал свои модельные построения: «Опросы выявляют характер гонок в штатах Алабама и Миссисипи в преддверии праймериз. Наш прогноз, базирующийся на данных опросов, показывает, что Ньют Гингрич слегка лидирует в Алабаме, Митт Ромни – в Миссисипи. Похоже, что Рик Санторум – третий в обоих штатах, но остается на досягаемом для победы расстоянии».

Согласно оценке специалистов из организации Public Policy Polling, зондирующей электораты штатов, Гингрич, Ромни и Санторум находились в такой блозости друг от друга, что сложно было сказать, кто окажется первым. Ясно лишь одно: Рон Пол не победит в этих двух штатах. По мнению известного аналитика Марка Блюменталя (Mark Blumenthal), в Алабаме Гингрич, Ромни и Санторум разными путями приближаются к ничьей, а в Миссисипи теряющий шансы Санторум станет третьим.

Однако уже вечером 13 марта, когда еще не были обработаны данные со всех избирательных участков, стало ясно, что победу в обоих штатах одержал Санторум. Вторым к финишу там и здесь  пришел Гингрич, а Ромни замыкал «призовую тройку». Итоги праймериз в Алабаме и Миссисипи приведены в таблице 3.

Результаты первичных выборов в Алабаме и Миссисипи, %

ТАБЛИЦА №3
Штат Санторум Гингрич Ромни Пол
Алабама 34,5 29,3 29,0 5,0
Миссисипи 32,8 31,2 30,6 4,4

Сопоставление статистики, представленной в таблице 3, с информацией из таблиц 1и 2 показывает, что фактически произошло невозможное. В Миссисипи Санторум набрал почти на 7 п.п. больше, чем прогнозировалось, и стал первым, хотя вероятностъ такого события оценивалась всего в 2%. В Алабаме Санторум получил от избирателей на 6,4 п.п. голосов больше, чем ожидалось, и тоже победил, несмотря на относительно невысокие шансы такого исхода выборов.

  Знакомым с основами теории вероятностей легко понять, что произошедшее – не случайно. Подчеркну, что опросы проводились заслуживающими доверия полстерами, с использованием многократно проверенной опросной технологии. Таким образом, существуют какие-то обстоятельства, факторы, влияние которых на результаты опросов может быть значимым, но которые пока не учитываются при измерении электоральных установок. Об этом стоит сказать подробнее.

Причины ошибки прогноза

Изучение истории опросов общественного мнения в США позволяет допустить, что феномен, названный мною «казусом Санторума», будет изучаться специалистами по опросной методике под разными углами зрения. К настоящему моменту наиболее полный анализ произошедшего проведен Сильвером, который не только владеет методологией подобного анализа, но и – что следует из его многолетних, практически ежедневных обстоятельных постов в интернете, – располагает огромным архивом необходимой методической информации. Его выводы и рассматриваются ниже.

Интерес представляют обобщенные Сильвером данные о погрешностях прогнозов состоявшихся к середине марта первичных республиканских выборов для тех кандидатов в президенты, которые до сих пор продолжают предвыборную борьбу (см. табл. 4). В этих 11 штатах опросы проводились с разной регулярностью, но достаточно часто, и, что крайне важно, ряд из них фиксировал распределение предпочтений избирателей буквально накануне дня голосования. Замечу, что полужирным в таблице 4 выделены сведения о политиках, ставших победителями в соответствующих штатах.

Погрешности прогнозов голосования на первичных выборах, состоявшихся до середины марта 2012 года, %

ТАБЛИЦА №4
Штат Ромни Санторум Гингрич Пол
Айова +2,6 +5,5 -1,8 +0,4
Нью-Хэмпшир +0,8 -2,9 -2,1 +4,3
Южная Каролина -1,5 +3,1 +1,7 -2,6
Флорида +2,2 -0,5 +2,4 -4,0
Аризона +3,9 -0,7 -3,0 -1,8
Мичиган +2,1 -0,2 -3,4 -0,6
Джорджия +0,4 +0,7 +1,4 -2,1
Огайо +1,4 +2,7 -2,0 -2,1
Теннесси -2,9 +4,4 -2,5 -0,8
Алабама -3,0 +6,4 -3,2 -1,7
Миссисипи -3,4 +7,0 -1,8 -2,9
Среднее +0,2 +2,3 -1,3 -1,3

С наименьшей погрешностью (+0,2%) полстерами предсказывалась доля голосов избирателей, которые проголосуют за Ромни. Здесь вообще не приходится говорить о систематическом (однонаправленном) смещении результатов измерения. При изучении электоральных установок по отношению к Гингричу и Полу можно предположить наличие латентных, не контролируемых полстерами факторов, которыми обусловлена незначительная «переоценка» перспектив этих кандидатов: в среднем они не «добирают» 11,5% голосов против прогнозировавшихся для них. Санторум, наоборот, получает в среднем на 22,5% голосов больше, чем следует из данных опросов и по итогам специальных модельных расчетов.

Выявление причин подобных «перекосов» дело очень сложное, особенно в тех случаях, когда однотипные ошибки возникают в опросах разных организаций. Приведу соответствующие данные в таблице 5. Отмечу, что выборка для этих опросов колебалась в пределах 500750 респондентов.

Результаты предвыборных опросов в Алабаме и Миссисипи, проведенных  разными организациями в марте 2012 года, %

ТАБЛИЦА №5
Организация Дата Ромни Санторум Гингрич Пол Затруднились ответить
Алабама
Capital Researh 712 28 22 27 6 17
American Research Group 911 31 24 34 6 5
Public Policy Polling 1011 31 29 30 8 2
Rasmussen Reports 8 28 29 30 9 4
Миссисипи
American Research Group 1011 34 22 32 7 5
Public Policy Polling 1011 31 27 33 7 2
Rasmussen Reports 8 35 27 27 9 2

В трех из четырех алабамских опросов и в двух из трех, проведенных в Миссисипи, Санторум отстает от Гингрича и Ромни на 112 пунктов, и лишь в зондаже Rasmussen Reports он на 1 п.п. опережает Ромни в первом штате и имеет равные шансы с Гингричем – во втором. Действительно, не было оснований предполагать, что Санторум окажется первым и в Алабаме, и в Миссисипи, опередив там и здесь двух соперников.

Сильвер выдвигает четыре гипотезы относительно причин того, что результаты голосования в Алабаме и Миссисипи оказались более благоприятными для Санторума, чем предсказывали эксперты.

Первая причина: энтузиазм электората. Прошедшие в других штатах праймериз и кокусы дают основание предположить, что избиратели Санторума участвуют в голосовании активнее, чем сторонники Ромни. Как выясняется, в ходе первичных выборов превышают прогнозные показатели наиболее консервативные кандидаты, а в текущей президентской кампании таковым, несомненно, является Санторум.

Вторая причина: избиратели, пользующиеся только мобильным телефоном. В целях экономии большинство опросов в период праймериз и кокусов проводятся по выборкам, не включающим респондентов, которые пользуются лишь мобильным телефоном. Пока семей, не имеющих обычного проводного телефона и использующих только «мобильники», было немного, отсутствие их представителей в выборке не очень снижало ее репрезентативность. Однако в последние годы ситуация кардинально изменилась: по данным Национального центра статистики здоровья (National Center for Health Statistics) на апрель 2011 года, каждая четвертая американская семья пользовалась исключительно мобильной телефонной связью. Это становится в Америке нормой.

К настоящему времени многое известно о том, как отсутствие в выборке пользователей только мобильного телефона влияет на результаты общенациональных опросов при изучении электората президентских кампаний. Но для праймериз и кокусов этот вопрос остается малоизученным. Предварительный анализ, сделанный Сильвером, обнаружил здесь хотя и небольшую, статистически не значимую, однако все же существующую положительную корреляцию между величиной погрешности при предсказании итогов голосования в штате и долей семей в этом штате, пользующихся только мобильными телефонами.  В частности, в Нью-Хэмпшире доля семей обсуждаемого типа невелика, и на первичных  выборах в этом штате Санторум выступил слабее, чем предсказывали опросы. В Миссисипи же она, согласно утверждению Сильвера, особенно высока, и здесь он выступил много успешнее, чем прогнозировалось.

Третья причина: южное гостеприимство и смещение, вызванное социально желательными ответами.«Глубокий Юг» (The Deep South) – это определение, характеризующее географический и культурный регион «юга американского Юга». Оно распространяется на группу штатов (Алабама, Джорджия, Луизиана, Миссисипи и Южная Каролина), в которых до Гражданской войны доминировал плантационный тип сельского хозяйства. И сейчас эти штаты называют «хлопковыми». Особый этический код, обозначаемый как «южное гостеприимство», подталкивает южан сильнее, чем это принято в других регионах страны, придерживаться в ответах на вопросы интервьюеров наиболее распространенных в обществе позиций, установок. В силу этого респонденты из рассматриваемых здесь штатов говорили, что они проголосуют не за Санторума, а за Ромни, наиболее поддерживаемого республиканским электоратом страны, или за «своего» Гингрича. В течение двух десятилетий Гингрич избирался в Палату представителей Конгресса США от штата Джорджия, и в ходе текущих первичных выборов победил пока лишь в двух штатах «хлопкового пояса» (Cotton Belt): Джорджии и Южной Каролине. Санторум в среднем в каждом из южных штатов набрал на 3,5% голосов больше, чем ожидалось по результатам опросов, тогда как в других штатах прогнозы оказались намного точнее.

Четвертая причина: тактическое голосование.Определенная часть электората в день выборов изменила свое исходное решение голосовать за Гингрича, считая, что его перспективы в борьбе за Белый дом менее оптимистичны, нежели у Санторума. Избиратели рациональны и не хотят, чтобы их голоса никак не повлияли на исход выборов. В то же время голосование за Санторума было в какой-то мере голосованием против Ромни, который для многих южан-консерваторов слишком либерален. По данным серии опросов Организации Гэллапа, проведенных в 2011 году и охвативших свыше 218 тысяч респондентов, в пятерку наиболее консервативных входят три штата «глубокого Юга». Первым здесь является Миссисипи: 53,4% его взрослого населения считают себя консерваторами; в Алабаме таких 49,8%, в Луизиане – 48,5%. Для сравнения замечу, что в пяти наименее консервативных штатах страны доли консерваторов – вдвое меньше: Коннектикут – 24,4%, Нью-Хэмпшир – 24,4%, Род-Айленд – 24,7%, Нью-Джерси – 24,9%, Калифорния – 25%.

К сказанному следует добавить еще одно обстоятельство. Из всех американских штатов именно в Алабаме и Миссисипи, а также в Юте население наиболее религиозно. За несколько дней до выборов в Алабаме и Миссисипи Фрэнк Ньюпорт (Frank Newport), научный руководитель Организации Гэллапа, предположил, что по этой причине при прочих равных условиях победителем предстоящих здесь праймериз может стать Санторум. Основанием для такого предположения послужили полученные в конце февраля – начале марта данные о частоте посещения церковных служб зарегистрированными республиканскими избирателями (см. табл. 6).

Религиозная активность различных групп верующих в республиканском электорате, %

ТАБЛИЦА №6
Частота посещения церкви Ромни Санторум Гингрич Пол
Еженедельно 32 31 17 8
Еженедельно / ежемесячно 40 20 13 13
Редко / никогда 37 15 17 14

Как видно из таблицы 6, в электорате Санторума относительно невелика доля тех, кто редко ходит или вообще не ходит на церковные службы. К этому следует добавить, что в Алабаме и Миссисипи доля еженедельно посещающих церковь составляет 50–55%, то есть она значительно выше, чем среди сторонников Санторума в среднем по стране. И это обстоятельство могло повлиять на электоральное поведение избирателей двух интересующих нас штатов.

* * *

Аналитики не торопятся с рекомендациями относительно внесения поправок в методику комплектования выборок при изучении электоральных установок тех, кто будет участвовать в праймериз и кокусах. Исследования здесь только начинаются. Возможно, предстоящие первичные выборы подтвердят уже имеющиеся гипотезы о факторах, «зашумляющих» измерения политических предпочтений республиканского электората, но не исключено и обнаружение новых «шумовых эффектов».

материалы
6 ноября 2012 года переизбранием Барака Обамы завершились президентские выборы в США. Развернутый анализ избирательной кампании – дело будущего. А пока – об участии в ней полстеров и прогнозистов
Утечка информации с закрытой встречи, на которой собирались деньги для президентской кампании Митта Ромни, порождает вопросы о его идеологии и дает повод для специального методологического анализа
Эффект партийных съездов

11 Сентября, в 18:48

Партийные съезды – последние крупные события, которые могут повлиять на ход избирательной кампании в США. Сегодня их исторический анализ используется для прогнозирования исхода предстоящих выборов
Включение в президентскую гонку Пола Райана побудило аналитиков обратиться к прошлому и посмотреть, каковы вообще шансы политика пересесть из кресла конгрессмена в кресло вице-президента
В марте 2010 года Алан Лихтман предсказал победу Барака Обамы на президентских выборах 2012 года. Сбудется ли этот прогноз? Ждать осталось немногим больше четырех месяцев.
Алан Лихтман правильно и точно прогнозировал итоги американских президентских выборов, состоявшихся в 1984–2008 годах. Безусловно, это значимый научный успех
В очерке рассматривается метод, позволяющий уже в середине первого срока правления президента США предсказать, будет ли он переизбран. Метод успешно работал в семи последних избирательных кампаниях
Лекция Б. З. Докторова посвящена предстоящим в США президентским выборам и методам изучения избирательной кампании
Опросы, казалось бы, давно доказали свою способность верно отражать общественное мнение населения демократических стран. Но проблема точности опросов сохраняет актуальность и сегодня.
Казус Санторума

31 Марта, в 01:24

Аналитики предсказывали, что в Алабаме и Миссисипи Санторум будет на выборах третьим, но в обоих штатах он оказался первым
Ход избирательной кампании 2012 года актуализировал задачу ежедневного измерения электоральных установок республиканских избирателей. Современные опросные технологии позволяют эту задачу решить.
110-летию со дня рождения Джорджа Гэллапа, великого американца, создавшего современную систему методов изучения общественного мнения, посвящается предлагаемый цикл очерков Бориса Докторова
Победитель самых ранних выборов в штате Айова часто становится финалистом в борьбе за пост президента США. Поэтому и в нынешней избирательной кампании аналитики уделяют много внимания этим выборам
Анализ «индекса одобрения» деятельности президента – важнейший инструмент при прогнозировании исхода президентских выборов в США. Ниже пойдет речь об истории и практике использования этого индекса
Прогнозирование исхода выборов – сложная и все более совершенствующаяся область электоральных исследований. Дальше будет рассказано о новейших разработках американских специалистов в этой области
Написание книги, о которой здесь пойдет речь, невозможно без подлинного сопереживания, глубокого погружения в горячий мир страстей и холодное пространство логики борьбы за президентство
Позиция Кевина Маккалоу как эксперта в области предсказания результатов президентских кампаний в США беспроигрышна. Он может либо усилить свой авторитет, либо почивать на лаврах ранее достигнутого.
Прогноз результатов президентских выборов – это для исследователей «момент истины»: проверяется их профессионализм. Каков же инструментарий, с которым они работают сегодня, и насколько он надежен?
Комментарии
Добавить комментарий

Комментарии отсутствуют