Случайное распределение наблюдателей дало возможность сравнить два типа участков: те, на которых наблюдатели были, и те, на которых их не было. В нашей статье мы их и сравниваем по среднему значению проголосовавших за ту или иную партию. Благодаря этому нам удалось оценить размеры фальсификаций результатов в пользу “Единой России”. Они были очень значительными: из-за подтасовок официальные результаты на четверть завысили количество голосов, набранных партией-лидером.
Чтобы сравнение двух групп избирателей имело смысл, распределение наблюдателей должно было быть именно случайным. Рубен Ениколопов, экономист из Российской экономической школы и барселонского Университета Помпеу Фабра, один из авторов работы, несколько лет пытался убедить наблюдателей проводить “случайные эксперименты”, то есть расставлять добровольцев по участкам случайным образом. Впрочем, в руководстве “Гражданина наблюдателя” были грамотные специалисты по анализу данных, так что необходимость случайного распределения была понятна.
Почему же “Гражданин наблюдатель” не распределил добровольцев по участкам просто по жребию? Потому что “квазислучайный” метод более прозрачен для широкой публики. В случае если бы наблюдатели распределялись по жребию, нашлись бы те, кто приписал бы результаты манипуляциям со жребием. Публика же хочет во всем видеть обман. Каждый год на спортивных сайтах возникают конспирологические теории о том, что очередная жеребьевка была проведена нечестно. Квазислучайное распределение гарантирует определенную прозрачность. Тем более, как рассказывается ниже, есть возможность дополнительно проверить, была ли созданная таким образом выборка репрезентативной, не отличающейся в среднем от всех участков в городе.
Итак, благодаря эксперименту “Гражданина наблюдателя” у нас был материал для сравнения двух выборок. Первые результаты сравнения были оглашены “Гражданином наблюдателем” через несколько дней после выборов, а Алексей Захаров, доцент Высшей школы экономики, описал их в колонке в интернет-издании Slon.ru [44]. Однако все равно стоило написать научную статью, чтобы не только аккуратно объяснить, но и проделать дополнительные процедуры проверки результатов на устойчивость. Чтобы убедиться в устойчивости результатов, ученые предполагают другие (отличные от собственных) возможные объяснения того или иного явления и придумывают, с помощью какого статистического теста эти альтернативные объяснения можно опровергнуть.
Какую дополнительную проверку необходимо было провести? Я еще раз вернусь к случайности назначения наблюдателей. Представьте себе, что, как на предыдущих выборах в Москве или как в 2011 году в других городах, наблюдатели пошли бы на те участки, на которые хотели, и мы получили бы сходные результаты. То есть оказалось бы, что среднее по участкам с наблюдателями отличается от среднего по участкам без наблюдателей. Что бы это означало? Это могло бы означать, что наблюдатели захотели пойти на вполне определенные участки, потому что, например, это их родные участки, на которых у “Единой России” аномально маленький, по сравнению со средним, процент голосов. У нас же складывалась совсем другая картина. Поскольку мы получили разницу в результатах между участками с наблюдателями и участками без наблюдателей, а наблюдатели были распределены по участкам случайным образом (1-й, 25-й, 50-й, 75-й в каждом из больших территориальных округов), то выходит, что разница в результатах возникает по причине, не связанной с действиями наблюдателей.
Чтобы отвергнуть подозрения в нерепрезентативности нашей выборки, мы взяли данные о выборах 2007 года. С помощью группы ассистентов мы поставили в соответствие участкам 2007 года участки 2011 года. В итоге мы получили большую выборку, покрыв примерно треть участков, и могли сравнить, отличались ли выбранные нами участки от остальных. Оказалось, что в 2007 году они совершенно не отличались, то есть среднее по ним было тем же самым, что и среднее по всем участкам. Следовательно, тот факт, что в 2011 году это отличие имелось, указывает на наличие “эффекта присутствия наблюдателя”, снижающего процент фальсификаций.
Основной результат проведенного исследования состоит в том, что как минимум 10 процентных пунктов в результатах “Единой России” на парламентских выборах – результат фальсификаций. По официальным данным, в Москве “Единая Россия” набрала 46,5 % голосов, и, значит, примерно четверть московских голосов были “крадеными”.
Читать дальше