Ежедневный всероссийский опрос «СПУТНИК»

Какие регионы и населенные пункты попадают в выборку?

Как показано в предыдущем разделе, телефонные номера для набора выбираются случайно из всего массива телефонных номеров России.

Поэтому у нас нет и не может быть заранее составленного списка точек опроса — конкретных населенных пунктов, — мы его получим только по завершении опроса. Крупные города попадают в каждый опрос: большая численность населения повышает вероятность попадания жителей в выборку.

При случайном отборе в каждом опросе представлены все федеральные округа и не менее 80 регионов. Доля сельских жителей среди опрошенных составляет 18—20%.

В связи с тем, что в России 11 часовых зон, выборка формируется по федеральным округам: ДВФО, СФО, УФО, ПФО, СКФО, ЮФО, СЗФО (без Санкт-Петербурга и Ленобласти), ЦФО (без Москвы и Московской области); с учетом вероятности дозвона отдельно выделяются столицы (Москва, Московская обл., Санкт-Петербург и Ленинградская область).

Как мы отбираем респондентов?

Для репрезентативности данных нам необходимо обеспечить всем респондентам равные шансы попадания в выборку. Для этого мы соблюдаем несколько условий:

Мы делаем не менее 5 попыток дозвониться до каждого респондента. Если телефон у респондента занят, система автоматически перезванивает ему через 30 минут. Если номер не отвечает, мы перезваниваем ему каждые 2 часа. Если респонденту неудобно сейчас отвечать, мы перезвоним в назначенное им время в другой день. Если респондент отказался отвечать в момент первого контакта, мы перезвоним ему на следующий день.

У нас единое местное время звонков — в каждой часовой зоне обзвон идет с 10 до 21 ч.

Мы звоним на мобильный номер и опрашиваем того, кто взял трубку.

Если отобранному респонденту неудобно разговаривать, мы перезваниваем ему в удобное время. Инструкция запрещает брать интервью у другого человека.

Мы проводим конвертацию отказов: если респондент некатегорично (мягко) отказался от участия в опросе, на следующий день мы ему перезваниваем и повторно просим принять участие в опросе. Около 10% соглашаются.

Помимо отборочных вопросов (они отфильтровывают несовершеннолетних (младше 18 лет), неграждан РФ, не назвавших населенный пункт и регион постоянного места жительства на территории РФ), у каждого потенциального респондента испрашивается согласие на участие в опросе и использование номера телефона для контроля качества интервью. Опрос проводится только при согласии респондента и его прохождения отборочной анкеты.

Репрезентативность данных и статистическая погрешность

Репрезентативность данных обеспечивается равной вероятностью попадания в нашу выборку всех россиян старше 18 лет вне зависимости от места их проживания.

В теории в нашу выборку не могут попасть только те россияне, которые не пользуются мобильным телефоном (по данным Росстата за 2023 г., в населении старше 15 лет это 3% ).

Закон больших чисел в теории вероятностей утверждает, что эмпирическое среднее (среднее арифметическое) достаточно большой конечной выборки из фиксированного распределения близко к теоретическому среднему (математическому ожиданию) этого распределения.

ИИспользуемая нами в опросе выборка достаточно велика, чтобы закон больших чисел начал действовать и распределения различных признаков (например, доля мужчин) в опросе и среди совершеннолетнего населения России совпадали. Наши данные получаются близкими к данным Росстата — это обеспечено технологией случайного отбора.

Мы снижаем вероятность систематических смещений повторными звонками и конвертацией отказов (см. выше).

Для данной случайной (вероятностной) выборки предельная погрешность с вероятностью 95% не превышает следующих величин:

• для данных, собранных в течение одного дня (1600 респондентов), — 2,5%
• Для данных, собранных в течение 2 дней (3200 респондентов), — 1,8%
• Для данных, собранных в течение недели (11 200 респондентов), — 1,0%

Теоретически помимо ошибки выборки смещение в оценки могут вносить формулировки вопросов и различные обстоятельства, возникающие в ходе полевых работ.

Взвешивание

Соблюдение технологии случайного отбора теоретически дает выборочное распределение основных признаков, близкое к их распределению в генеральной совокупности.

Однако для измерения ряда социально-политических или экономических показателей важно убедиться не только в том, что распределения отдельных показателей являются достаточно точными, но и в том, что соблюден комплексный баланс основных социально-демографических переменных. Поэтому при расчете социально-политических индикаторов мы используем взвешивание по социально-демографическим показателям. Социальные группы, оказавшиеся в массиве ответов респондентов слишком малочисленными, получают таким образом строго рассчитанный бонус к «весу» своей точки зрения.

Переменные, на которые мы взвешиваем:

• Тип населенного пункта.Массив поделен на 8 типов населенных пунктов, отражающих генеральную совокупность: (1) столицы, (2) город с численностью от миллиона жителей, (3) город с численностью свыше 500 тыс. до 1 млн жителей, (4) город с численностью свыше 100 тыс. до 500 тыс. жителей, (5) город с численностью свыше 50 тыс. до 100 тыс. жителей, (6) город с численностью менее 50 тыс. жителей и (7) поселки городского типа, (8) село.
• Пол. Массив отражает половую структуру генеральной совокупности: мужской пол, женский пол.
• Возраст. Массив поделен на четыре возрастные группы, отражающие генеральную совокупность: 18-24 года, 25-39 лет, 40-54 года, 55 лет и старше.
• Уровень образования. Массив поделен на две группы согласно уровню образования и отражает генеральную совокупность: есть высшее образование и нет высшего образования.

Показатели достижимости телефонного опроса

Для «ВЦИОМ-Спутник» мы рассчитываем показатели достижимости по технологии AAPOR (Standard definitions, 10th edition revised in 2023) в соответствии с корпоративным стандартом (https://profi.wciom.ru/principy_standarty/korporativnyj-standart-po-izmereniyu-rezultativnosti-oprosov-sputnik-vciom/), предусматривающим следующие показатели.

• коэффициент кооперации (КК), равный соотношению количества полных интервью к сумме (а) полных интервью и (б) всех несостоявшихся интервью с теми, кто подтвердил соответствие критериям отбора;
• минимальный коэффициент ответов (МКО), равный соотношению количества полных интервью к сумме (а) полных интервью, (б) прерванных интервью после успешного прохождения скрининга и (в) всех респондентов, о которых осталось неизвестным, удовлетворяют они выборочным критериям или нет;
• коэффициент достижимости (КД), который рассчитывается так же, как и МКО, с той лишь разницей, что количество респондентов, о которых осталось неизвестным, удовлетворяют они выборочным критериям или нет, уменьшается пропорционально доле подходящих для опроса респондентов в числе всех респондентов, чье соответствие или несоответствие отборочным критериям удалось установить.

В течение мая 2024 года значения КК приближались к 0,78, МКО — к 0,01, КД — к 0,07 (теоретически максимально возможное значение всех коэффициентов равно 1). Было бы неверно полагать, что повышение МКО и КД напрямую ведет к улучшению качества данных. Например, повысить значения этих коэффициентов можно за счет отказа от случайного отбора номеров в пользу «проверенных» баз телефонных номеров. Но ценой такого повышения окажется случайный отбор, обеспечивающий охват территории и возможность оценивать статистическую погрешность для каждой оценки.

Мировой опыт не имеет бесспорных свидетельств того, что исследования с разным уровнем достижимости дают разные результаты. Смещение в выборке возникает только в том случае, если опрошенные существенно отличаются от тех, кого опросить не удалось. Технология случайного отбора минимизирует вероятность таких отличий (хотя полностью и не исключает). Поэтому фиксация и анализ (не)достижимости — стандартная норма проведения наших опросов, направленная на минимизацию риска ошибки неответов.

Контроль качества данных

Данные — наш основной продукт, и мы уделяем большое внимание их качеству. Мы реализуем многоуровневый контроль, который начинается на этапе подготовки к опросу, продолжается в ходе всего опроса, а на завершающем этапе включает в себя разные методы проверки качества собранных данных:

• Каждый интервьюер проходит инструктаж, на котором разбираются все сложные вопросы.
• Опрос проходит под контролем специально подготовленных супервайзеров, которые следят за соблюдением инструкций и при необходимости консультируют интервьюеров.
• Электронное программирование анкеты защищает от ошибок ввода: интервьюер не может ввести в текстовое поле цифры или отметить несколько вариантов там, где предусмотрен только один.
• 100% интервью записываются. Далее проводится прослушивание 20% случайно отобранных интервью. Если у интервьюера обнаружены нарушения хотя бы в одной отобранной анкете, прослушиваются все его анкеты.
• По собранному массиву проводится логический контроль данных. Выявляются и отправляются на прослушивание все анкеты, по которым зафиксировано слишком короткое время интервью. Выявляются интервьюеры, анкеты которых показывают распределение данных, существенно отличное от среднего — такие анкеты также отправляются на прослушивание. Все отбракованные анкеты удаляются из массива, по ним проводится доопрос.