О внимании к источникам данных

О внимании к источникам данных

Александр Богачев

Продолжаем разбирать график из ролика Медузы. Вот этот:

Смотрел я на него и тут задумался: а может и с данными накосячили? (Спойлер: да).

В качестве источника указан сайт Pewresearch.org, известной некоммерческой организации, проводящей опросы и демографические исследования. Пройдем же на него и поищем эти самые данные.

Пошерстив сайт, обнаруживаем, что действительно последнее исcледование на эту тему было опубликовано в 2017 году. Вот оно: http://assets.pewresearch.org/wp-content/uploads/sites/11/2017/05/15120244/CEUP-FULL-REPORT.pdf

Оказывается опрос проводился с июня 2015 по июль 2016, но сама организация указывает, что данные за 2015 год, а не 2016, как это сделала Медуза:

Но самое интересное начинается дальше. Во-первых, выясняется, что собственно Pew research center проводит программу ISSP:  International Social Survey Programme. И на тему религии опросы проводились в 1991, 1998, 2008 и 2010 году. И результаты этих опросов с тем, что опубликовала Медуза, совпадают не в полной мере.

Давайте посмотрим. 1991 год. В этот год было два исследования. Одно проводилось предшественницей Pew research center Times Mirror Center, не включало в себя восточную часть страны и действительно показало 37%. Однако исследование в рамках ISSP в том же 1991 году, проведенное по всей России, дало результат в 31%.

Результаты ISSP за следующие годы, вкупе с интереснейшей статьей 2014 года обнаруживаются здесь: http://www.pewforum.org/2014/02/10/russians-return-to-religion-but-not-to-church/

И они отличаются от данных Медузы:

Вот сами данные:

Как видим, в 1998 году — 53% (у Медузы вообще нет 1998-го), в 2008 — 72%, а у Медузы в этом году 63%.

Вот данные исследования Global Religious Futures всё того же Pew research center:

И здесь у России в 2010 году уже 71%! У Медузы этих значений нет вообще.

(Кстати, само исследование тут: http://www.pewforum.org/2011/12/19/global-christianity-exec/

Закрадывается мысль, что 37% и 71% были действительно взяты у Pew research, а остальные в каком-то другом месте. Просмотрев опросы Левады, ВЦИОМа, и ФОМа находим правильный ответ. Он находится на этой странице:

http://fom.ru/TSennosti/11587

Как можно понять, это страница Фонда "Общественное мнение" (ФОМ), и там есть вот такой график:

Давайте-ка на него посмотрим повнимательнее. У Медузы в 1997 — 52%, и тут 52%. В 2000 — 56%, и тут 56%, , в 2002 — 59%, и тут 59%, в 2008 — 63%, и тут 63%. Невероятно! Продолжим. В 2012 у Медузы — 68%, и тут в сентябре 2012 — 68%, в 2013 — 69%, и тут в мае 2013 тоже 69%. Это просто не может быть совпадением! Причем выбраны именно те данные, которые ложатся в восходящий тренд.

Осталось понять откуда взялось 47% в 1992 году, ведь остальные данные мы уже нашли. Это тоже ФОМ: http://bd.fom.ru/report/map/of19991803

Обратите внимание, как ловко пляшут цифры у самого ФОМа, например, данные за 1997 и 1998 уже отличаются.

Итого, что мы имеем. Источник указан один, данные надерганы из разных мест, почему-то выборочно, у этих исследований разная методология и разные авторы. На выходе получаем опять же вроде бы правильный тренд, но по сути мухлеж и подтасовку.

P.S. А вот что пишет англоязычная википедия:

Ну то есть данные достаточно сильно гуляют от опроса к опросу. Плюс в отчете Pew есть ремарка об этом, что, например, опросы ESS проводятся так: сначала спрашивают, религиозны ли вы, а потом уже религию, и результаты сильно меньше, чем у самого ISSP, где сразу спрашивают про религию.
P.P.S. Да, кстати, вот такой хвостик тоже нельзя было делать:


Данные там куда-то вниз уходят, типа было еще меньше, но ведь данных таких нет! Как это можно показывать. Ведь линия явно обозначает какое-то конкретное значение. Don't do that.

Report Page