За да разбереш политиката, тя помага да мислиш като учен.
Откриването на кампаниите за предстоящите президентски избори е навсякъде, като различни анкети показват този или онзи кандидат отгоре. Има национални рейтинги за одобрение, местни оценки за одобрение, анкети за първични кандидати, анкети по въпроси, анкети за избираемост. Всички тези числа се състоят от какофония от информация, от която може да бъде трудно да се правят глави или опашки. По този начин, казват учените, те много приличат на данните, които един изследовател може да събере: Отделните анкети най-вече не са твърде полезни сами по себе си, без контекст. Но взети заедно и подхождащи внимателно, анкетите могат да добавят към вида информация, която ученият би намерил за полезна.
"Има много методологически стабилни политически проучвания, които много приличат на методите, използвани в научния контекст, но има и доста слабо проектирани - и / или целенасочено предубедени политически проучвания там", каза Сара Бърк, изследователски психолог и експерт в междугрупата пристрастия в университета в Сиракуза. "Най-добрите от най-добрите в политическите проучвания вършат добра работа с наличните инструменти и поддържат - и се опитват да комуникират - ясно разбиране на ограниченията, които все още съществуват в техните методи."
С други думи дали дадена анкета е ценна или интересна зависи много от това как е проведена и как е представена.
Често тези анкети се представят като "Ето някои проценти", според Джилиан Скудър, астрофизик, изучаващ галактики в Оберлинския колеж в Охайо. "Така че може да направите политическа анкета, може да кажете:" Направихме анкета в това състояние и получихме тези цифри ", а вие може да добавите това в новините. Когато правя статистика и аз достигнах процент, този процент идва с много други числа ", каза Скудър пред Live Science.
Работата на Scudder включва статистически тестове, които много приличат на проучване, каза тя. Тя може да събере милиони точки от данни за поведението на галактиките, за да се опита да разбере как се държат. Но би било загуба на време да преминете през всеки един поотделно. Така тя ще вземе по-малки извадки от своите данни и ще ги изследва, използвайки статистически методи, подобни на онези, които анкетите използват, за да направят изводи за цялото население на галактиките.
Но за да работи това изследване и за да има някакво значение за други учени, числата трябва да идват с данни, които им дават контекст, каза тя.
"Това ли беше извадка от 100? Това ли беше извадка от 1000? Това ли беше извадка от 1 милион? Колко промени в размера на пробата променят резултата? Ако отида от 1000 на 10 000, променят ли се процентите или те са Неудобни неща? “, каза Скудър.
Анкетите, по подобен начин, са много по-полезни, когато знаете колко хора са взети проба, доколко са съгласувани резултатите с други анкети и как точно са направени анкетите, заяви Крис Schatschneider, образователен психолог и експерт по статистика и изследователски дизайн във Флорида Държавен университет.
Според собствените изследвания на Schatschneider той използва статистически данни, за да отдели „сигнала“ от „шума“ - за да определи дали резултатът от експеримента вероятно ви казва нещо смислено за това как работи светът или може да е резултат от случайна случайност. Освен това той обмисля внимателно на какви въпроси може да отговори определен набор от данни и на какви въпроси не може.
Тези статистически методи са различни от използваните от анкетите, каза той. Но е важно да зададете подобни въпроси, когато чувате данни от анкети в новините: Колко голям беше размерът на извадката? Кой точно беше включен в извадката? Какви въпроси зададоха анкетите? Целият този контекст може да ви каже дали анкетата има смисъл в начина, по който няколко плаващи числа до, да речем, име на кандидат не могат.
Също така е важно да разберете методите, използвани от анкетата, каза той.
Например, много анкети включват "стратифицирано вземане на проби". Това означава, че ако определена група - студенти от колежа, например, е недостатъчно представена в извадка за анкета в сравнение с общата популация, анкетите ще оправят числата, така че изследваните студенти от колежа да станат по-важни. Това по принцип може да бъде легитимна техника, каза Schatschneider. Но това може да изкриви резултатите, когато мъничка група от анкетираните се озовават хиляди. Той даде пример: The New York Times през 2016 г. съобщава, че един 19-годишен чернокож мъж, който подкрепя Доналд Тръмп в изборите през тази година, диво криви резултатите от анкетите поради този вид масажиране на данни, което води до новинарски истории, предполагащи, че Тръмп беше много по-популярен сред черните избиратели, отколкото беше.
Реалността, каза Schatschneider, е, че ако това не е ваша работа на пълен работен ден, вероятно нямате време да оценявате анкети поотделно по този начин, за да определите кои са научните и кои по-малко. Повечето хора са по-добре да не обръщат твърде много внимание на новини за отделни анкети, които могат да бъдат подвеждащи, и вместо това трябва да гледат средни стойности на последните анкети като тези, които RealClearPolitics публикува, каза той.
Учените правят нещо подобно с данните от изследванията, когато те обединяват заедно данни от множество документи в по-големи статии, наречени "мета-анализи", каза Schatschneider. Ако не друго, средно за анкетите е по-надеждно, защото анкетите са склонни да бъдат освободени независимо дали са интересни или не. Но научните трудове са склонни да бъдат предубедени към по-интересни резултати, тъй като те все още са по-лесни за публикуване, според Schatschneider.
Прогнозите за изборите, базирани на огромни групи анкети, също могат да бъдат интересни и полезни, каза Скудър, но за разлика от научните изследвания, където се публикуват методи и сурови числа, анкетиращите не показват работата си - държат всичко това в собствена черна кутия.
Като цяло, каза Скудър, тя смята групата от анкети надеждни и интересни, ако всички те сочат в една и съща посока, и по-малко смислена, ако са навсякъде - предполагайки проблеми при събирането на данни.
Само защото откритията отговарят на тенденцията, не ги правят точни. С наличния набор от данни, каза Скудър, вие също трябва да знаете как да интерпретирате резултатите.
"Трябва да внимавате, че статистическият тест, който използвате, отговаря на въпроса, на който искате да отговорите", каза тя.
В науката това може да означава да се разбере дали набор от данни изключва идеята изцяло - да речем, че всички звезди са направени от сирене - или просто не го доказват - да речем, всички звезди все още могат да бъдат направени от сирене, но ние нямаме ' не видях сиренето още.
Когато става въпрос за политически проучвания, въпросите са различни. Но разбирането какво означават е също толкова важно. Оценката за одобрение не е мярка за това как хората планират да гласуват. Питането на хора, които харесват по време на първи курс, не означава непременно да ви каже как ще се чувстват по време на общи избори. На въпрос за кого планират да гласуват през февруари не се предвижда как ще гласуват през ноември, Schatschneider каза.
По този начин, каза Schatschneider, анкетата е много подобна на отчитане на температурата на пациента. Това е съвършено научно начинание, каза той. Но е важно хората, които следват анкети, да са наясно какво точно означават.