Nezgodne istine glasanja koje bi trebao znati svaki birač

Jacques Demarthon / AFP / Getty Images

Tony Blair nakon pobjede



Zapravo, britanski anketari nisu koristili nasumične uzorke više od dva desetljeća. (Djelomično je to zato što je RDD teže izvesti u zemlji koja nema standardizirani format telefonskih brojeva.) I pokazalo se da 2015. nije bio prvi put da su anketari u Velikoj Britaniji bili daleko iznad cilja: 1997., kada je Tony Blair došao je na vlast, precijenili su vodstvo Laburista nad konzervativcima za više od 6 postotnih bodova.

Apsolutna pogreška bila je ista, rekao je za BuzzFeed News Patrick Sturgis iz Nacionalnog centra za istraživačke metode na Sveučilištu Southampton, koji je obdukciju uveo u neuspjeh 2015. godine. No, budući da su anketari ispravno nazvali pobjednika, pogreška iz 1997. nije izazvala velike valove.



(Nakon glasanja o Brexitu prošlog lipnja, anketari u Velikoj Britaniji ponovno su dobili loš glas jer sugeriraju da će Remain usko prevladati. U stvarnosti, međutim, podjela glasova bila je unutar granica pogreške uzorkovanja, pa statistički gledano nisu bili predaleko isključeno.)



S obzirom na britansko iskustvo, pomislili biste da bi svatko odabrao RDD anketiranje nad online uzorcima. No, cijena telefonskog glasovanja ostaje glavna prepreka. Čak i ako to nije bio faktor, internetski ispitivači javnog mnijenja tvrde da je sam tradicionalni zlatni standard jako narušen.

Današnji nasumični uzorci nisu tako nasumični kao što su nekad bili.

Iako telefonske ankete počinju nasumičnim skupom brojeva za biranje, niske stope odaziva znače da uzorci na kojima anketari završavaju možda nisu reprezentativni-tipično mlađi i manje obrazovani glasači mršavi su na zemlji.

Michael Ramlet, suosnivač i izvršni direktor Morning Consulta, rekao je za BuzzFeed News da je ideja da svaki anketar danas radi s pravim slučajnim uzorkom u biti mit.



Anketari su dugo pokušavali ispraviti odstupanja od poznatih demografskih podataka ponderiran njihove rezultate. Ako uzorak sadrži samo upola manje onih od 18 do 25 godina koliko bi trebao, na primjer, i dvostruko više osoba starijih od 65 godina, mladim biračima bi se dala težina dva, a starijima 0,5. Dakle, svaka mlada osoba koja je rekla da namjerava glasati za Trumpa ili Clinton brojala bi dva puta, dok bi dvije starije pristaše trebale registrirati jednu preferenciju za svakog kandidata.

Ako pondercijski faktori postanu ekstremni, mali broj odgovora manje zastupljene skupine može iskriviti ukupni rezultat ankete. I kako se stopa odgovora telefonskih anketa smanjivala, ponderi koji su se koristili anketarima su porasli.

Budući da anketari na Internetu biraju svoje sudionike kako bi pokušali uskladiti poznate demografske podatke prije nego što započnu istraživanje, oni uglavnom koriste manje ponderirajuće čimbenike nakon anketiranja nego što to čine telefonski ispitivači. YouGov obično ne mora primjenjivati ​​težine veće od 1,3 za američki nacionalni uzorak, rekao je Rivers za BuzzFeed News.



Na ovaj ili onaj način, svi anketari moraju napraviti prilagodbe kako bi nadoknadili poteškoće u dobivanju reprezentativnih uzoraka. A kad pokušavaju raspisati izbore, moraju shvatiti i koji će ispitanici vjerojatno glasati - koji samo šest od deset podobni birači jesu na predsjedničkim izborima 2012. godine.

Ne postoji dogovorena metoda za identifikaciju vjerojatnih birača, a u kombinaciji s razlikama u načinu na koji različiti anketari primjenjuju ponderirane faktore, način na koji se to radi može napraviti veliku razliku u izvješćenim rezultatima ankete. Ranije ovog tjedna Upshot je izvijestio da je dao iste sirove podatke anketiranja za četiri različita anketara, dobivši raspon rezultata od prednosti Clintonove od 4 postotna boda, do Trumpove prednosti od 1 boda.

Andrew Burton / Getty Images

Anketari kažu da su neovisni, ali ponekad se okupljaju zajedno.

Prostorija za pomicanje koju nudi ponderiranje i vjerojatno modeliranje birača može također objasniti još jedan uznemirujući zaključak iz post-mrtvog glasanja u Velikoj Britaniji 2015. godine: fenomen tzv. stočarstvo , u kojem se činilo da su anketari došli do istog, pogrešnog odgovora.

Iznenađujuće je da su svi pogriješili na isti način, rekao je Sturgis.

To ne znači da su anketari bili u dosluhu, već umjesto toga vjerojatno ukazuje na to da su svaki donijeli odluke o prilagodbi uzorka, ponderiranju i modeliranju vjerojatnog birača, s jednim okom na rezultate koji dolaze iz drugih tvrtki-odbacujući izbore koji bi premjestili njihove rezultate daleko od gomile.

Unatoč britanskom debaklu 2015. većina američkih stručnjaka za ispitivanje javnog mnijenja koje je konzultirala BuzzFeed News očekuju sličan neuspjeh za predsjedničke izbore 2016. - s obzirom na to da su podvrgnuti intenzivnijem ispitivanju različitih metoda.

Predsjednički izbori proučavaju se do smrti, rekao je Timothy Johnson, koji vodi Istraživački laboratorij za istraživanje na Sveučilištu Illinois u Chicagu. Mislim da ankete rade jako dobro zajedno.

Barem se dosad točnost predsjedničkih izbora dobro držala.

Peter Aldhous za BuzzFeed Vijesti / Via ncpp.org

Prosječna greška kandidata razlika je u postotnim bodovima između procjena anketa i stvarne podrške svakom kandidatu na izborima.

No do sljedećeg izbornog ciklusa, neumoljivi ekonomski i logistički pritisci mogli bi značiti da će anketno okruženje u SAD-u izgledati više kao ono u Britaniji, pri čemu će dominirati internetske ankete. Do izbora 2020. telefonske ankete mogle bi biti preostala kategorija, rekao je Johnson.

U nesavršenom svijetu, koja je metoda ispitivanja najbolja?

Direktna usporedba anketa s RDD telefona i onih provedenih pomoću online uzoraka za uključivanje do sada je dala različite rezultate. Godine 2011. istraživači predvođeni Jonom Krosnickom i Davidom Yeagerom sa Sveučilišta Stanford usporedio rezultate za online i RDD telefonske ankete provedene između 2004. i 2009. godine, zaključujući da su internetske ankete bile manje točne.

Ako se prava znanstvena istraživanja na kraju zaustave jer nema više pozivnih centara i infrastruktura se prebaci na internet, u tom će trenutku istraživanja, što se mene tiče, umrijeti, rekao je Krosnick za BuzzFeed News.

No, na temelju novijih studija, drugi stručnjaci za ispitivanje javnog mnijenja zauzimaju manje apokaliptično stajalište. Godine 2014. politolozi Stephen Ansolabehere sa Sveučilišta Harvard i Brian Schaffner sa Sveučilišta Massachusetts našao malu razliku u rezultatima dobivenim telefonskim ispitivanjem RDD-a koje je proveo YouGov i jednim na internetu, koristeći opt-in uzorak prilagođen tako da odražava sastav šire populacije.

A u svibnju ove godine istraživački centar Pew usporedio izvedbu jednog od vlastitih slučajnih uzoraka s devet zasebnih mrežnih panela za uključivanje. Testirajući uzorke u internetskoj anketi, Pew je otkrio velike varijacije u njihovoj izvedbi, a vlastiti slučajni uzorak pao je u sredinu pakiranja. YouGov, koji je koristio detaljna prilagođavanja uzoraka i ponderiranje, izašao na prvo mjesto .

Dakle, možda su oni koji su anketirali internet u pravu, kada kažu da njihove prilagodbe mogu nadoknaditi nedostatak slučajnog uzorkovanja.

Dolazi, a možda i stigne, rekao je za BuzzFeed News Charles Franklin, politolog i tradicionalni anketar telefona sa Sveučilišta Marquette u Milwaukeeju u Wisconsinu. Više ćemo znati u studenom.

ISPRAVKA

26. rujna 2016. u 19:18

Nekoliko je dijelova ove priče promijenjeno kako bi preciznije odražavalo nijanse metodologije glasanja:

Nasumičnim odabirom telefonskih brojeva ispitivači bi se trebali približiti reprezentativnom uzorku populacije, ali to ne osigurava da svi koji imaju telefon imaju jednaku vjerojatnost uzorkovanja.

Mrežne ankete sada se mogu popuniti uz mali dio cijene telefonskih anketa RDD -a. No, za istraživanje RDD telefona općenito su potrebni dani, a ne tjedni.

Primjer o težini telefonskih anketa koje je za ABC News proveo Langer Research Associates uklonjen je jer se ti utezi koriste već nekoliko godina.

Većina stručnjaka za ispitivanje javnog mnijenja koje je konzultirao BuzzFeed News očekuju da će općenito ankete za predsjedničke izbore 2016. biti prilično točne.

Uzorci telefonskih anketa s niskim stopama odaziva možda nisu reprezentativni. Koliko je to zapravo veliki problem u praksi, predmet je rasprave.


Izbori vjerojatno neće pobijediti skrivene pristalice Trumpa

buzzfeed.com

Pristalice Trumpa kažu da su ankete pogrešne i da zapravo pobjeđuje

buzzfeed.com