Kul studie! Får se om den kvalar in för ett IgNobel-pris nästa år
Alltså - av 350757 kast landar myntet...
178078 gånger (50.75%) på samma sida upp som man startade med (Signifikant med p < 2.2*10^-16, dvs "machine precision"-lågt)
175420 gånger (50.01%) på "heads" snarare än "tails" (Icke signifikant med p = .889), oberoende av myntsort.
> binom.test(178078, 350757)
Exact binomial test
data: 178078 and 350757
number of successes = 178078, number of trials = 350757, p-value <
2.2e-16
alternative hypothesis: true probability of success is not equal to 0.5
95 percent confidence interval:
0.5060402 0.5093521
sample estimates:
probability of success
0.5076962
> binom.test(175420, 350757)
Exact binomial test
data: 175420 and 350757
number of successes = 175420, number of trials = 350757, p-value =
0.8899
alternative hypothesis: true probability of success is not equal to 0.5
95 percent confidence interval:
0.4984622 0.5017744
sample estimates:
probability of success
0.5001183
Dold text
(Ovanstående är samma test som används i artikeln, de presenterar dock bara konfidensintervall och inte p-värdena, därav att jag körde testet själv för att också få p-värden).
Så de finner alltså både att kinematiken i kastandet påverkar, och att myntets utformning inte påverkar (krona och klave är lika sannolika).
Skrivet av Laffe:
Det här var ju ingen imponerande studie. Har ni tittat på urvalet? Ca 50 pers där 10-14 står för hela effekten. Hade dessa slumpmässigt inte deltagit hade resultatet varit 50/50 igen. En betydande mängd individer uppvisar motsatt fenomen så det är inte någon allmängiltig företelse utan bara en siffra man kan uppnå genom kreativ statistik och dåligt urval. Orkade inte läsa studien särskilt noggrant, men emfasen på antalet kast när urvalsgruppen inte ens singlar lika många per individ är ju extra illa.
Jag ser inget uppenbart problem här, jag antar att du menar att om man tar bort de 10-14 som uppvisar störst effekt i samma riktning som hypotesen, så är vi tillbaka på 50/50? Men eftersom den uppmätta proportionen ligger nära 50% så är det inte så konstigt om bara en del av deltagarna driver effekten. Jag tänker snarare tvärtom - författarna pratar om individuella skillnader i hur man kastar, men bortsett från 4 personer så ser slantsinglarnas olika effekter ut som slumpmässigt fördelade runt medelvärdet på 50.75% (Figure 1 i artikeln, övre delen).
Skrivet av Laffe:
Om du påstår dig mäta förekomsten av att sidan som är startpositionen också oftast kommer bli slutpositionen så kan du inte låta det vanligaste slutpositionen vara den vanligaste startpositionen. Om tex myntets klave hade en egenskap som fick den sidan att oftare landa uppåt så skulle det också leda till att klave var den vanligaste startpositionen och infektera hela resultatet. Helt plötsligt vet du inte vad du mäter.
Men de hävdar att att de kontrollerat för bias mellan krona och klave. Jag är en sopa på statistik så jag orkar inte försöka förstå mig på om de verkligen gjort det på ett korrekt sätt. Men det går väldigt snabbt att se i deras paper att de ger sig själva typ alla utrymmen som går för att trolla med datan.
Det de såvitt jag kan se har gjort är att testa om krona eller klave var vanligare som utfall, och funnit att detta inte var fallet. Det borde ta hand om problemet du pekar ut. Just testet som ska svara på om resultatet är signifikant skilt från 50/50 är enkelt (binomialtestet som jag kör ovan), men sen går de fort över på bayesiska modeller i syfte att säga om deras resultat också bekräftar teorin från tidigare. Där går de bortom mina statistikkunskaper.
Skrivet av Laffe:
De nämner själva hur "deltagarna" i studien är medvetna om hypotesen som prövas men avfärdar att det skulle påverka resultatet. Men det hade varit jäkligt intressant att se varje individs resultat över tid på en kurva för att se när de valde att "avsluta". Jävligt lätt att bara stanna när man har ett hum om att man fått rätt resultat när det inte byggts några vettiga ramar för hur resultaten ska samlas in.
Denna invändning köper jag, åtminstone teoretiskt. Det skulle kunna vara det som förklarar de 3-4 slantsinglare som hade ovanligt höga proportioner (som de dock hanterar genom att också testa utan).
All data och analysscript finns online för den hugade: https://osf.io/mhvp7/ (mappen "analyses" ser ut att innehålla allt som behövs).
