Laboratorul ruletei · Laborator · Statistică · 8 min

Semnificația statistică

„Semnificativ” înseamnă improbabil la o roată corectă, nu „real” și nu „profitabil”.

Răspuns scurt

O valoare p de 0,05 înseamnă că o roată corectă ar produce un tipar atât de dezechilibrat o dată din douăzeci. Dacă te uiți la douăzeci de roți, una va trece din întâmplare.

convenție
p < 0,05
rata de fals pozitiv
5% pe test
remediu
replicare
ce nu este
p(roata are abatere)

Ce este valoarea p

Assuming the stated null model, the p-valuelaboratorValoare pProbabilitatea de a vedea o abatere cel puțin la fel de mare ca cea observată, dacă roata ar fi corectă.Citește tot → is the probabilitymatematicăProbabilitateȘansa unui rezultat, de la 0 la 1 sau de la 0% la 100%. Un număr: 1/37 = 2,70%.Citește tot → of a test statistic at least as extreme as the observed one. It is not the probability that the wheel is fair or that the result arose by chance. Interpretation also depends on the design, assumptions and tests attempted.

afirmațiecorectă?
p = 0,03 înseamnă că o roată corectă dă date atât de extreme în 3% din cazurida
p = 0,03 înseamnă că există o probabilitate de 97% ca roata să aibă abaterenu
p = 0,03 înseamnă că buzunarul fierbinte va rămâne fierbintenu
p = 0,03 după scanarea a 30 de roți este o dovadă puternicănu; te aștepți la unul sau două astfel de rezultate din întâmplare
p = 0,03 de două ori, pe două eșantioane independente de la aceeași roatăacum merită atenție

Comparații multiple

Fiecare test pe care îl rulezi la o roată corectă are o probabilitate de 5% să treacă la nivelul de 5%. Testează douăzeci de roți și una trece. Testează o roată în douăzeci de ferestre de timp și una trece. Testează un eșantion cu 37 de grupări de buzunareechipamentBuzunarUnul dintre cele 37 de compartimente numerotate ale rotorului. Se mai numește: locaș, cupă.Citește tot →, șase grupări de sectoareroatăSectorUn arc continuu de buzunare pe roată, spre deosebire de un grup de pe tabloul de joc.Citește tot → și trei grupări de culori și ceva trece. Remediul este să decizi testul înainte să te uiți la date, să-l rulezi o singură dată și să confirmi pe date noi. Scanarea care găsește o roată „cu abatere” este de obicei chiar ceea ce a produs rezultatul.

Probabilitatea a cel puțin un fals pozitiv la p < 0,05%
1 test
5%
5 teste
22,6%
10 teste
40,1%
20 de teste
64,2%
37 de teste (câte unul pe buzunar)
85,0%
%
042,5085,0%
1 − 0,95ⁿ. Testarea fiecărui buzunar separat este aproape garantat să găsească unul „semnificativ”.

Semnificație versus mărime

A large sample can detect a small departure from fairness that still does not make a bet profitable. At a true pocket probability of 1/36.5, a 35:1 bet has negative expectation. At 1/36 it breaks even. A p-value does not measure the size or practical value of an effect.

Puterea

Power is the chance of rejecting the null under a specified alternative. For one pocket chosen in advance, an exact one-sided 5% binomial test on 1,000 spins rejects at 37 or more hits. If the true rate is 1/30, its power is about 28%, not 50%.

Un standard practic

Ca o afirmație despre abatere să fie interesantă: un test ales dinainte, p < 0,01 în loc de 0,05, replicare pe un eșantion independent de mărime asemănătoare și o rată de apariție estimată a buzunarelor favorizate de 1/34 sau mai bună după replicare. Acest standard a fost îndeplinit de câteva ori în istoria jocului și niciodată, din câte arată înregistrările publice, la o roată modernă întreținută.

Întrebări

De ce 0,05?

Convenție din anii 1920. Nu are nimic special; 0,01 este un prag mai rezonabil când scanezi multe roți.

Dacă p este foarte mic, roata are cu siguranță abatere?

Probabil nu produce rezultate uniforme. Ar putea fi un efect al crupierului, o eroare de înregistrare sau o problemă de introducere a datelor. Replică.

Un rezultat semnificativ îmi spune pe ce buzunar să pariez?

No. That requires a separate estimate of hit probability, its uncertainty and the actual payoutbaniPlatăCe aduce un pariu câștigător, exprimat ca „X la 1”, pe lângă miza returnată.Citește tot →.

Matematică distractivă

Încearcă mai întâi singur. Fiecare soluție este ascunsă; deschide-o când ești gata.

  1. Suppose a dozenpariuDuzină1–12, 13–24 sau 25–36, plătește 2:1.Citește tot → chosen before data collection appears 742 times in 3,000 independent double-zeroroatăZeroSingurul buzunar verde, pe care nu îl acoperă niciun pariu pe șanse simple, pe duzină sau pe coloană; sursa avantajului casei. Se mai numește: un singur zero, 0.Citește tot → spins. Under the uniform model, how many standard deviationsmatematicăAbatere standardRădăcina pătrată a varianței; distanța tipică a unui rezultat față de valoarea așteptată.Citește tot → below the mean is that? What is the probabilitymatematicăProbabilitateȘansa unui rezultat, de la 0 la 1 sau de la 0% la 100%. Un număr: 1/37 = 2,70%.Citește tot → of 742 or fewer hits?

    Arată soluția

    Răspuns Cam 8,1 abateri standard sub medie. O roată corectă l-ar produce cam o dată la 3 × 10¹⁵ încercări, adică niciodată. Răspunsul publicat împreună cu întrebarea spune 11,75; noi obținem 8,07.

    Under the stated model, X is binomial with n = 3,000 and p = 12/38. Its mean is np ≈ 947.37 and its standard deviation is √(np(1 − p)) ≈ 25.46.

    The standardized difference is (742 − 947.37)/25.46 ≈ −8.07. Summing the exact binomial probabilities from 0 through 742 gives P(X ≤ 742) ≈ 9.77 × 10⁻¹⁷. A normal approximation with continuity correction gives about 4.25 × 10⁻¹⁶; the relative error is large this far into the tail.

    This is the probability of the specified data event under the model, not the probability that the wheel is fair. Such a result calls for checking the observations, independence, uniformity and analysis plan. Selecting the worst-looking dozen after inspecting data, or searching many wheels or time periods, requires accounting for that selection.

Pauză de umor

Una din douăzeci de roți corecte este „semnificativă”. Asta înseamnă numărul.

Una din douăzeci de roți corecte este „semnificativă”. Asta înseamnă numărul.

Surse

  1. Pearson, K. “On the criterion that a given system of deviations from the probable…” https://www.amstat.org/asa/files/pdfs/P-ValueStatement.pdf
  2. Feller, W. An Introduction to Probability Theory and Its Applications, Vol. 1. https://www.itl.nist.gov/div898/software/dataplot/refman1/auxillar/chsqgood.htm
model: european, un singur zerometodologie ↗surse ↗