Tilastot, jotka kestävät tarkastelun
Otossuhteen poikkeamahälytykset
Tarkistus, joka tehdään, ennen kuin millään muulla luvulla on merkitystä: jakautuiko liikenne todella niin kuin asetitte.
Otossuhteen poikkeama tarkoittaa, että asettamanne jako ei ole se jako, joka toteutui. Yleensä syy on variantti, joka ei toimi, uudelleenohjaus, joka kadottaa kävijöitä matkalla, tai bottisuodatus, joka osuu yhteen haaraan kovemmin kuin toiseen.
Se on pätevyysportti eikä mittari, ja siksi se tarkistetaan ensin. Jos jako on rikki, ryhmät eivät ole vertailukelpoisia, ja jokainen sivun p-arvo, luottamusväli ja suositus mittaa vikaa eikä muutostanne.
Testi on khiin neliö -yhteensopivuustesti asetettuja painoja vasten, ja sen raja on paljon tavallista tiukempi. Oikealla liikenteellä jako ei ole koskaan täsmälleen nimellinen, ja 0,05:n rajalla täysin terve testi laukaisisi hälytyksen kerran kahdestakymmenestä, mikä opettaa kaikki jättämään sen huomiotta. Testiä ei myöskään ajeta lainkaan ennen vähimmäisotosta tai jos liikennettä saavia haaroja on alle kaksi, koska siinä vaiheessa näytön puute ei ole näyttöä ongelmasta.
Tästä on olemassa täsmälleen yksi toteutus. Sähköpostiin tuleva hälytys, näyttö, jolle päädytte, ja automaatio, joka kieltäytyy toimimasta, tekevät kaikki saman päätelmän samalla koodilla, koska hälytys, joka on ristiriidassa sen sivun kanssa, johon se linkittää, on pahempi kuin ei hälytystä lainkaan.