Odborná definícia
Odborná definícia
Z-test je parametrický test hypotézy, ktorého testovacia štatistika má pri platnosti nulovej hypotézy štandardné normálne rozdelenie alebo sa k nemu dostatočne približuje. Používa sa napríklad pri testovaní priemeru so známym populačným rozptylom, rozdielu dvoch priemerov vo veľkých vzorkách alebo rozdielu podielov. V AI experimentoch môže porovnávať miery úspešnosti či konverzie, ale iba vtedy, keď sú splnené podmienky nezávislosti, vhodnej aproximácie a správne definovanej jednotky analýzy.
Zrozumiteľné vysvetlenie
Zrozumiteľné vysvetlenie
Z-test premení pozorovaný rozdiel na otázku, koľko štandardných chýb ho delí od hodnoty očakávanej pri nulovej hypotéze. Veľké absolútne z znamená, že výsledok by bol pri náhode menej pravdepodobný. Samotná nízka p-hodnota však nehovorí, či je zlepšenie prakticky významné, ani neopravuje chybný dizajn experimentu. Ak sa používateľ objaví v oboch variantoch, merania sú závislé alebo sa test opakuje na desiatkach metrík, jednoduchý výpočet môže vytvoriť falošnú istotu.
Časté otázky
Časté otázky
Kedy je z-test vhodnejší než t-test?
Klasicky pri známom populačnom rozptyle alebo pri dostatočne veľkej vzorke, kde je normálna aproximácia testovacej štatistiky opodstatnená.
Čo vyjadruje p-hodnota?
Je to pravdepodobnosť rovnako alebo viac extrémneho výsledku za predpokladu, že nulová hypotéza platí. Nie je to pravdepodobnosť pravdivosti hypotézy.
Môže z-test porovnať presnosť dvoch modelov?
Áno iba pri vhodnej štruktúre dát. Pri predikciách na rovnakých prípadoch treba zohľadniť párovanie, často iným testom alebo bootstrapom.
Prečo uvádzať interval spoľahlivosti?
Ukazuje rozsah efektov zlučiteľných s dátami a pomáha posúdiť praktickú veľkosť rozdielu, nielen jeho štatistickú významnosť.
Ako vplýva viacnásobné testovanie?
S rastúcim počtom hypotéz rastie šanca náhodného nálezu. Používa sa vopred určená primárna metrika alebo korekcia hladiny významnosti.
Súvisiace pojmy
Súvisiace pojmy
Zdroje a redakčná stopa
Zdroje a redakčná stopa
- statsmodels, ztest
Definícia je autorská odborná syntéza. Pri právnych a regulačných rozhodnutiach má prednosť aktuálne oficiálne znenie predpisu a posúdenie konkrétneho prípadu.