Referenční pravda | AI slovník

Odborná definice

Ground truth je referenční údaj, label nebo měření, které se v konkrétním procese používá jako cíl pro trénink nebo hodnocení modelu. Může vzniknout priamym meráním, odbornou anotací, adjudikací více posudzovatelů nebo neskorším potvrdeným výsledkem. Označení neznamená absolutní a bezchybnou pravdu. Reference může obsahovat meraci chybu, nejednoznačnost, změnu definice a systematický bias. Kvalitná knowledge base proto eviduje původ labelu, pokyny, míru shody, nejistotu, verzi a čas platnosti, ne pouze finálnu hodnotu.

Srozumitelné vysvětlení

U modelu na rozpoznání poškodení může být ground truth rozhodnutí technika, výsledek laboratórneho testu nebo potvrzení po rozobratí výrobku. Každý zdroj má jinou přesnost a cenu. Pokud dvaja technici nesúhlase při hraničnej praskline, vynucení jednoho labelu nezruší nejistotu, pouze ji skryje. Referenční pravda je proto dříve oficiálny rozhodovací základ pro danou úlohu než metafyzická pravda o svete. Při revízii pravidel se mohou staré labely stát neporovnatelné, a model potom vypadá hůře nebo lépe pouze proto, že se změnil štandard.

Časté otázky

Kdo může vytvářet ground truth?

Senzor, expert, skupina anotátorů, administratívny register nebo následně pozorovaný výsledek. Volba závisí na úlohy a musí se dokumentovat spolu s kvalifikací, postupom a konfliktmi záujmů.

Jak se řeší nesúhlas anotátorů?

Měří se shoda, zachovávají se individuálne labely nebo distribuce názorů a používá se adjudikace. Večšinové hlasování je pouze jedna možnost a může potlačit oprávněný menšinový odborný pohlad.

Co spůsobují chybné labely při tréninku?

Model se může naučit nekonzistentné hranice, zhoršit kalibraci a reprodukovat systematický bias anotace. Náhodný šum a systematické chyby mají odlišný dopad a vyžadují jinou nápravu.

Mohou syntetická data tvorit ground truth?

V simulaci může být cíl známy přesně podle generujúceho procesu. To je pravda simulátora, ne automaticky reálného sveta, proto je třeba hodnotit simulačnou medzeru a validaci na reálných datech.

Kdy se ground truth musí aktualizovat?

Při změně definice cíle, meracej techniky, právnych pravidel, anotátorských pokynů nebo populace. Verze se nemají ticho prepísat, protože by se stratila reprodukovatelnost starších evaluací.

Související pojmy

Zdroje a redakční stopa

Definícia je autorská odborná syntéza. Pri právnych a regulačných rozhodnutiach má prednosť aktuálne oficiálne znenie predpisu a posúdenie konkrétneho prípadu.