Energetický model | AI slovník

Odborná definice

Energy-based model přiřazuje dvojici vstupu a konfigurace, případně samotnému pozorování, skalárnu energii, přičemž nižší energie znamená vyšší kompatibilitu podle naučeného modelu. Predikce se získává hladáním konfigurace s nízkou energiou nebo odvodením pravděpodobnosti z energetickej funkce. Normalizace na pravděpodobnostní rozdělení může vyžadovat náročný partition function. Trénink proto často snižuje energii správných příkladů a zvyšuje energii negativních vzorků pomocí kontrastívnych nebo aproximačních metod.

Srozumitelné vysvětlení

Energetický model vytváří krajinu s údoliami a kopcami. Správně nebo pravdepodobné kombinace mají ležet v údoliach, nesprávně na vyšších miestach. Při rozpoznávání může model přiřadit nízkou energii obrázku a správné třídě, vyšší energii tomu istému obrázku s chybnou třídou. Výhodou je volnost při návrhu kompatibility, nevýhodou náročné hladání a normalizace. Kvalita závisí i od negativních příkladů, protože model se musí naučit nejen co prijímat, ale i co odmietat.

Časté otázky

Je energie fyzikálna veličina?

Ne. Jde o naučené skalárne skóre inšpirované fyzikou. Jeho absolutní hodnota často nemá význam, důležité jsou rozdíly mezi konfiguracemi.

Jako souvisí energie s pravděpodobností?

Často se používá vztah, ve kterém je pravděpodobnost úměrná exponenciále zápornej energie. Výpočet normalizačnej konštanty však může být neuskutočnitelný.

Co je negativní vzorek při tréninku?

Je to nekompatibilná nebo modelem navržená konfigurace, které energie se má zvýšit. Způsob její výběru výrazně ovlivňuje učení.

Kde se energetické modely používají?

V štruktúrovanej predikci, generatívnom modelování, detekci anomálií, metric learningu, robustnosti a u modelů s implicitne definovanou distribúcí.

Proč je inference někdy pomalá?

Výstup nemusí vzniknout jedním dopredným priechodom. Může být potřebná iteratívna optimalizace nebo sampling v zložitej energetickej krajine.

Související pojmy

Zdroje a redakční stopa

Definícia je autorská odborná syntéza. Pri právnych a regulačných rozhodnutiach má prednosť aktuálne oficiálne znenie predpisu a posúdenie konkrétneho prípadu.