Referenční model | AI slovník

Odborná definice

Baseline model je jednoduchý nebo existujúci model, kterého výkon tvoří referenční bod pro posouzení nového řešení. Může jít o pravidlo většinové třídy, lineární model, aktuální produkční systém, lidský proces nebo predchádzajúcu verzi. Baseline musí používat stejnou definici úlohy, datové rozdělení, metriky a provozní omezení jako kandidát. Jeho úlohou není být slabý, ale určit, či složitější řešení přináší meratelný a prakticky významný přínos oproti primeranej alternatíve.

Srozumitelné vysvětlení

Tím může vytvořit drahý model na predikci odchodu zákazníků a získat přesnost 82 procent. Číslo samo sám o sobě nic neříká. Pokud jednoduché pravidlo dosahuje 80 procent a nový model je desaťnásobne drahší, přínos může být malý. Pokud produkční proces dosahuje 65 procent při stejné citlivosti na rizikovou skupinu, zlepšení je podstatnejšie. Baseline proto vytváří kontext, chrání před obdivom izolovanej metriky a pomáhá rozhodnout, či složitost, náklady a riziko nového modelu mají opodstatnení.

Časté otázky

Jaký má být dobrý baseline model?

Má být relevantní, reprodukovatelný a přiměřeně konkurencieschopný. Pro klasifikaci může zahrnovat večšinovou třídu i jednoduchý logistický model. V produkčnom projekte je často najdůležitejším baseline aktuální proces, ne akademicky triviálny odhad.

Může být baseline lidský výkon?

Ano, pokud jsou úlohy, vstupy a hodnocení srovnatelné. Je třeba však zachytit rozdíly mezi luďmi, časové náklady, možnost konzultace a nejistotu referenčního měření. Jedno číslo od jednoho hodnotitela je slabý benchmark.

Proč nestačí porovnat pouze accuracy?

Model může mít podobnou accuracy, ale jinou citlivost, kalibraci, latenci, cenu nebo dopad na skupiny uživatelů. Baseline porovnání má pokrývat metriky, které odrážají reálný účel a rizika aplikace.

Kdy je třeba baseline aktualizovat?

Když se změní produkční proces, distribuce dat, cílová metrika nebo dostupná technologie. Historicky slabá reference může uměle nafúknuť přínos nového modelu. Při dlouhém projekte se vyplatí baseline zmrazit pro experiment a současně evidovat nový stav produkce.

Co je heuristický baseline?

Je to jednoduché pravidlo založené na doménové znalosti, například odporučit najpredávanejší produkt nebo označit transakci nad stanoveným limitem. Často odhalí, či model skutečně zachycuje zložitejší vztah nebo pouze reprodukuje očividnou heuristiku.

Související pojmy

Zdroje a redakční stopa

Google Machine Learning Glossary, baseline
Google Machine Learning Glossary

Definícia je autorská odborná syntéza. Pri právnych a regulačných rozhodnutiach má prednosť aktuálne oficiálne znenie predpisu a posúdenie konkrétneho prípadu.