Model Distillation (Destilace modelů)

Model Distillation (destilace modelů) je proces v učení AI, při kterém se znalosti z obřího a komplexního modelu („učitele“) přenášejí do podstatně menšího a efektivnějšího modelu („studenta“). Menší model se učí napodobovat uvažování a výstupy velkého modelu, čímž získá podobné schopnosti při zlomku velikosti.

Výsledkem je extrémně rychlá a levná AI, která si zachovává vysokou přesnost v konkrétních úlohách. Destilace je klíčem k tomu, jak dostat špičkové funkce umělé inteligence do běžných mobilních telefonů a webových prohlížečů.