Trening modelu
Processo di "apprendimento" della rete su enormi quantità di dati - è quando il modello acquisisce le sue capacità.
Il training è il processo in cui il modello apprende le sue capacità: la rete neurale elabora enormi quantità di dati e i suoi parametri vengono gradualmente calibrati per prevedere sempre meglio le risposte corrette. Nel caso dei modelli linguistici significa settimane o mesi di calcoli su migliaia di schede grafiche. Dopo il completamento del training la conoscenza del modello viene "congelata" - per questo i modelli hanno un punto di cutoff della conoscenza e non conoscono eventi più recenti, a meno che non vengano collegati a un motore di ricerca. Il training da zero è costoso, quindi più spesso si usa il fine-tuning di modelli esistenti.