Self-attention
La self-attention è un meccanismo che permette a un modello di AI di pesare le relazioni tra gli elementi di una stessa sequenza, come le parole di una frase, per interpretarne il contesto.
Esempio pratico
Nella frase «La chiave dell’armadio è rotta», la self-attention aiuta il modello a collegare «rotta» a «chiave», anche se tra le due parole ce ne sono altre.
Termini correlati