Termine di Bias
/ˈbaɪəs tɜːrm/
Termine di Bias: Un parametro apprendibile addizionale nelle reti neurali che permette di shiftare la funzione di attivazione. I termini di bias permettono ai neuroni di attivarsi anche quando tutti gli input sono zero. Ogni neurone ha tipicamente un bias.
In English: Bias TermLegge III · Come una rete impara dai datiI termini di bias permettono ai neuroni di attivarsi anche quando tutti gli input sono zero. Ogni neurone ha tipicamente un bias. Aumentano la flessibilità del modello e sono cruciali per fittare dati non centrati sullo zero.
Esempi
- Trasformazione lineare: y = Wx + b
- Bias in ogni layer
- Parametro offset