Tecnica di normalizzazione che opera su tutti i neuroni in un layer, usata principalmente nei Transformer.
Layer normalization normalizza le attivazioni attraverso le features invece che attraverso il batch. Più stabile per sequenze di lunghezza variabile. Usata in GPT e BERT.
Il blog usa solo i cookie tecnici. Se mi dai il permesso attivo anche Google Analytics, che conta in forma aggregata visite e articoli letti. Niente pubblicità, niente profilazione. La scelta vale anche per michelelaurelli.it. I dettagli sono nella cookie policy.
Preferenze cookie
Decidi tu cosa attivare. Puoi cambiare idea quando vuoi da «Preferenze cookie» in fondo alla pagina.
TecniciSempre attivi
Un solo cookie, ml_consent, ricorda la tua scelta qui e su michelelaurelli.it. Non serve ad altro e non viene condiviso con nessuno.
Google Analytics 4 di Google Ireland Ltd. Conta visite e articoli letti in forma aggregata, senza segnali pubblicitari. Cookie _ga e _ga_D429LPHJH7, durata fino a 2 anni.