Funzione di attivazione: differenze tra le versioni
Nessun oggetto della modifica |
Nessun oggetto della modifica |
||
| Riga 1: | Riga 1: | ||
{{Template concetto | |||
|NomeInglese=Activation function | |||
}} | |||
Funzione matematica posta all'uscita dei neuroni artificiali che ne modifica l'intervallo del segnale di uscita. E' normalmente una funzione non lineare, che permette alle [[Rete Neurale Artificiale (ANN)|reti neurali]] di essere degli approssimatori universali di funzione. | Funzione matematica posta all'uscita dei neuroni artificiali che ne modifica l'intervallo del segnale di uscita. E' normalmente una funzione non lineare, che permette alle [[Rete Neurale Artificiale (ANN)|reti neurali]] di essere degli approssimatori universali di funzione. | ||
| Riga 11: | Riga 9: | ||
* RELU (1969): https://ieeexplore.ieee.org/document/4082265 | * RELU (1969): https://ieeexplore.ieee.org/document/4082265 | ||
* GELU (2016): https://arxiv.org/abs/1606.08415 | * GELU (2016): https://arxiv.org/abs/1606.08415 | ||
Versione delle 11:18, 17 ago 2024
| Funzione di attivazione | |
|---|---|
| Nome Inglese | Activation function |
| Sigla | |
Funzione matematica posta all'uscita dei neuroni artificiali che ne modifica l'intervallo del segnale di uscita. E' normalmente una funzione non lineare, che permette alle reti neurali di essere degli approssimatori universali di funzione.
Le funzioni di attivazione più importanti sono:
- Sigmoide
- RELU (1969): https://ieeexplore.ieee.org/document/4082265
- GELU (2016): https://arxiv.org/abs/1606.08415