Table des matières:
Définition - Que signifie la fonction d'activation?
Une fonction d'activation est la fonction d'un neurone artificiel qui délivre une sortie basée sur des entrées. Les fonctions d'activation dans les neurones artificiels sont une partie importante du rôle que jouent les neurones artificiels dans les réseaux de neurones artificiels modernes.
Techopedia explique la fonction d'activation
Une façon de comprendre la fonction d'activation consiste à examiner un «modèle» visuel du neurone artificiel. La fonction d'activation est à la «fin» de la structure neuronale et correspond à peu près à l'axone d'un neurone biologique.
Une autre façon de le comprendre est de regarder la terminologie autour de son utilisation. Les informaticiens parlent de la fonction d'activation lorsqu'ils discutent soit d'une sortie binaire - soit 1 ou 0 - soit d'une fonction qui représente une gamme de sorties en fonction des entrées. Dans ces cas, les professionnels de l'informatique et d'autres utilisent souvent les termes «fonction de transfert» et «fonction d'activation» de manière interchangeable, bien que la fonction de transfert soit plus souvent associée au graphique qui analyse une gamme de sorties. Diverses fonctions guident la sortie qui filtre à travers les couches du réseau neuronal jusqu'à la couche finale de sortie des neurones ou des nœuds.
Il est également important de distinguer les fonctions d'activation linéaires et non linéaires. Là où les fonctions d'activation linéaires maintiennent une constante, les fonctions d'activation non linéaires créent plus de variation qui utilise la construction du réseau neuronal. Des fonctions comme sigmoïde et ReLU sont couramment utilisées dans les réseaux de neurones pour aider à construire des modèles de travail.
