Modélisation d'un réseau de neurones

**Glauben** · 06/02/2011, 19h43

Bonjour ,
Quand j'ai modélisé le XOR avec les réseaux de neurones j'ai trouvé que le XOR n'est pas un problème linéairement séparable ( il y a deux droites qui séparent la base d'apprentissage ) j'ai ajouté une couche cachée avec 2 neurones .
chaque neurone représente une droite .

Couche d'entrée ---> Couche cachée( 2 neurones )--->Couche de sortie

La question :

Si je trouve 3 droites ou plus séparent la base d'apprentissage dans un autre problème, j'ajoute les neurones dans une couche cachée ou j'ajoute plusieurs couches cachées et dans chaque couche deux neurones ?

Merci .

**Clercq** · 07/02/2011, 00h16

Une seul couche cachée est largement suffisante pour la majorité des problèmes rencontrés, ça commence a faire un bout de temps que j'ai lu ce papier, mais des références existe sur ce sujet.

Pour répondre a ta question, a partir du moment ou un probleme est non linéaire, on utilise un RdN avec une couche cachée, le nombre de neurones dans la couche cachée étant déterminé de façon heuristique.

[EDIT]
1996, Maass, Networks of Spiking Neurons: The Third Generation of Neural Network Models

[...]In addition, neural nets from the second generation
are able to compute functions with analog input and
output. In fact they are universal for analog computations
in the sense that any continuous function with a compact
domain and range can be approximated arbitrarily well
(with regard to uniform convergence, i.e., the L∞ -
norm) by a network of this type with a single hidden
layer.
[\EDIT]

**Glauben** · 08/02/2011, 18h15

Bonjour , je comprend que le nombre des neurones et le nombre de couches cachées ne dépond pas aux nombre des droites mais il exicte des méthodes pour déterminer le nombre des couches cachées et le nombre des neurones ??????

Merci .

**Glauben** · 08/02/2011, 22h07

Bonjour ,
La réponse :

Il n'existe aucune méthode pour déterminer le nombre ,ce que il faut faire est de tester, à chaque fois vous donnez une configuration, et vous essayez de minimiser l'erreur E .