Eine Analyse des Gewichtungsraums von Neuronalen Netzen

Arnfried Ossen, Stefan Rüger

Technische Universität Berlin


In Neuronalen Netzen enthaltene Symmetrien können als Symmetriegruppe beschrieben werden, die auf den Gewichtungsraum wirkt und diesen in natürlicher Weise partitioniert. Wir beschreiben einen Algorithmus zur Bestimmung von repräsentativen Gewichtungsvektoren. Für dieses Fundamentalgebiet geben wir eine adäquate Metrik an, die die Verwendung von Clusterverfahren erlaubt. Damit können Unzulänglichkeiten von auf dem Gradientenverfahren basierenden Lernalgorithmen aufgedeckt werden. Es ergeben sich Anwendungen bei der Modellauswahl für Neuronale Netze und der Schätzung des Prognosefehlers (Fehlerbalken) für Feedforward-Netze.


Zurück zur Hompage der Cowan!