Skip to main content

2020 | OriginalPaper | Buchkapitel

An Evolutionary Approach to Hyper-Parameter Optimization of Neural Networks

verfasst von : Marco Stang, Christopher Meier, Vinzenz Rau, Eric Sax

Erschienen in: Human Interaction and Emerging Technologies

Verlag: Springer International Publishing

Aktivieren Sie unsere intelligente Suche, um passende Fachinhalte oder Patente zu finden.

search-config
loading …

Abstract

The last few years have increasingly been influenced by the emergence of neural networks for classification tasks. Due to the increasing size of the nets, especially concerning deep neural nets, the selection of the optimal topology becomes critical. A set of hyper-parameters determines the topology of a neural network. The selection of suitable hyper-parameters however, is time-consuming or requires expert knowledge. This paper examines the application of an evolutionary algorithm to optimize the hyper-parameters of a neural network. The result of the optimization by evolutionary algorithms can be applied for a variety of use-cases: i.e. detection of anomalies in CAN-bus data, object recognition for autonomous driving or the classification of hydraulic machinery oil.

Sie haben noch keine Lizenz? Dann Informieren Sie sich jetzt über unsere Produkte:

Springer Professional "Wirtschaft+Technik"

Online-Abonnement

Mit Springer Professional "Wirtschaft+Technik" erhalten Sie Zugriff auf:

  • über 102.000 Bücher
  • über 537 Zeitschriften

aus folgenden Fachgebieten:

  • Automobil + Motoren
  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Elektrotechnik + Elektronik
  • Energie + Nachhaltigkeit
  • Finance + Banking
  • Management + Führung
  • Marketing + Vertrieb
  • Maschinenbau + Werkstoffe
  • Versicherung + Risiko

Jetzt Wissensvorsprung sichern!

Springer Professional "Technik"

Online-Abonnement

Mit Springer Professional "Technik" erhalten Sie Zugriff auf:

  • über 67.000 Bücher
  • über 390 Zeitschriften

aus folgenden Fachgebieten:

  • Automobil + Motoren
  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Elektrotechnik + Elektronik
  • Energie + Nachhaltigkeit
  • Maschinenbau + Werkstoffe




 

Jetzt Wissensvorsprung sichern!

Springer Professional "Wirtschaft"

Online-Abonnement

Mit Springer Professional "Wirtschaft" erhalten Sie Zugriff auf:

  • über 67.000 Bücher
  • über 340 Zeitschriften

aus folgenden Fachgebieten:

  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Finance + Banking
  • Management + Führung
  • Marketing + Vertrieb
  • Versicherung + Risiko




Jetzt Wissensvorsprung sichern!

Literatur
2.
Zurück zum Zitat Weber, M., Pistorius, F., Sax, E., Maas, J., Zimmer, B.: A hybrid anomaly detection system for electronic control units featuring replicator neural networks. In: Arai, K., Kapoor, S., Bhatia, R. (eds.) Advances in Intelligent Systems and Computing, pp. 43–62. Springer, Cham (2019). https://doi.org/10.1007/978-3-030-03405-4_4 Weber, M., Pistorius, F., Sax, E., Maas, J., Zimmer, B.: A hybrid anomaly detection system for electronic control units featuring replicator neural networks. In: Arai, K., Kapoor, S., Bhatia, R. (eds.) Advances in Intelligent Systems and Computing, pp. 43–62. Springer, Cham (2019). https://​doi.​org/​10.​1007/​978-3-030-03405-4_​4
3.
Zurück zum Zitat Weicker, K.: Anwendung evolutionärer Algorithmen. In: Evolutionäre Algorithmen, pp. 237–291. Springer (2015) Weicker, K.: Anwendung evolutionärer Algorithmen. In: Evolutionäre Algorithmen, pp. 237–291. Springer (2015)
4.
Zurück zum Zitat Kruse, R., et al.: Computational Intelligence: Eine methodische Einführung in Künstliche Neuronale Netze. Evol. Algorithmen, Fuzzy-Systeme und Bayes-Netze Vieweg + Teubner, Wiesbad (2011) Kruse, R., et al.: Computational Intelligence: Eine methodische Einführung in Künstliche Neuronale Netze. Evol. Algorithmen, Fuzzy-Systeme und Bayes-Netze Vieweg + Teubner, Wiesbad (2011)
5.
Zurück zum Zitat Nissen, V.: Evolutionäre Algorithmen: Darstellung, Beispiele, betriebswirtschaftliche Anwendungsmöglichkeiten, Wiesbaden 1994. Zugl.: Diss., Dt. Univ, (1994) Nissen, V.: Evolutionäre Algorithmen: Darstellung, Beispiele, betriebswirtschaftliche Anwendungsmöglichkeiten, Wiesbaden 1994. Zugl.: Diss., Dt. Univ, (1994)
6.
Zurück zum Zitat Gerdes, I., Klawonn, F., Kruse, R.: Evolutionäre Algorithmen: Genetische Algorithmen - Strategien und Optimierungsverfahren -Beispielanwendungen. Springer-Verlag (2013) Gerdes, I., Klawonn, F., Kruse, R.: Evolutionäre Algorithmen: Genetische Algorithmen - Strategien und Optimierungsverfahren -Beispielanwendungen. Springer-Verlag (2013)
7.
Zurück zum Zitat Pohlheim, H.: Evolutionäre Algorithmen: Verfahren. Springer-Verlag, Operatoren und Hinweise für die Praxis (2013) Pohlheim, H.: Evolutionäre Algorithmen: Verfahren. Springer-Verlag, Operatoren und Hinweise für die Praxis (2013)
Metadaten
Titel
An Evolutionary Approach to Hyper-Parameter Optimization of Neural Networks
verfasst von
Marco Stang
Christopher Meier
Vinzenz Rau
Eric Sax
Copyright-Jahr
2020
DOI
https://doi.org/10.1007/978-3-030-25629-6_111

Neuer Inhalt