Skip to main content
main-content

Tipp

Weitere Artikel dieser Ausgabe durch Wischen aufrufen

09.03.2018 | Focus | Ausgabe 11/2018

Soft Computing 11/2018

Weakly paired multimodal fusion using multilayer extreme learning machine

Zeitschrift:
Soft Computing > Ausgabe 11/2018
Autoren:
Xiaohong Wen, Huaping Liu, Gaowei Yan, Fuchun Sun
Wichtige Hinweise
Communicated by X. Wang, A.K. Sangaiah, M. Pelillo.

Abstract

Multimodal data have recently become nearly ubiquitous in the real world. Exploring the multimodal fusion is beneficial to improve the performance of the system. However, it is difficult to ensure that data collected from different sources are full pairing. In this paper, we will focus on the weakly paired case of multimodal data, i.e., each modality is partitioned into multiple groups, only paired information on groups is known instead of full pairing between data samples. A new framework of weakly paired multimodal fusion based on multilayer extreme learning machine (ML-ELM) is proposed in this paper, which will find complex nonlinear transformations of each modality of data such that the resulting representations are highly correlated. In this framework, unsupervised hierarchical ELM performs feature extraction for all modalities separately. Then, the higher-level representations from all modalities perform joint dimension reduction by weakly paired maximum covariance analysis. We evaluate our framework on three challenging cross-modal datasets, and the results have proved the effectiveness of proposed method.

Bitte loggen Sie sich ein, um Zugang zu diesem Inhalt zu erhalten

Sie möchten Zugang zu diesem Inhalt erhalten? Dann informieren Sie sich jetzt über unsere Produkte:

Springer Professional "Wirtschaft+Technik"

Online-Abonnement

Mit Springer Professional "Wirtschaft+Technik" erhalten Sie Zugriff auf:

  • über 69.000 Bücher
  • über 500 Zeitschriften

aus folgenden Fachgebieten:

  • Automobil + Motoren
  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Elektrotechnik + Elektronik
  • Energie + Umwelt
  • Finance + Banking
  • Management + Führung
  • Marketing + Vertrieb
  • Maschinenbau + Werkstoffe
  • Versicherung + Risiko

Testen Sie jetzt 30 Tage kostenlos.

Springer Professional "Wirtschaft"

Online-Abonnement

Mit Springer Professional "Wirtschaft" erhalten Sie Zugriff auf:

  • über 58.000 Bücher
  • über 300 Zeitschriften

aus folgenden Fachgebieten:

  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Finance + Banking
  • Management + Führung
  • Marketing + Vertrieb
  • Versicherung + Risiko




Testen Sie jetzt 30 Tage kostenlos.

Springer Professional "Technik"

Online-Abonnement

Mit Springer Professional "Technik" erhalten Sie Zugriff auf:

  • über 50.000 Bücher
  • über 380 Zeitschriften

aus folgenden Fachgebieten:

  • Automobil + Motoren
  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Elektrotechnik + Elektronik
  • Energie + Umwelt
  • Maschinenbau + Werkstoffe​​​​​​​




Testen Sie jetzt 30 Tage kostenlos.

Literatur
Über diesen Artikel

Weitere Artikel der Ausgabe 11/2018

Soft Computing 11/2018 Zur Ausgabe

Premium Partner

    Bildnachweise