Skip to main content

2018 | OriginalPaper | Buchkapitel

Hybrid Image Retrieval in Digital Libraries

A Large Scale Multicollection Experimentation of Deep Learning Techniques

verfasst von : Jean-Philippe Moreux, Guillaume Chiron

Erschienen in: Digital Libraries for Open Knowledge

Verlag: Springer International Publishing

Aktivieren Sie unsere intelligente Suche, um passende Fachinhalte oder Patente zu finden.

search-config
loading …

Abstract

While digital heritage libraries historically took advantage of OCR to index their printed collections, the access to iconographic resources has not progressed in the same way, and the latter remain in the shadows. Today, it would be possible to make better use of these resources, especially by leveraging the illustrations recognized thanks to the OCR produced during the last two decades. This work presents an ETL (extract-transform-load) approach to this need, that aims to: Identify iconography wherever it may be found; Enrich the illustrations metadata with deep learning approaches; Load it all into a web app for hybrid image retrieval.

Sie haben noch keine Lizenz? Dann Informieren Sie sich jetzt über unsere Produkte:

Springer Professional "Wirtschaft+Technik"

Online-Abonnement

Mit Springer Professional "Wirtschaft+Technik" erhalten Sie Zugriff auf:

  • über 102.000 Bücher
  • über 537 Zeitschriften

aus folgenden Fachgebieten:

  • Automobil + Motoren
  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Elektrotechnik + Elektronik
  • Energie + Nachhaltigkeit
  • Finance + Banking
  • Management + Führung
  • Marketing + Vertrieb
  • Maschinenbau + Werkstoffe
  • Versicherung + Risiko

Jetzt Wissensvorsprung sichern!

Springer Professional "Technik"

Online-Abonnement

Mit Springer Professional "Technik" erhalten Sie Zugriff auf:

  • über 67.000 Bücher
  • über 390 Zeitschriften

aus folgenden Fachgebieten:

  • Automobil + Motoren
  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Elektrotechnik + Elektronik
  • Energie + Nachhaltigkeit
  • Maschinenbau + Werkstoffe




 

Jetzt Wissensvorsprung sichern!

Springer Professional "Wirtschaft"

Online-Abonnement

Mit Springer Professional "Wirtschaft" erhalten Sie Zugriff auf:

  • über 67.000 Bücher
  • über 340 Zeitschriften

aus folgenden Fachgebieten:

  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Finance + Banking
  • Management + Führung
  • Marketing + Vertrieb
  • Versicherung + Risiko




Jetzt Wissensvorsprung sichern!

Literatur
1.
Zurück zum Zitat Datta, R., Joshi, D., Li, J., Wang J.: Image retrieval: ideas, influences, and trends of the new age. ACM Trans. Comput. Surv. (2008) Datta, R., Joshi, D., Li, J., Wang J.: Image retrieval: ideas, influences, and trends of the new age. ACM Trans. Comput. Surv. (2008)
3.
Zurück zum Zitat Picard, D., Gosselin, P.-H., Gaspard, M.-C.: Challenged in content-based image indexing of cultural heritage collections. IEEE Signal Process. Mag. Inst. Electr. Electron. Eng. 32(4), 95–102 (2015) Picard, D., Gosselin, P.-H., Gaspard, M.-C.: Challenged in content-based image indexing of cultural heritage collections. IEEE Signal Process. Mag. Inst. Electr. Electron. Eng. 32(4), 95–102 (2015)
4.
Zurück zum Zitat Breiteneder, C., Horst, E.: Content-based image retrieval in digital libraries. In: Proceedings of Digital Libraries Conference, Tokyo, Japan (2000) Breiteneder, C., Horst, E.: Content-based image retrieval in digital libraries. In: Proceedings of Digital Libraries Conference, Tokyo, Japan (2000)
5.
Zurück zum Zitat Wan, G., Liu, Z.: Content-based information retrieval and digital libraries. Information Technology and Librairies, March 2008 Wan, G., Liu, Z.: Content-based information retrieval and digital libraries. Information Technology and Librairies, March 2008
6.
Zurück zum Zitat Szegedy, C., Vanhoucke, V., Ioffe, S., Shlens, J., Wojna, Z.: Rethinking the Inception Architecture for Computer Vision, December 2015 Szegedy, C., Vanhoucke, V., Ioffe, S., Shlens, J., Wojna, Z.: Rethinking the Inception Architecture for Computer Vision, December 2015
7.
Zurück zum Zitat Pan, S., Yang, Q.: A survey on transfer learning. IEEE Trans. Knowl. Data Eng. 22(10), 1345–1359 (2010)CrossRef Pan, S., Yang, Q.: A survey on transfer learning. IEEE Trans. Knowl. Data Eng. 22(10), 1345–1359 (2010)CrossRef
8.
Zurück zum Zitat Viana, M., Nguyen, Q., Babrani, M.: Document embedded images classification. In: ICDAR (2017) Viana, M., Nguyen, Q., Babrani, M.: Document embedded images classification. In: ICDAR (2017)
10.
Zurück zum Zitat Karpathy, A., Fei-Fei, L.: Deep visual-semantic alignments for generating image descriptions. IEEE Trans. Pattern Anal. Mach. Intell. 39(4) (2017) Karpathy, A., Fei-Fei, L.: Deep visual-semantic alignments for generating image descriptions. IEEE Trans. Pattern Anal. Mach. Intell. 39(4) (2017)
12.
Zurück zum Zitat Ginosar, S., Rakelly, K., Sachs, S., et al.: A century of portraits. A visual historical record of American high school yearbooks. In: Extreme Imaging Workshop, International Conference on Computer Vision, vol. 3 (2015) Ginosar, S., Rakelly, K., Sachs, S., et al.: A century of portraits. A visual historical record of American high school yearbooks. In: Extreme Imaging Workshop, International Conference on Computer Vision, vol. 3 (2015)
13.
Zurück zum Zitat Freire, N., Robson, G., Howard, J.B., Manguinhas, H., Isaac, A.: Metadata aggregation: assessing the application of IIIF and sitemaps within cultural heritage. In: Kamps, J., Tsakonas, G., Manolopoulos, Y., Iliadis, L., Karydis, I. (eds.) TPDL 2017. LNCS, vol. 10450, pp. 220–232. Springer, Cham (2017). https://doi.org/10.1007/978-3-319-67008-9_18CrossRef Freire, N., Robson, G., Howard, J.B., Manguinhas, H., Isaac, A.: Metadata aggregation: assessing the application of IIIF and sitemaps within cultural heritage. In: Kamps, J., Tsakonas, G., Manolopoulos, Y., Iliadis, L., Karydis, I. (eds.) TPDL 2017. LNCS, vol. 10450, pp. 220–232. Springer, Cham (2017). https://​doi.​org/​10.​1007/​978-3-319-67008-9_​18CrossRef
Metadaten
Titel
Hybrid Image Retrieval in Digital Libraries
verfasst von
Jean-Philippe Moreux
Guillaume Chiron
Copyright-Jahr
2018
DOI
https://doi.org/10.1007/978-3-030-00066-0_39