Skip to main content

2020 | OriginalPaper | Buchkapitel

Neural-IR-Explorer: A Content-Focused Tool to Explore Neural Re-ranking Results

verfasst von : Sebastian Hofstätter, Markus Zlabinger, Allan Hanbury

Erschienen in: Advances in Information Retrieval

Verlag: Springer International Publishing

Aktivieren Sie unsere intelligente Suche, um passende Fachinhalte oder Patente zu finden.

search-config
loading …

Abstract

In this paper we look beyond metrics-based evaluation of Information Retrieval systems, to explore the reasons behind ranking results. We present the content-focused Neural-IR-Explorer, which empowers users to browse through retrieval results and inspect the inner workings and fine-grained results of neural re-ranking models. The explorer includes a categorized overview of the available queries, as well as an individual query result view with various options to highlight semantic connections between query-document pairs.
The Neural-IR-Explorer is available at:

Sie haben noch keine Lizenz? Dann Informieren Sie sich jetzt über unsere Produkte:

Springer Professional "Wirtschaft+Technik"

Online-Abonnement

Mit Springer Professional "Wirtschaft+Technik" erhalten Sie Zugriff auf:

  • über 102.000 Bücher
  • über 537 Zeitschriften

aus folgenden Fachgebieten:

  • Automobil + Motoren
  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Elektrotechnik + Elektronik
  • Energie + Nachhaltigkeit
  • Finance + Banking
  • Management + Führung
  • Marketing + Vertrieb
  • Maschinenbau + Werkstoffe
  • Versicherung + Risiko

Jetzt Wissensvorsprung sichern!

Springer Professional "Technik"

Online-Abonnement

Mit Springer Professional "Technik" erhalten Sie Zugriff auf:

  • über 67.000 Bücher
  • über 390 Zeitschriften

aus folgenden Fachgebieten:

  • Automobil + Motoren
  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Elektrotechnik + Elektronik
  • Energie + Nachhaltigkeit
  • Maschinenbau + Werkstoffe




 

Jetzt Wissensvorsprung sichern!

Springer Professional "Wirtschaft"

Online-Abonnement

Mit Springer Professional "Wirtschaft" erhalten Sie Zugriff auf:

  • über 67.000 Bücher
  • über 340 Zeitschriften

aus folgenden Fachgebieten:

  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Finance + Banking
  • Management + Führung
  • Marketing + Vertrieb
  • Versicherung + Risiko




Jetzt Wissensvorsprung sichern!

Literatur
1.
Zurück zum Zitat Angelini, M., Fazzini, V., Ferro, N., Santucci, G., Silvello, G.: CLAIRE: a combinatorial visual analytics system for information retrieval evaluation. Inform. Process. Manage. 54, 1077–1100 (2018)CrossRef Angelini, M., Fazzini, V., Ferro, N., Santucci, G., Silvello, G.: CLAIRE: a combinatorial visual analytics system for information retrieval evaluation. Inform. Process. Manage. 54, 1077–1100 (2018)CrossRef
2.
Zurück zum Zitat Bajaj, P., et al.: MS MARCO: a human generated MAchine Reading COmprehension dataset. In: Proceedings of NIPS (2016) Bajaj, P., et al.: MS MARCO: a human generated MAchine Reading COmprehension dataset. In: Proceedings of NIPS (2016)
4.
Zurück zum Zitat Giachelle, F., Silvello, G.: A progressive visual analytics tool for incremental experimental evaluation. arXiv preprint arXiv:1904.08754 (2019) Giachelle, F., Silvello, G.: A progressive visual analytics tool for incremental experimental evaluation. arXiv preprint arXiv:​1904.​08754 (2019)
5.
Zurück zum Zitat Heimerl, F., Gleicher, M.: Interactive analysis of word vector embeddings. In: Computer Graphics Forum, vol. 37. Wiley Online Library (2018) Heimerl, F., Gleicher, M.: Interactive analysis of word vector embeddings. In: Computer Graphics Forum, vol. 37. Wiley Online Library (2018)
6.
Zurück zum Zitat Hofstätter, S., Hanbury, A.: Let’s measure run time! Extending the IR replicability infrastructure to include performance aspects. In: Proceedings of OSIRRC (2019) Hofstätter, S., Hanbury, A.: Let’s measure run time! Extending the IR replicability infrastructure to include performance aspects. In: Proceedings of OSIRRC (2019)
7.
Zurück zum Zitat Hofstätter, S., Rekabsaz, N., Eickhoff, C., Hanbury, A.: On the effect of low-frequency terms on neural-IR models. In: Proceedings of SIGIR (2019) Hofstätter, S., Rekabsaz, N., Eickhoff, C., Hanbury, A.: On the effect of low-frequency terms on neural-IR models. In: Proceedings of SIGIR (2019)
8.
Zurück zum Zitat Hofstätter, S., Zlabinger, M., Hanbury, A.: Interpretable & time-budget-constrained contextualization for re-ranking. In: Proceedings of ECAI (2020) Hofstätter, S., Zlabinger, M., Hanbury, A.: Interpretable & time-budget-constrained contextualization for re-ranking. In: Proceedings of ECAI (2020)
9.
Zurück zum Zitat Ioannakis, G., Koutsoudis, A., Pratikakis, I., Chamzas, C.: RETRIEVAL: an online performance evaluation tool for information retrieval methods. IEEE Trans. Multimed. 20, 119–127 (2017)CrossRef Ioannakis, G., Koutsoudis, A., Pratikakis, I., Chamzas, C.: RETRIEVAL: an online performance evaluation tool for information retrieval methods. IEEE Trans. Multimed. 20, 119–127 (2017)CrossRef
10.
Zurück zum Zitat Lee, J., Shin, J.-H., Kim, J.-S.: Interactive visualization and manipulation of attention-based neural machine translation. In: Proceedings of EMNLP (2017) Lee, J., Shin, J.-H., Kim, J.-S.: Interactive visualization and manipulation of attention-based neural machine translation. In: Proceedings of EMNLP (2017)
11.
Zurück zum Zitat Lipani, A., Lupu, M., Hanbury, A.: Visual pool: a tool to visualize and interact with the pooling method. In: Proceedings of SIGIR (2017) Lipani, A., Lupu, M., Hanbury, A.: Visual pool: a tool to visualize and interact with the pooling method. In: Proceedings of SIGIR (2017)
12.
Zurück zum Zitat Lipani, A., Zuccon, G., Lupu, M., Koopman, B., Hanbury, A.: The impact of fixed-cost pooling strategies on test collection bias. In: Proceedings of ICTIR (2016) Lipani, A., Zuccon, G., Lupu, M., Koopman, B., Hanbury, A.: The impact of fixed-cost pooling strategies on test collection bias. In: Proceedings of ICTIR (2016)
14.
Zurück zum Zitat Xiong, C., Dai, Z., Callan, J., Liu, Z., Power, R.: End-to-end neural ad-hoc ranking with kernel pooling. In: Proceedings of SIGIR (2017) Xiong, C., Dai, Z., Callan, J., Liu, Z., Power, R.: End-to-end neural ad-hoc ranking with kernel pooling. In: Proceedings of SIGIR (2017)
Metadaten
Titel
Neural-IR-Explorer: A Content-Focused Tool to Explore Neural Re-ranking Results
verfasst von
Sebastian Hofstätter
Markus Zlabinger
Allan Hanbury
Copyright-Jahr
2020
DOI
https://doi.org/10.1007/978-3-030-45442-5_58

Neuer Inhalt