Skip to main content

2020 | OriginalPaper | Buchkapitel

An Intelligent Cache Management for Data Analysis at CMS

verfasst von : Mirco Tracolli, Marco Baioletti, Diego Ciangottini, Valentina Poggioni, Daniele Spiga

Erschienen in: Computational Science and Its Applications – ICCSA 2020

Verlag: Springer International Publishing

Aktivieren Sie unsere intelligente Suche, um passende Fachinhalte oder Patente zu finden.

search-config
loading …

Abstract

In this work, we explore a score-based approach to manage a cache system. With the proposed method, the cache can better discriminate the input requests and improve the overall performances. We created a score based discriminator using the file statistics. The score represents the weight of a file. We tested several functions to compute the file weight used to determine whether a file has to be stored in the cache or not. We developed a solution experimenting on a real cache manager named XCache, that is used within the Compact Muon Solenoid (CMS) data analysis workflow. The aim of this work is optimizing to reduce maintaining costs of the cache system without compromising the user experience.

Sie haben noch keine Lizenz? Dann Informieren Sie sich jetzt über unsere Produkte:

Springer Professional "Wirtschaft+Technik"

Online-Abonnement

Mit Springer Professional "Wirtschaft+Technik" erhalten Sie Zugriff auf:

  • über 102.000 Bücher
  • über 537 Zeitschriften

aus folgenden Fachgebieten:

  • Automobil + Motoren
  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Elektrotechnik + Elektronik
  • Energie + Nachhaltigkeit
  • Finance + Banking
  • Management + Führung
  • Marketing + Vertrieb
  • Maschinenbau + Werkstoffe
  • Versicherung + Risiko

Jetzt Wissensvorsprung sichern!

Springer Professional "Technik"

Online-Abonnement

Mit Springer Professional "Technik" erhalten Sie Zugriff auf:

  • über 67.000 Bücher
  • über 390 Zeitschriften

aus folgenden Fachgebieten:

  • Automobil + Motoren
  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Elektrotechnik + Elektronik
  • Energie + Nachhaltigkeit
  • Maschinenbau + Werkstoffe




 

Jetzt Wissensvorsprung sichern!

Springer Professional "Wirtschaft"

Online-Abonnement

Mit Springer Professional "Wirtschaft" erhalten Sie Zugriff auf:

  • über 67.000 Bücher
  • über 340 Zeitschriften

aus folgenden Fachgebieten:

  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Finance + Banking
  • Management + Führung
  • Marketing + Vertrieb
  • Versicherung + Risiko




Jetzt Wissensvorsprung sichern!

Literatur
1.
Zurück zum Zitat Ali, W., Shamsuddin, S.M., Ismail, A.S., et al.: A survey of web caching and prefetching. Int. J. Adv. Soft Comput. Appl 3(1), 18–44 (2011) Ali, W., Shamsuddin, S.M., Ismail, A.S., et al.: A survey of web caching and prefetching. Int. J. Adv. Soft Comput. Appl 3(1), 18–44 (2011)
2.
Zurück zum Zitat Bauerdick, L., et al.: Xrootd, disk-based, caching proxy for optimization of data access, data placement and data replication. J. Phys.: Conf. Ser. 513(4), 042044 (2014) Bauerdick, L., et al.: Xrootd, disk-based, caching proxy for optimization of data access, data placement and data replication. J. Phys.: Conf. Ser. 513(4), 042044 (2014)
3.
Zurück zum Zitat Chen, T.: Obtaining the optimal cache document replacement policy for the caching system of an EC website. Eur. J. Oper. Res. 181(2), 828–841 (2007)CrossRef Chen, T.: Obtaining the optimal cache document replacement policy for the caching system of an EC website. Eur. J. Oper. Res. 181(2), 828–841 (2007)CrossRef
4.
Zurück zum Zitat Ciangottini, D.: Integrazione di una smart cache italiana federata per CMS. Talk at CCR, Italy (2019) Ciangottini, D.: Integrazione di una smart cache italiana federata per CMS. Talk at CCR, Italy (2019)
5.
Zurück zum Zitat Collaboration, C.M.S., et al.: The CMS experiment at the CERN LHC. Jinst (2008) Collaboration, C.M.S., et al.: The CMS experiment at the CERN LHC. Jinst (2008)
6.
Zurück zum Zitat Herodotou, H.: Autocache: employing machine learning to automate caching in distributed file systems. In: International Conference on Data Engineering Workshops (ICDEW), pp. 133–139 (2019) Herodotou, H.: Autocache: employing machine learning to automate caching in distributed file systems. In: International Conference on Data Engineering Workshops (ICDEW), pp. 133–139 (2019)
7.
Zurück zum Zitat Koskela, T., Heikkonen, J., Kaski, K.: Web cache optimization with nonlinear model using object features. Comput. Netw. 43(6), 805–817 (2003)CrossRef Koskela, T., Heikkonen, J., Kaski, K.: Web cache optimization with nonlinear model using object features. Comput. Netw. 43(6), 805–817 (2003)CrossRef
8.
Zurück zum Zitat Kuznetsov, V., Li, T., Giommi, L., Bonacorsi, D., Wildish, T.: Predicting dataset popularity for the CMS experiment. arXiv preprint arXiv:1602.07226 (2016) Kuznetsov, V., Li, T., Giommi, L., Bonacorsi, D., Wildish, T.: Predicting dataset popularity for the CMS experiment. arXiv preprint arXiv:​1602.​07226 (2016)
9.
Zurück zum Zitat Narayanan, A., Verma, S., Ramadan, E., Babaie, P., Zhang, Z.-L.: Deepcache: a deep learning based framework for content caching. In: Proceedings of the 2018 Workshop on Network Meets AI & ML, pp. 48–53 (2018) Narayanan, A., Verma, S., Ramadan, E., Babaie, P., Zhang, Z.-L.: Deepcache: a deep learning based framework for content caching. In: Proceedings of the 2018 Workshop on Network Meets AI & ML, pp. 48–53 (2018)
10.
Zurück zum Zitat Sadeghi, A., Wang, G., Giannakis, G.B.: Deep reinforcement learning for adaptive caching in hierarchical content delivery networks. IEEE Trans. Cogn. Commun. Netw. 5(4), 1024–1033 (2019)CrossRef Sadeghi, A., Wang, G., Giannakis, G.B.: Deep reinforcement learning for adaptive caching in hierarchical content delivery networks. IEEE Trans. Cogn. Commun. Netw. 5(4), 1024–1033 (2019)CrossRef
11.
Zurück zum Zitat Tian, G., Liebelt, M.: An effectiveness-based adaptive cache replacement policy. Microprocess. Microsyst. 38(1), 98–111 (2014)CrossRef Tian, G., Liebelt, M.: An effectiveness-based adaptive cache replacement policy. Microprocess. Microsyst. 38(1), 98–111 (2014)CrossRef
12.
Zurück zum Zitat XRootD. Xrootd homepage (2020). Accessed 4 Mar 2020 XRootD. Xrootd homepage (2020). Accessed 4 Mar 2020
Metadaten
Titel
An Intelligent Cache Management for Data Analysis at CMS
verfasst von
Mirco Tracolli
Marco Baioletti
Diego Ciangottini
Valentina Poggioni
Daniele Spiga
Copyright-Jahr
2020
DOI
https://doi.org/10.1007/978-3-030-58802-1_24

Premium Partner