Skip to main content

2013 | OriginalPaper | Buchkapitel

Using MapReduce Framework for Mining Association Rules

verfasst von : Shih-Ying Chen, Jia-Hong Li, Ke-Chung Lin, Hung-Ming Chen, Tung-Shou Chen

Erschienen in: Information Technology Convergence

Verlag: Springer Netherlands

Aktivieren Sie unsere intelligente Suche, um passende Fachinhalte oder Patente zu finden.

search-config
loading …

Abstract

Data mining in knowledge discovery helps people discover unknown patterns from the collected data. PIETM (Principle of Inclusion–Exclusion and Transaction Mapping) algorithmis a novel frequent item sets mining algorithm, which scans database twice. To cope with big transaction database in the cloud, this paper proposes a method that parallelizes PIETM by the MapReduce framework. The method has three modules. Module I counts the supports of frequent 1-item sets. Module II constructs transaction interval lists. Module III discovers all the frequent item sets iteratively.

Sie haben noch keine Lizenz? Dann Informieren Sie sich jetzt über unsere Produkte:

Springer Professional "Wirtschaft+Technik"

Online-Abonnement

Mit Springer Professional "Wirtschaft+Technik" erhalten Sie Zugriff auf:

  • über 102.000 Bücher
  • über 537 Zeitschriften

aus folgenden Fachgebieten:

  • Automobil + Motoren
  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Elektrotechnik + Elektronik
  • Energie + Nachhaltigkeit
  • Finance + Banking
  • Management + Führung
  • Marketing + Vertrieb
  • Maschinenbau + Werkstoffe
  • Versicherung + Risiko

Jetzt Wissensvorsprung sichern!

Springer Professional "Technik"

Online-Abonnement

Mit Springer Professional "Technik" erhalten Sie Zugriff auf:

  • über 67.000 Bücher
  • über 390 Zeitschriften

aus folgenden Fachgebieten:

  • Automobil + Motoren
  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Elektrotechnik + Elektronik
  • Energie + Nachhaltigkeit
  • Maschinenbau + Werkstoffe




 

Jetzt Wissensvorsprung sichern!

Springer Professional "Wirtschaft"

Online-Abonnement

Mit Springer Professional "Wirtschaft" erhalten Sie Zugriff auf:

  • über 67.000 Bücher
  • über 340 Zeitschriften

aus folgenden Fachgebieten:

  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Finance + Banking
  • Management + Führung
  • Marketing + Vertrieb
  • Versicherung + Risiko




Jetzt Wissensvorsprung sichern!

Literatur
1.
Zurück zum Zitat Han J, Kamber M, Pei J (2011) Data mining: concepts and techniques. Morgan Kaufmann, San Francisco Han J, Kamber M, Pei J (2011) Data mining: concepts and techniques. Morgan Kaufmann, San Francisco
2.
Zurück zum Zitat Agrawal R, Srikant R (1994) Fast algorithm for mining association rules in large database. In: Bocca JB, Jarke, M, Zaniolo C (eds.) VLDB’94. In: Proceeding of the 20th international conference on VLDB. pp 487–499, Santiago Agrawal R, Srikant R (1994) Fast algorithm for mining association rules in large database. In: Bocca JB, Jarke, M, Zaniolo C (eds.) VLDB’94. In: Proceeding of the 20th international conference on VLDB. pp 487–499, Santiago
3.
Zurück zum Zitat Agrawal R, Imielinski T, Swami A (1993) Mining association rules between sets of items in large databases, In: the ACM SIGMOD conference on management of data, pp 207–216 Agrawal R, Imielinski T, Swami A (1993) Mining association rules between sets of items in large databases, In: the ACM SIGMOD conference on management of data, pp 207–216
4.
Zurück zum Zitat Lin KC, Liao IE, Lin SF, Chang TP. A frequent itemset mining algorithm base on the inclusion–exclusion principle and transaction mapping. information. Science. accepted with minor revision Lin KC, Liao IE, Lin SF, Chang TP. A frequent itemset mining algorithm base on the inclusion–exclusion principle and transaction mapping. information. Science. accepted with minor revision
5.
Zurück zum Zitat Liu CL (1968) Introduction to combinatorial mathematics. McGraw-Hill, New YorkMATH Liu CL (1968) Introduction to combinatorial mathematics. McGraw-Hill, New YorkMATH
6.
Zurück zum Zitat Dean J, Ghemawat S (2004) MapReduce: simplied data processing on large clusters. In: In Proceedings of the 6th symposium on operating systems design and implementation (OSDI), pp 137–150 Dean J, Ghemawat S (2004) MapReduce: simplied data processing on large clusters. In: In Proceedings of the 6th symposium on operating systems design and implementation (OSDI), pp 137–150
8.
Zurück zum Zitat Song M, Rajasekaran S (2006) A transaction mapping algorithm for frequent itemsets mining. in. IEEE Trans Knowl Data Eng 18(4):472–481CrossRef Song M, Rajasekaran S (2006) A transaction mapping algorithm for frequent itemsets mining. in. IEEE Trans Knowl Data Eng 18(4):472–481CrossRef
Metadaten
Titel
Using MapReduce Framework for Mining Association Rules
verfasst von
Shih-Ying Chen
Jia-Hong Li
Ke-Chung Lin
Hung-Ming Chen
Tung-Shou Chen
Copyright-Jahr
2013
Verlag
Springer Netherlands
DOI
https://doi.org/10.1007/978-94-007-6996-0_76

Neuer Inhalt