Skip to main content
main-content

Tipp

Weitere Artikel dieser Ausgabe durch Wischen aufrufen

01.04.2014 | Ausgabe 3/2014

Wireless Networks 3/2014

Self-organized femtocells: a Fuzzy Q-Learning approach

Zeitschrift:
Wireless Networks > Ausgabe 3/2014
Autoren:
Ana Galindo-Serrano, Lorenza Giupponi

Abstract

We introduce in this paper the innovative concept of self-organized femtocells for future generation broadband cellular networks. Since the home is the basic unit at which femtocells will be located, their deployment will be massive and their number and position unknown to the operator. This requires femtocells to be autonomous and self-organized, and able to work without human intervention. We propose self-organization to be implemented through Reinforcement Learning (RL) and femtocells to make transmission decisions as a multiagent system, with the objective of maximizing the system capacity and not generating additional interference to the traditional macrocell network. In particular, we manage the femto-to-macro aggregated interference, in realistic wireless settings, by means of Q-Learning (QL) techniques, which allow the femtocells to learn online and distributively the most appropriate resource allocation policy by continuous interactions with the environment. However, QL is based on discrete representation of state and action spaces, which makes the proposed approach not independent of the environment and designer criterion, since it requires a significant human intervention in the definition of the state and action spaces. As a result, we propose to optimize the self-organization capabilities of the proposed scheme by combining QL with the Fuzzy Inference System theory. We then propose a Fuzzy Q-Learning approach which allows avoiding the subjectivity of the QL design with continuous state and action representation, besides improving performance and convergence capabilities. We evaluate simulation results in a 3rd Generation Partnership Project (3GPP) compliant scenario and we compare them to heuristic approaches. Results will show the unique ability of these RL approaches to self-adapt to the dynamics of realistic wireless scenarios. Finally, we discuss the implementability of the proposed schemes in 3GPP systems, and in terms of memory and computational requirements.

Bitte loggen Sie sich ein, um Zugang zu diesem Inhalt zu erhalten

Sie möchten Zugang zu diesem Inhalt erhalten? Dann informieren Sie sich jetzt über unsere Produkte:

Springer Professional "Wirtschaft+Technik"

Online-Abonnement

Mit Springer Professional "Wirtschaft+Technik" erhalten Sie Zugriff auf:

  • über 69.000 Bücher
  • über 500 Zeitschriften

aus folgenden Fachgebieten:

  • Automobil + Motoren
  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Elektrotechnik + Elektronik
  • Energie + Umwelt
  • Finance + Banking
  • Management + Führung
  • Marketing + Vertrieb
  • Maschinenbau + Werkstoffe
  • Versicherung + Risiko

Testen Sie jetzt 30 Tage kostenlos.

Springer Professional "Technik"

Online-Abonnement

Mit Springer Professional "Technik" erhalten Sie Zugriff auf:

  • über 50.000 Bücher
  • über 380 Zeitschriften

aus folgenden Fachgebieten:

  • Automobil + Motoren
  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Elektrotechnik + Elektronik
  • Energie + Umwelt
  • Maschinenbau + Werkstoffe




Testen Sie jetzt 30 Tage kostenlos.

Springer Professional "Wirtschaft"

Online-Abonnement

Mit Springer Professional "Wirtschaft" erhalten Sie Zugriff auf:

  • über 58.000 Bücher
  • über 300 Zeitschriften

aus folgenden Fachgebieten:

  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Finance + Banking
  • Management + Führung
  • Marketing + Vertrieb
  • Versicherung + Risiko




Testen Sie jetzt 30 Tage kostenlos.

Literatur
Über diesen Artikel

Weitere Artikel der Ausgabe 3/2014

Wireless Networks 3/2014 Zur Ausgabe