Skip to main content
Top
Published in:
Cover of the book

2012 | OriginalPaper | Chapter

1. Markov Chains

Author : Richard Durrett

Published in: Essentials of Stochastic Processes

Publisher: Springer New York

Activate our intelligent search to find suitable subject content or patents.

search-config
loading …

Abstract

The importance of Markov chains comes from two facts: (i) there are a large number of physical, biological, economic, and social phenomena that can be modeled in this way, and (ii) there is a well-developed theory that allows us to do computations. We begin with a famous example, then describe the property that is the defining feature of Markov chains

Dont have a licence yet? Then find out more about our products and how to get one now:

Springer Professional "Wirtschaft+Technik"

Online-Abonnement

Mit Springer Professional "Wirtschaft+Technik" erhalten Sie Zugriff auf:

  • über 102.000 Bücher
  • über 537 Zeitschriften

aus folgenden Fachgebieten:

  • Automobil + Motoren
  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Elektrotechnik + Elektronik
  • Energie + Nachhaltigkeit
  • Finance + Banking
  • Management + Führung
  • Marketing + Vertrieb
  • Maschinenbau + Werkstoffe
  • Versicherung + Risiko

Jetzt Wissensvorsprung sichern!

Springer Professional "Technik"

Online-Abonnement

Mit Springer Professional "Technik" erhalten Sie Zugriff auf:

  • über 67.000 Bücher
  • über 390 Zeitschriften

aus folgenden Fachgebieten:

  • Automobil + Motoren
  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Elektrotechnik + Elektronik
  • Energie + Nachhaltigkeit
  • Maschinenbau + Werkstoffe




 

Jetzt Wissensvorsprung sichern!

Springer Professional "Wirtschaft"

Online-Abonnement

Mit Springer Professional "Wirtschaft" erhalten Sie Zugriff auf:

  • über 67.000 Bücher
  • über 340 Zeitschriften

aus folgenden Fachgebieten:

  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Finance + Banking
  • Management + Führung
  • Marketing + Vertrieb
  • Versicherung + Risiko




Jetzt Wissensvorsprung sichern!

Literature
2.
go back to reference Geman S, Geman D (1984) Stochastic relaxation, gibbs distributions and the bayesian restoration ofimages. IEEE Trans Pattern Anal Mach Intell 6:721–741CrossRefMATH Geman S, Geman D (1984) Stochastic relaxation, gibbs distributions and the bayesian restoration ofimages. IEEE Trans Pattern Anal Mach Intell 6:721–741CrossRefMATH
3.
go back to reference Gliovich T, Vallone R, Tversky A (1985) The hot hand in basketball: on the misperception of random sequences. Cogn Psychol 17:295–314CrossRef Gliovich T, Vallone R, Tversky A (1985) The hot hand in basketball: on the misperception of random sequences. Cogn Psychol 17:295–314CrossRef
4.
go back to reference Hammersley JM, D C Handscomb DC (1984) Monte Carlo methods. Chapman and Hall, London Hammersley JM, D C Handscomb DC (1984) Monte Carlo methods. Chapman and Hall, London
6.
go back to reference Kesten H, Stigum B (1966) A limit theorem for multi-dimensional galton-watson processes. Ann Math Stat 37:1211–1223CrossRefMATH Kesten H, Stigum B (1966) A limit theorem for multi-dimensional galton-watson processes. Ann Math Stat 37:1211–1223CrossRefMATH
8.
go back to reference Metropolis N, Rosenbluth A, Rosenbluth M, Teller A, Teller E (1953) Equation of state computation by fast computing machines. J Chem Phys 21:1087–1092CrossRef Metropolis N, Rosenbluth A, Rosenbluth M, Teller A, Teller E (1953) Equation of state computation by fast computing machines. J Chem Phys 21:1087–1092CrossRef
Metadata
Title
Markov Chains
Author
Richard Durrett
Copyright Year
2012
Publisher
Springer New York
DOI
https://doi.org/10.1007/978-1-4614-3615-7_1

Premium Partner