Skip to main content
Erschienen in: Theory of Computing Systems 3/2020

05.04.2019

On Approximating the Stationary Distribution of Time-Reversible Markov Chains

verfasst von: Marco Bressan, Enoch Peserico, Luca Pretto

Erschienen in: Theory of Computing Systems | Ausgabe 3/2020

Einloggen

Aktivieren Sie unsere intelligente Suche, um passende Fachinhalte oder Patente zu finden.

search-config
loading …

Abstract

Approximating the stationary probability of a state in a Markov chain through Markov chain Monte Carlo techniques is, in general, inefficient. Standard random walk approaches require \(\tilde {O}(\tau /\pi (v))\) operations to approximate the probability π(v) of a state v in a chain with mixing time τ, and even the best available techniques still have complexity \(\tilde {O}(\tau ^{1.5}/\pi (v)^{0.5})\); and since these complexities depend inversely on π(v), they can grow beyond any bound in the size of the chain or in its mixing time. In this paper we show that, for time-reversible Markov chains, there exists a simple randomized approximation algorithm that breaks this “small-π(v) barrier”.

Sie haben noch keine Lizenz? Dann Informieren Sie sich jetzt über unsere Produkte:

Springer Professional "Wirtschaft+Technik"

Online-Abonnement

Mit Springer Professional "Wirtschaft+Technik" erhalten Sie Zugriff auf:

  • über 102.000 Bücher
  • über 537 Zeitschriften

aus folgenden Fachgebieten:

  • Automobil + Motoren
  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Elektrotechnik + Elektronik
  • Energie + Nachhaltigkeit
  • Finance + Banking
  • Management + Führung
  • Marketing + Vertrieb
  • Maschinenbau + Werkstoffe
  • Versicherung + Risiko

Jetzt Wissensvorsprung sichern!

Springer Professional "Wirtschaft"

Online-Abonnement

Mit Springer Professional "Wirtschaft" erhalten Sie Zugriff auf:

  • über 67.000 Bücher
  • über 340 Zeitschriften

aus folgenden Fachgebieten:

  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Finance + Banking
  • Management + Führung
  • Marketing + Vertrieb
  • Versicherung + Risiko




Jetzt Wissensvorsprung sichern!

Springer Professional "Technik"

Online-Abonnement

Mit Springer Professional "Technik" erhalten Sie Zugriff auf:

  • über 67.000 Bücher
  • über 390 Zeitschriften

aus folgenden Fachgebieten:

  • Automobil + Motoren
  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Elektrotechnik + Elektronik
  • Energie + Nachhaltigkeit
  • Maschinenbau + Werkstoffe




 

Jetzt Wissensvorsprung sichern!

Literatur
1.
Zurück zum Zitat Alon, N., Gurel-Gurevich, O., Lubetzky, E.: Choice-memory tradeoff in allocations. Ann. Appl. Probab. 20(4), 1470–1511 (2010)MathSciNetCrossRef Alon, N., Gurel-Gurevich, O., Lubetzky, E.: Choice-memory tradeoff in allocations. Ann. Appl. Probab. 20(4), 1470–1511 (2010)MathSciNetCrossRef
2.
Zurück zum Zitat Auger, A., Doerr, B. (eds.): Theory of Randomized Search Heuristics: Foundations and Recent Developments, vol. 1. World Scientific Publishing Co., Inc, Singapore (2011) Auger, A., Doerr, B. (eds.): Theory of Randomized Search Heuristics: Foundations and Recent Developments, vol. 1. World Scientific Publishing Co., Inc, Singapore (2011)
3.
Zurück zum Zitat Banerjee, S., Lofgren, P.: Fast Bidirectional Probability Estimation in Markov Models. In: Proceedings Of NIPS, pp. 1423–1431 (2015) Banerjee, S., Lofgren, P.: Fast Bidirectional Probability Estimation in Markov Models. In: Proceedings Of NIPS, pp. 1423–1431 (2015)
4.
Zurück zum Zitat Bonacich, P., Lloyd, P.: Eigenvector-like measures of centrality for asymmetric relations. Soc. Netw. 23(3), 191–201 (2001)CrossRef Bonacich, P., Lloyd, P.: Eigenvector-like measures of centrality for asymmetric relations. Soc. Netw. 23(3), 191–201 (2001)CrossRef
5.
Zurück zum Zitat Borgs, C., Brautbar, M., Chayes, J. T., Teng, S.: Multiscale matrix sampling and sublinear-time PageRank computation. Internet Math. 10(1-2), 20–48 (2014)MathSciNetCrossRef Borgs, C., Brautbar, M., Chayes, J. T., Teng, S.: Multiscale matrix sampling and sublinear-time PageRank computation. Internet Math. 10(1-2), 20–48 (2014)MathSciNetCrossRef
6.
Zurück zum Zitat Borgs, C., Brautbar, M., Chayes, J. T., Teng, S. H.: A Sublinear Time Algorithm for PageRank Computations. In: Proceedings Of WAW, pp. 41–53. Springer (2012) Borgs, C., Brautbar, M., Chayes, J. T., Teng, S. H.: A Sublinear Time Algorithm for PageRank Computations. In: Proceedings Of WAW, pp. 41–53. Springer (2012)
7.
Zurück zum Zitat Bressan, M., Peserico, E., Pretto, L.: Brief Announcement: On Approximating PageRank Locally with Sublinear Query Complexity. In: Proceedings Of ACM SPAA, pp. 87–89 (2018) Bressan, M., Peserico, E., Pretto, L.: Brief Announcement: On Approximating PageRank Locally with Sublinear Query Complexity. In: Proceedings Of ACM SPAA, pp. 87–89 (2018)
8.
Zurück zum Zitat Bressan, M., Peserico, E., Pretto, L.: Sublinear Algorithms for Local Graph Centrality Estimation. In: Proceedings Of IEEE FOCS, pp. 709–718 (2018) Bressan, M., Peserico, E., Pretto, L.: Sublinear Algorithms for Local Graph Centrality Estimation. In: Proceedings Of IEEE FOCS, pp. 709–718 (2018)
9.
Zurück zum Zitat Chung, K. M., Lam, H., Liu, Z., Mitzenmacher, M.: Chernoff-Hoeffding Bounds for Markov Chains: Generalized and Simplified. In: Proceedings Of STACS, pp. 124–135 (2012) Chung, K. M., Lam, H., Liu, Z., Mitzenmacher, M.: Chernoff-Hoeffding Bounds for Markov Chains: Generalized and Simplified. In: Proceedings Of STACS, pp. 124–135 (2012)
11.
Zurück zum Zitat Golub, G. H., Van Loan, C. F.: Matrix Computations. Johns Hopkins University Press, Baltimore (2012)MATH Golub, G. H., Van Loan, C. F.: Matrix Computations. Johns Hopkins University Press, Baltimore (2012)MATH
12.
Zurück zum Zitat Hastings, W. K.: Monte Carlo sampling methods using Markov chains and their applications. Biometrika 57(1), 97–109 (1970)MathSciNetCrossRef Hastings, W. K.: Monte Carlo sampling methods using Markov chains and their applications. Biometrika 57(1), 97–109 (1970)MathSciNetCrossRef
13.
Zurück zum Zitat Lee, C. E., Ozdaglar, A., Shah, D.: Computing the Stationary Distribution, Locally. In: Proceedings Of NIPS, pp. 1376–1384 (2013) Lee, C. E., Ozdaglar, A., Shah, D.: Computing the Stationary Distribution, Locally. In: Proceedings Of NIPS, pp. 1376–1384 (2013)
14.
Zurück zum Zitat Lee, C. E., Ozdaglar, A. E., Shah, D.: Solving systems of linear equations: Locally and asynchronously. arXiv:1411.2647 (2014) Lee, C. E., Ozdaglar, A. E., Shah, D.: Solving systems of linear equations: Locally and asynchronously. arXiv:1411.​2647 (2014)
15.
Zurück zum Zitat Levin, D. A., Peres, Y., Wilmer, E. L.: Markov Chains and Mixing Times. American Mathematical Society (2009) Levin, D. A., Peres, Y., Wilmer, E. L.: Markov Chains and Mixing Times. American Mathematical Society (2009)
16.
Zurück zum Zitat Lofgren, P., Banerjee, S., Goel, A.: Bidirectional PageRank Estimation: from Average-Case to Worst-Case. In: Proceedings Of WAW, pp. 164–176 (2015) Lofgren, P., Banerjee, S., Goel, A.: Bidirectional PageRank Estimation: from Average-Case to Worst-Case. In: Proceedings Of WAW, pp. 164–176 (2015)
17.
Zurück zum Zitat Lofgren, P. A., Banerjee, S., Goel, A., Seshadhri, C.: FAST-PPR: Scaling Personalized PageRank Estimation for Large Graphs. In: Proceedings Of ACM KDD, pp. 1436–1445 (2014) Lofgren, P. A., Banerjee, S., Goel, A., Seshadhri, C.: FAST-PPR: Scaling Personalized PageRank Estimation for Large Graphs. In: Proceedings Of ACM KDD, pp. 1436–1445 (2014)
18.
Zurück zum Zitat Motwani, R., Panigrahy, R., Xu, Y.: Estimating Sum by Weighted Sampling. In: Proceedings Of ICALP, pp. 53–64 (2007) Motwani, R., Panigrahy, R., Xu, Y.: Estimating Sum by Weighted Sampling. In: Proceedings Of ICALP, pp. 53–64 (2007)
19.
Zurück zum Zitat Motwani, R., Raghavan, P.: Randomized Algorithms. Cambridge University Press, Cambridge (1995)CrossRef Motwani, R., Raghavan, P.: Randomized Algorithms. Cambridge University Press, Cambridge (1995)CrossRef
20.
Zurück zum Zitat Panconesi, A., Srinivasan, A.: Randomized distributed edge coloring via an extension of the Chernoff–Hoeffding bounds. SIAM J. Comput. 26(2), 350–368 (1997)MathSciNetCrossRef Panconesi, A., Srinivasan, A.: Randomized distributed edge coloring via an extension of the Chernoff–Hoeffding bounds. SIAM J. Comput. 26(2), 350–368 (1997)MathSciNetCrossRef
21.
22.
Zurück zum Zitat Shyamkumar, N., Banerjee, S., Lofgren, P.: Sublinear Estimation of a Single Element in Sparse Linear Systems. In: 2016 Annual Allerton Conference on Communication, Control, and Computing (Allerton), pp. 856–860 (2016) Shyamkumar, N., Banerjee, S., Lofgren, P.: Sublinear Estimation of a Single Element in Sparse Linear Systems. In: 2016 Annual Allerton Conference on Communication, Control, and Computing (Allerton), pp. 856–860 (2016)
Metadaten
Titel
On Approximating the Stationary Distribution of Time-Reversible Markov Chains
verfasst von
Marco Bressan
Enoch Peserico
Luca Pretto
Publikationsdatum
05.04.2019
Verlag
Springer US
Erschienen in
Theory of Computing Systems / Ausgabe 3/2020
Print ISSN: 1432-4350
Elektronische ISSN: 1433-0490
DOI
https://doi.org/10.1007/s00224-019-09921-3

Weitere Artikel der Ausgabe 3/2020

Theory of Computing Systems 3/2020 Zur Ausgabe

Premium Partner