Markov Chains Competing for Transitions: Application to Large-Scale Distributed Systems
Résumé
We consider the behavior of a stochastic system composed of several identically distributed, but non independent, discrete-time absorbing Markov chains competing at each instant for a transition. The competition consists in determining at each instant, using a given probability distribution, the only Markov chain allowed to make a transition. We analyze the first time at which one of the Markov chains reaches its absorbing state. We obtain its distribution and its expectation and we propose an algorithm to compute these quantities. We also exhibit the asymptotic behavior of the system when the number of Markov chains goes to infinity. Actually, this problem comes from the analysis of large-scale distributed systems and we show how our results apply to this domain.
Nous considérons un systéme stochastique composé de plusieurs chaînes de Markov à temps discret, absorbantes, identiques mais non indépendantes, et en compétition à chaque instant pour une transition. La compétition consiste à déterminer à chaque instant la seule chaîne de Markov autorisée à faire une transition. On analyse le premier instant auquel une des chaînes de Markov est absorbée. On obtient sa distribution et sa moyenne et l'on propose un algorithme pour calculer ces quantités. On exhibe de plus le comportement asympotique du système quand le nombre de chaînes de Markov tend vers l'infini. En fait, ce problème vient de l'analyse des systèmes distribués grande échelle et l'on montre comment nos résultats s'appliquent à ce domaine.
Origine : Fichiers produits par l'(les) auteur(s)