Resumen de Convergencia de las cadenas de markov.

Juan Carlos Bedoya, Mauricio Barrera Rebellón

• español

  Este documento contiene la teoría para demostrar la convergencia de las Cadenas de Markov, basado en conceptos básicos y especializados del Álgebra Lineal.

  También se introduce el concepto de la transformación Z como herramienta para resolver las ecuaciones de Chapman-Kolmogorov, y finalmente se muestra una pequeña aplicación de esta teoría.

  Dado que gran parte de la literatura sólo se enfoca en las aplicaciones de esta teoría, este artículo se hace importante pues permite inferir cuando estos procesos estocásticos alcanzan o no convergencia la cual no es fácilmente entendible con las técnicas suaves usadas en la mayoría de la literatura.

• English

  This paper contains the theory necessary to demonstrate the Markovs Chains convergence, based on basics and specialized concepts about Linear Algebra. Also the Z transform concept is introduced as a tool to solve the Chapman-Kolmogorov�s equations, and finally is showed a little application of this theory.

  Since most of the books which deal with this theory are only focused on applications, this paper becomes important because it allows to understand when Markov Chains reaches or not the convergence which is not easily understandable in most of the reference about stochastic process.