En teoría de probabilidad , una matriz de tasa de transición (también conocida como matriz Q , [1] matriz de intensidad , [2] o matriz generadora infinitesimal [3] ) es una matriz de números que describe la tasa instantánea a la que una cadena de Markov de tiempo continuo realiza la transición entre estados.
En una matriz de velocidad de transición (a veces escrita [4] ), el elemento (para ) denota la velocidad de salida y llegada del estado . Las velocidades , y los elementos diagonales se definen de manera que
- ,
y por lo tanto las filas de la matriz suman cero.
Hasta un signo global, una amplia clase de ejemplos de tales matrices la proporciona el laplaciano de un grafo dirigido y ponderado . Los vértices del grafo corresponden a los estados de la cadena de Markov.
Propiedades
La matriz de tasa de transición tiene las siguientes propiedades: [5]
- Hay al menos un vector propio con un valor propio que se desvanece, exactamente uno si el gráfico de está fuertemente conexo.
- Todos los demás valores propios cumplen .
- Todos los vectores propios con un valor propio distinto de cero cumplen .
- La matriz de tasa de transición satisface la relación donde P(t) es la matriz estocástica continua .
Ejemplo
Una cola M/M/1 , un modelo que cuenta la cantidad de trabajos en un sistema de colas con llegadas a una tasa λ y servicios a una tasa μ, tiene una matriz de tasa de transición
Véase también
Referencias
- ^ Suhov y Kelbert 2008, Definición 2.1.1.
- ^ Asmussen, SR (2003). "Procesos de salto de Markov". Probabilidad aplicada y colas . Modelado estocástico y probabilidad aplicada. Vol. 51. págs. 39-59 . doi :10.1007/0-387-21525-5_2. ISBN 978-0-387-00211-8.
- ^ Trivedi, KS; Kulkarni, VG (1993). "FSPNs: redes de Petri estocásticas fluidas". Aplicación y teoría de las redes de Petri 1993. Apuntes de clase en informática. Vol. 691. pág. 24. doi :10.1007/3-540-56863-8_38. ISBN 978-3-540-56863-6.
- ^ Rubino, Gerardo; Sericola, Bruno (1989). "Tiempos de permanencia en procesos finitos de Markov" (PDF) . Journal of Applied Probability . 26 (4). Applied Probability Trust: 744– 756. doi :10.2307/3214379. JSTOR 3214379. S2CID 54623773.
- ^ Keizer, Joel (1972-11-01). "Sobre las soluciones y los estados estacionarios de una ecuación maestra". Journal of Statistical Physics . 6 (2): 67– 72. Bibcode :1972JSP.....6...67K. doi :10.1007/BF01023679. ISSN 1572-9613. S2CID 120377514.
- Norris, JR (1997). Cadenas de Markov . doi :10.1017/CBO9780511810633.005. ISBN 9780511810633.
- Suhov, Yuri; Kelbert, Mark (2008). Cadenas de Markov: una introducción a los procesos aleatorios y sus aplicaciones . Cambridge University Press.
- Syski, R. (1992). Tiempos de paso para cadenas de Markov. IOS Press. ISBN 90-5199-060-X.