Articulo de referencia

Proceso de Markov determinista por partes

En teoría de la probabilidad , un proceso de Markov determinista por partes ( PDMP ) es un proceso cuyo comportamiento está regido por saltos aleatorios en determinados instante...

En teoría de la probabilidad , un proceso de Markov determinista por partes ( PDMP ) es un proceso cuyo comportamiento está regido por saltos aleatorios en determinados instantes de tiempo, pero cuya evolución está regida de forma determinista por una ecuación diferencial ordinaria entre esos instantes. La clase de modelos es lo suficientemente amplia como para incluir como casos especiales prácticamente todos los modelos de probabilidad aplicada que no se basan en la difusión . [ 1 ] El proceso se define mediante tres cantidades: el flujo, la tasa de saltos y la medida de transición. [ 2 ]

El modelo fue presentado por primera vez en un artículo de Mark HA Davis en 1984. [ 1 ]

Ejemplos

Los modelos lineales por partes, como las cadenas de Markov , las cadenas de Markov de tiempo continuo , la cola M/G/1 , la cola GI/G/1 y la cola de fluidos , pueden encapsularse como PDMP con ecuaciones diferenciales simples. [ 1 ]

Aplicaciones

Se ha demostrado que los PDMP son útiles en la teoría de la ruina , [ 3 ] la teoría de colas , [ 4 ] [ 5 ] para modelar procesos bioquímicos como la replicación del ADN en eucariotas y la producción de subtilina por el organismo B. subtilis , [ 6 ] y para modelar terremotos . [ 7 ] Además, se ha demostrado que esta clase de procesos es apropiada para modelos neuronales biofísicos con canales iónicos estocásticos. [ 8 ]

Propiedades

Löpker y Palmowski han demostrado las condiciones bajo las cuales un PDMP con inversión temporal es un PDMP. [ 9 ] Se conocen las condiciones generales para que los PDMP sean estables. [ 10 ]

Galtier et al. [ 11 ] estudiaron la ley de las trayectorias de PDMP y proporcionaron una medida de referencia para expresar la densidad de una trayectoria de PDMP. Su trabajo abre el camino a cualquier aplicación que utilice densidades de trayectoria. (Por ejemplo, utilizaron la densidad de trayectorias para realizar un muestreo de importancia ; este trabajo fue desarrollado posteriormente por Chennetier et al. [ 12 ] para estimar la fiabilidad de sistemas industriales).

Véase también

  • Difusión de saltos , una generalización de los procesos de Markov deterministas por partes.
  • Sistema híbrido (en el contexto de los sistemas dinámicos ), una amplia clase de sistemas dinámicos que incluye todas las difusiones con saltos (y por lo tanto todos los procesos de Markov deterministas por partes).

Referencias

  1. 1 2 3 Davis, MHA (1984). "Procesos de Markov deterministas por partes: una clase general de modelos estocásticos sin difusión". Journal of the Royal Statistical Society. Serie B (Metodológica) . 46 (3): 353– 388. doi : 10.1111/j.2517-6161.1984.tb01308.x . JSTOR 2345677 . 
  2. Costa, OLV; Dufour, F. (2010). "Control continuo promedio de procesos de Markov deterministas por partes". SIAM Journal on Control and Optimization . 48 (7): 4262. arXiv : 0809.0477 . doi : 10.1137/080718541 . S2CID 14257280 . 
  3. Embrechts, P.; Schmidli, H. (1994). "Estimación de la ruina para un modelo de riesgo de seguros generales". Advances in Applied Probability . 26 (2): 404– 422. doi : 10.2307/1427443 . JSTOR 1427443 . S2CID 124108500 .  
  4. Browne, Sid; Sigman, Karl (1992). "Colas moduladas por trabajo con aplicaciones a procesos de almacenamiento". Journal of Applied Probability . 29 (3): 699– 712. doi : 10.2307/3214906 . JSTOR 3214906 . S2CID 122273001 .  
  5. Boxma, O. ; Kaspi, H. ; Kella, O.; Perry, D. (2005). "Sistemas de almacenamiento de encendido/apagado con tasas de entrada, salida y conmutación dependientes del estado". Probabilidad en las ciencias de la ingeniería y la información . 19 : 1– 14. CiteSeerX 10.1.1.556.6718 . doi : 10.1017/S0269964805050011 . S2CID 24065678 .  
  6. Cassandras, Christos G.; Lygeros, John (2007). «Capítulo 9. Modelado híbrido estocástico de procesos bioquímicos» (PDF) . Sistemas híbridos estocásticos . CRC Press. ISBN 9780849390838.
  7. Ogata, Y.; Vere-Jones, D. (1984). "Inferencia para modelos de terremotos: un modelo autocorrectivo" . Stochastic Processes and Their Applications . 17 (2): 337. doi : 10.1016/0304-4149(84)90009-7 .
  8. Pakdaman, K.; Thieullen, M.; Wainrib, G. (septiembre de 2010). "Teoremas límite fluidos para sistemas híbridos estocásticos con aplicación a modelos neuronales" . Advances in Applied Probability . 42 (3): 761– 794. arXiv : 1001.2474 . doi : 10.1239/aap/1282924062 . S2CID 18894661 . 
  9. Löpker, A.; Palmowski, Z. (2013). "Sobre la inversión temporal de procesos de Markov deterministas por partes". Electronic Journal of Probability . 18 . arXiv : 1110.3813 . doi : 10.1214/EJP.v18-1958 . S2CID 1453859 . 
  10. Costa, OLV; Dufour, F. (2008). "Estabilidad y ergodicidad de procesos de Markov deterministas por partes" (PDF) . SIAM Journal on Control and Optimization . 47 (2): 1053. doi : 10.1137/060670109 .
  11. Galtier, T. (2019). "Sobre el proceso de importancia óptimo para el proceso de Markov determinista por partes" . Esaim: Ps . 23 : 893–921 . doi : 10.1051/ps/2019015 . S2CID 198467101 . 
  12. Chennetier, G. (2022). "Muestreo de importancia adaptativo basado en análisis de árbol de fallas para procesos de Markov deterministas por partes". arXiv : 2210.16185 [ stat.CO ].