Articulo de referencia

Filtro de partículas

Los filtros de partículas , también conocidos como métodos secuenciales de Monte Carlo , son un conjunto de algoritmos de Monte Carlo utilizados para encontrar soluciones aproxi...

Los filtros de partículas , también conocidos como métodos secuenciales de Monte Carlo , son un conjunto de algoritmos de Monte Carlo utilizados para encontrar soluciones aproximadas a problemas de filtrado para sistemas de espacio de estados no lineales, como el procesamiento de señales y la inferencia estadística bayesiana . [ 1 ] El problema de filtrado consiste en estimar los estados internos en sistemas dinámicos cuando se realizan observaciones parciales y existen perturbaciones aleatorias tanto en los sensores como en el sistema dinámico. El objetivo es calcular las distribuciones posteriores de los estados de un proceso de Markov , dadas las observaciones parciales y con ruido. El término "filtros de partículas" fue acuñado por primera vez en 1996 por Pierre Del Moral en relación con los métodos de partículas interactuantes de campo medio utilizados en mecánica de fluidos desde principios de la década de 1960. [ 2 ] El término "Monte Carlo secuencial" fue acuñado por Jun S. Liu y Rong Chen en 1998. [ 3 ]

El filtrado de partículas utiliza un conjunto de partículas (también llamadas muestras) para representar la distribución posterior de un proceso estocástico a partir de observaciones ruidosas o parciales. El modelo de espacio de estados puede ser no lineal y las distribuciones iniciales de estado y ruido pueden adoptar cualquier forma requerida. Las técnicas de filtrado de partículas proporcionan una metodología bien establecida [ 2 ] [ 4 ] [ 5 ] para generar muestras a partir de la distribución requerida sin necesidad de hacer suposiciones sobre el modelo de espacio de estados o las distribuciones de estado. Sin embargo, estos métodos no funcionan bien cuando se aplican a sistemas de muy alta dimensionalidad.

Los filtros de partículas actualizan su predicción de forma aproximada (estadística). Las muestras de la distribución están representadas por un conjunto de partículas; a cada partícula se le asigna un peso de probabilidad que representa la probabilidad de que esa partícula sea muestreada de la función de densidad de probabilidad . La disparidad de pesos que lleva al colapso de pesos es un problema común que se encuentra en estos algoritmos de filtrado. Sin embargo, se puede mitigar incluyendo un paso de remuestreo antes de que los pesos se vuelvan desiguales. Se pueden utilizar varios criterios de remuestreo adaptativo, incluyendo la varianza de los pesos y la entropía relativa con respecto a la distribución uniforme. [ 6 ] En el paso de remuestreo, las partículas con pesos insignificantes se reemplazan por nuevas partículas en la proximidad de las partículas con pesos más altos.

Desde el punto de vista estadístico y probabilístico, los filtros de partículas pueden interpretarse como interpretaciones de partículas de campo medio de las medidas de probabilidad de Feynman-Kac . [ 7 ] [ 8 ] [ 9 ] [ 10 ] [ 11 ] Estas técnicas de integración de partículas fueron desarrolladas en química molecular y física computacional por Theodore E. Harris y Herman Kahn en 1951, Marshall N. Rosenbluth y Arianna W. Rosenbluth en 1955, [ 12 ] y más recientemente por Jack H. Hetherington en 1984. [ 13 ] En física computacional, estos métodos de integración de partículas de trayectoria tipo Feynman-Kac también se utilizan en Monte Carlo cuántico , y más específicamente en métodos de Monte Carlo de difusión . [ 14 ] [ 15 ] [ 16 ] Los métodos de partículas interactuantes de Feynman-Kac también están fuertemente relacionados con los algoritmos genéticos de mutación-selección que se utilizan actualmente en la computación evolutiva para resolver problemas de optimización complejos.

La metodología del filtro de partículas se utiliza para resolver problemas de filtrado no lineal y de modelos ocultos de Markov (HMM) . Con la notable excepción de los modelos de observación de señales lineales-gaussianas ( filtro de Kalman ) o clases más amplias de modelos (filtro de Benes [ 17 ] ), Mireille Chaleyat-Maurel y Dominique Michel demostraron en 1984 que la secuencia de distribuciones posteriores de los estados aleatorios de una señal, dadas las observaciones (también conocido como filtro óptimo), no tiene recursión finita. [ 18 ] Varios otros métodos numéricos basados ​​en aproximaciones de cuadrícula fija, técnicas de Monte Carlo de cadena de Markov , linealización convencional, filtros de Kalman extendidos o determinación del mejor sistema lineal (en el sentido de error de costo esperado) no pueden abordar sistemas de gran escala, procesos inestables o no linealidades insuficientemente suaves.

Los filtros de partículas y las metodologías de partículas de Feynman-Kac encuentran aplicación en el procesamiento de señales e imágenes , inferencia bayesiana , aprendizaje automático , análisis de riesgos y muestreo de eventos raros , ingeniería y robótica , inteligencia artificial , bioinformática , [ 19 ] filogenética , ciencia computacional , economía y finanzas matemáticas , química molecular , física computacional , farmacocinética , riesgo cuantitativo y seguros [ 20 ] [ 21 ] y otros campos.

Historia

Algoritmos de tipo heurístico

Desde un punto de vista estadístico y probabilístico, los filtros de partículas pertenecen a la clase de algoritmos de ramificación / genéticos y metodologías de partículas interactuantes de campo medio. La interpretación de estos métodos de partículas depende de la disciplina científica. En computación evolutiva , las metodologías de partículas genéticas de campo medio se utilizan a menudo como algoritmos heurísticos y de búsqueda natural (también conocidos como metaheurísticas ). En física computacional y química molecular , se utilizan para resolver problemas de integración de trayectorias de Feynman-Kac o para calcular medidas de Boltzmann-Gibbs, autovalores máximos y estados fundamentales de operadores de Schrödinger . En biología y genética , representan la evolución de una población de individuos o genes en un entorno determinado.

Los orígenes de las técnicas computacionales evolutivas de tipo campo medio se remontan a 1950 y 1954 con el trabajo de Alan Turing sobre máquinas de aprendizaje de mutación-selección de tipo genético [ 22 ] y los artículos de Nils Aall Barricelli en el Instituto de Estudios Avanzados en Princeton, Nueva Jersey . [ 23 ] [ 24 ] El primer rastro de filtros de partículas en metodología estadística data de mediados de la década de 1950; el 'Monte Carlo del pobre', [ 25 ] que fue propuesto por John Hammersley et al., en 1954, contenía indicios de los métodos de filtrado de partículas de tipo genético que se utilizan hoy en día. En 1963, Nils Aall Barricelli simuló un algoritmo de tipo genético para imitar la capacidad de los individuos para jugar un juego simple. [ 26 ] En la literatura sobre computación evolutiva , los algoritmos de selección de mutaciones de tipo genético se popularizaron gracias al trabajo fundamental de John Holland a principios de la década de 1970, en particular su libro [ 27 ] publicado en 1975.

En Biología y Genética , el genetista australiano Alex Fraser también publicó en 1957 una serie de artículos sobre la simulación genética de la selección artificial de organismos. [ 28 ] La simulación por computadora de la evolución por parte de los biólogos se hizo más común a principios de la década de 1960, y los métodos fueron descritos en libros de Fraser y Burnell (1970) [ 29 ] y Crosby (1973). [ 30 ] Las simulaciones de Fraser incluían todos los elementos esenciales de los algoritmos modernos de partículas genéticas de mutación-selección.

Desde el punto de vista matemático, la distribución condicional de los estados aleatorios de una señal, dadas algunas observaciones parciales y ruidosas, se describe mediante una probabilidad de Feynman-Kac sobre las trayectorias aleatorias de la señal ponderada por una secuencia de funciones de potencial de verosimilitud. [ 7 ] [ 8 ] Los métodos de Monte Carlo cuántico , y más específicamente los de Monte Carlo de difusión, también pueden interpretarse como una aproximación de partículas de tipo genético de campo medio de las integrales de trayectoria de Feynman-Kac. [ 7 ] [ 8 ] [ 9 ] [ 13 ] [ 14 ] [ 31 ] [ 32 ] Los orígenes de los métodos de Monte Carlo cuántico a menudo se atribuyen a Enrico Fermi y Robert Richtmyer , quienes desarrollaron en 1948 una interpretación de partículas de campo medio de las reacciones en cadena de neutrones , [ 33 ] pero el primer algoritmo de partículas de tipo heurístico y genético (también conocido como métodos de Monte Carlo remuestreados o de reconfiguración) para estimar las energías del estado fundamental de los sistemas cuánticos (en modelos de matriz reducida) se debe a Jack H. Hetherington en 1984. [ 13 ] También se pueden citar los trabajos seminales anteriores de Theodore E. Harris y Herman Kahn en física de partículas, publicados en 1951, que utilizan métodos genéticos de campo medio pero de tipo heurístico para estimar las energías de transmisión de partículas. [ 34 ] En química molecular, el uso de metodologías de partículas similares a la heurística genética (también conocidas como estrategias de poda y enriquecimiento) se remonta a 1955 con el trabajo fundamental de Marshall N. Rosenbluth y Arianna W. Rosenbluth . [ 12 ]

El uso de algoritmos de partículas genéticas en el procesamiento avanzado de señales y la inferencia bayesiana es más reciente. En enero de 1993, Genshiro Kitagawa desarrolló un "filtro de Monte Carlo", [ 35 ] una versión ligeramente modificada de este artículo apareció en 1996. [ 36 ] En abril de 1993, Neil J. Gordon et al. publicaron en su trabajo seminal [ 37 ] una aplicación de algoritmos de tipo genético en la inferencia estadística bayesiana. Los autores llamaron a su algoritmo "filtro bootstrap" y demostraron que, en comparación con otros métodos de filtrado, su algoritmo bootstrap no requiere ninguna suposición sobre ese espacio de estados o el ruido del sistema. Independientemente, los de Pierre Del Moral [ 2 ] y Himilcon Carvalho, Pierre Del Moral, André Monin y Gérard Salut [ 38 ] sobre filtros de partículas publicados a mediados de la década de 1990. Los filtros de partículas también fueron desarrollados en el procesamiento de señales a principios de 1989-1992 por P. Del Moral, JC Noyer, G. Rigal y G. Salut en el LAAS-CNRS en una serie de informes de investigación restringidos y clasificados con STCAN (Service Technique des Constructions et Armes Navales), la empresa de TI DIGILOG y el LAAS-CNRS (Laboratorio de Análisis y Arquitectura de Sistemas) sobre problemas de procesamiento de señales de RADAR/SONAR y GPS. [ 39 ] [ 40 ] [ 41 ] [ 42 ] [ 43 ] [ 44 ]

Fundamentos matemáticos

Desde 1950 hasta 1996, todas las publicaciones sobre filtros de partículas y algoritmos genéticos, incluidos los métodos de poda y remuestreo de Monte Carlo introducidos en la física computacional y la química molecular, presentan algoritmos naturales y heurísticos aplicados a diferentes situaciones sin una sola prueba de su consistencia, ni una discusión sobre el sesgo de las estimaciones y los algoritmos genealógicos y ancestrales basados ​​en árboles.

Los fundamentos matemáticos y el primer análisis riguroso de estos algoritmos de partículas se deben a Pierre Del Moral [ 2 ] [ 4 ] en 1996. El artículo [ 2 ] también incluye una demostración de las propiedades insesgadas de una aproximación de partículas de las funciones de verosimilitud y de las medidas de probabilidad condicional no normalizadas . El estimador de partículas insesgado de las funciones de verosimilitud presentado en este artículo se utiliza actualmente en la inferencia estadística bayesiana.

Dan Crisan, Jessica Gaines y Terry Lyons , [ 45 ] [ 46 ] [ 47 ] así como Pierre Del Moral y Terry Lyons, [ 48 ] crearon técnicas de partículas de tipo ramificado con varios tamaños de población hacia finales de la década de 1990. P. Del Moral, A. Guionnet y L. Miclo [ 8 ] [ 49 ] [ 50 ] hicieron más avances en este tema en 2000. Pierre Del Moral y Alice Guionnet [ 51 ] demostraron los primeros teoremas del límite central en 1999, y Pierre Del Moral y Laurent Miclo [ 8 ] los demostraron en 2000. Los primeros resultados de convergencia uniforme con respecto al parámetro de tiempo para filtros de partículas fueron desarrollados a finales de la década de 1990 por Pierre Del Moral y Alice Guionnet . [ 49 ] [ 50 ] El primer análisis riguroso de suavizadores de filtros de partículas basados ​​en árboles genealógicos se debe a P. Del Moral y L. Miclo en 2001 [ 52 ]

La teoría sobre las metodologías de partículas de Feynman-Kac y los algoritmos de filtro de partículas relacionados se desarrolló en 2000 y 2004 en los libros. [ 8 ] [ 5 ] Estos modelos probabilísticos abstractos encapsulan algoritmos de tipo genético, filtros de partículas y bootstrap, filtros de Kalman interactivos (también conocido como filtro de partículas Rao-Blackwell [ 53 ] ), técnicas de filtro de partículas de muestreo de importancia y de remuestreo, incluidas metodologías basadas en árboles genealógicos y de partículas hacia atrás para resolver problemas de filtrado y suavizado. Otras clases de metodologías de filtrado de partículas incluyen modelos basados ​​en árboles genealógicos, [ 10 ] [ 5 ] [ 54 ] modelos de partículas de Markov hacia atrás, [ 10 ] [ 55 ] modelos de partículas de campo medio adaptativos, [ 6 ] modelos de partículas de tipo isla, [ 56 ] [ 57 ] metodologías de Monte Carlo de cadena de Markov de partículas, [ 58 ] [ 59 ] muestreadores de Monte Carlo secuenciales [ 60 ] [ 61 ] [ 62 ] y métodos de computación bayesiana aproximada de Monte Carlo secuenciales [ 63 ] y Bootstrap bayesiano basado en ABC de Monte Carlo secuencial. [ 64 ]

El problema del filtrado

Objetivo

El objetivo de un filtro de partículas es estimar la densidad posterior de las variables de estado dadas las variables de observación. Este filtro está diseñado para usarse con un modelo oculto de Markov , en el que el sistema incluye variables tanto ocultas como observables. Las variables observables (proceso de observación) están vinculadas a las variables ocultas (proceso de estado) mediante una función conocida. De igual manera, se conoce la descripción probabilística del sistema dinámico que define la evolución de las variables de estado.

Un filtro de partículas genérico estima la distribución posterior de los estados ocultos utilizando el proceso de medición de la observación. Con respecto a un espacio de estados como el que se muestra a continuación:

X0X1X2X3signalY0Y1Y2Y3observation{\displaystyle {\begin{array}{cccccccccc}X_{0}&\to &X_{1}&\to &X_{2}&\to &X_{3}&\to &\cdots &{\text{signal}}\\\downarrow &&\downarrow &&\downarrow &&\downarrow &&\cdots &\\Y_{0}&&Y_{1}&&Y_{2}&&Y_{3}&&\cdots &{\text{observation}}\end{array}}}

El problema de filtrado consiste en estimar secuencialmente los valores de los estados ocultos , dados los valores del proceso de observación en cualquier paso de tiempo k .Xk{\displaystyle X_{k}}Y0,,Yk,{\displaystyle Y_{0},\cdots ,Y_{k},}

Todas las estimaciones bayesianas de se derivan de la densidad posterior . La metodología del filtro de partículas proporciona una aproximación de estas probabilidades condicionales utilizando la medida empírica asociada con un algoritmo de partículas de tipo genético. En contraste, el enfoque de Monte Carlo de cadena de Markov o muestreo de importancia modelaría la posterior completa .Xk{\displaystyle X_{k}}p(xk|y0,y1,...,yk){\displaystyle p(x_{k}|y_{0},y_{1},...,y_{k})}p(x0,x1,...,xk|y0,y1,...,yk){\displaystyle p(x_{0},x_{1},...,x_{k}|y_{0},y_{1},...,y_{k})}

El modelo de observación de señales

Los métodos de partículas a menudo asumen que las observaciones pueden modelarse de esta forma:Xk{\displaystyle X_{k}}Yk{\displaystyle Y_{k}}

  • X0,X1,{\displaystyle X_{0},X_{1},\cdots }es un proceso de Markov en (para algún ) que evoluciona según la densidad de probabilidad de transición . Este modelo también se escribe a menudo de forma sintética como Rdx{\displaystyle \mathbb {R} ^{d_{x}}}dx1{\displaystyle d_{x}\geqslant 1}p(xk|xk1){\displaystyle p(x_{k}|x_{k-1})}
    Xk|Xk1=xkp(xk|xk1){\displaystyle X_{k}|X_{k-1}=x_{k}\sim p(x_{k}|x_{k-1})}
con una densidad de probabilidad inicial .p(x0){\displaystyle p(x_{0})}
  • Las observaciones toman valores en algún espacio de estados en (para algún ) y son condicionalmente independientes siempre que se conozcan. En otras palabras, cada una solo depende de . Además, asumimos que la distribución condicional para dado es absolutamente continua, y de forma sintética tenemos Y0,Y1,{\displaystyle Y_{0},Y_{1},\cdots }Rdy{\displaystyle \mathbb {R} ^{d_{y}}}dy1{\displaystyle d_{y}\geqslant 1}X0,X1,{\displaystyle X_{0},X_{1},\cdots }Yk{\displaystyle Y_{k}}Xk{\displaystyle X_{k}}Yk{\displaystyle Y_{k}}Xk=xk{\displaystyle X_{k}=x_{k}}
    Yk|Xk=ykp(yk|xk){\displaystyle Y_{k}|X_{k}=y_{k}\sim p(y_{k}|x_{k})}

Un ejemplo de sistema con estas propiedades es:

Xk=g(Xk1)+Wk1{\displaystyle X_{k}=g(X_{k-1})+W_{k-1}}
Yk=h(Xk)+Vk{\displaystyle Y_{k}=h(X_{k})+V_{k}}

donde tanto como son secuencias mutuamente independientes con funciones de densidad de probabilidad conocidas y g y h son funciones conocidas. Estas dos ecuaciones pueden verse como ecuaciones de espacio de estados y se parecen a las ecuaciones de espacio de estados para el filtro de Kalman. Si las funciones g y h en el ejemplo anterior son lineales, y si tanto como son gaussianas , el filtro de Kalman encuentra la distribución de filtrado bayesiano exacta. De lo contrario, los métodos basados ​​en el filtro de Kalman son una aproximación de primer orden ( EKF ) o una aproximación de segundo orden ( UKF en general, pero si la distribución de probabilidad es gaussiana es posible una aproximación de tercer orden).Wk{\displaystyle W_{k}}Vk{\displaystyle V_{k}}Wk{\displaystyle W_{k}}Vk{\displaystyle V_{k}}

La suposición de que la distribución inicial y las transiciones de la cadena de Markov son continuas para la medida de Lebesgue puede relajarse. Para diseñar un filtro de partículas, basta con suponer que podemos muestrear las transiciones de la cadena de Markov y calcular la función de verosimilitud (véase, por ejemplo, la descripción de la mutación por selección genética del filtro de partículas que se presenta a continuación). La suposición de continuidad en las transiciones de Markov se utiliza únicamente para derivar, de forma informal (y bastante imprecisa), diferentes fórmulas entre las distribuciones posteriores mediante la regla de Bayes para densidades condicionales.Xk1Xk{\displaystyle X_{k-1}\to X_{k}}Xk,{\displaystyle X_{k},}xkp(yk|xk){\displaystyle x_{k}\mapsto p(y_{k}|x_{k})}Xk{\displaystyle X_{k}}

Modelos de computación bayesiana aproximada

En ciertos problemas, la distribución condicional de las observaciones, dados los estados aleatorios de la señal, puede no tener una densidad; esta última puede ser imposible o demasiado compleja de calcular. [ 19 ] En esta situación, se requiere un nivel adicional de aproximación. Una estrategia consiste en reemplazar la señal por la cadena de Markov e introducir una observación virtual de la formaXk{\displaystyle X_{k}}Xk=(Xk,Yk){\displaystyle {\mathcal {X}}_{k}=\left(X_{k},Y_{k}\right)}

Yk=Yk+ϵVkfor some parameterϵ[0,1]{\displaystyle {\mathcal {Y}}_{k}=Y_{k}+\epsilon {\mathcal {V}}_{k}\quad {\mbox{for some parameter}}\quad \epsilon \in [0,1]}

para alguna secuencia de variables aleatorias independientes con funciones de densidad de probabilidad conocidas . La idea central es observar queVk{\displaystyle {\mathcal {V}}_{k}}

Law(Xk|Y0=y0,,Yk=yk)ϵ0Law(Xk|Y0=y0,,Yk=yk){\displaystyle {\text{Law}}\left(X_{k}|{\mathcal {Y}}_{0}=y_{0},\cdots ,{\mathcal {Y}}_{k}=y_{k}\right)\approx _{\epsilon \downarrow 0}{\text{Law}}\left(X_{k}|Y_{0}=y_{0},\cdots ,Y_{k}=y_{k}\right)}

El filtro de partículas asociado al proceso de Markov, dadas las observaciones parciales, se define en términos de partículas que evolucionan con una función de verosimilitud dada con alguna notación abusiva obvia por . Estas técnicas probabilísticas están estrechamente relacionadas con la Computación Bayesiana Aproximada (ABC). En el contexto de los filtros de partículas, estas técnicas de filtrado de partículas ABC fueron introducidas en 1998 por P. Del Moral, J. Jacod y P. Protter. [ 65 ] Fueron desarrolladas posteriormente por P. Del Moral, A. Doucet y A. Jasra. [ 66 ] [ 67 ]Xk=(Xk,Yk){\displaystyle {\mathcal {X}}_{k}=\left(X_{k},Y_{k}\right)}Y0=y0,,Yk=yk,{\displaystyle {\mathcal {Y}}_{0}=y_{0},\cdots ,{\mathcal {Y}}_{k}=y_{k},}Rdx+dy{\displaystyle \mathbb {R} ^{d_{x}+d_{y}}}p(Yk|Xk){\displaystyle p({\mathcal {Y}}_{k}|{\mathcal {X}}_{k})}

La ecuación de filtrado no lineal

La regla de Bayes para la probabilidad condicional establece:

p(x0,,xk|y0,,yk)=p(y0,,yk|x0,,xk)p(x0,,xk)p(y0,,yk){\displaystyle p(x_{0},\cdots ,x_{k}|y_{0},\cdots ,y_{k})={\frac {p(y_{0},\cdots ,y_{k}|x_{0},\cdots ,x_{k})p(x_{0},\cdots ,x_{k})}{p(y_{0},\cdots ,y_{k})}}}

dónde

p(y0,,yk)=p(y0,,yk|x0,,xk)p(x0,,xk)dx0dxkp(y0,,yk|x0,,xk)=l=0kp(yl|xl)p(x0,,xk)=p0(x0)l=1kp(xl|xl1){\displaystyle {\begin{aligned}p(y_{0},\cdots ,y_{k})&=\int p(y_{0},\cdots ,y_{k}|x_{0},\cdots ,x_{k})p(x_{0},\cdots ,x_{k})dx_{0}\cdots dx_{k}\\p(y_{0},\cdots ,y_{k}|x_{0},\cdots ,x_{k})&=\prod _{l=0}^{k}p(y_{l}|x_{l})\\p(x_{0},\cdots ,x_{k})&=p_{0}(x_{0})\prod _{l=1}^{k}p(x_{l}|x_{l-1})\end{aligned}}}

Los filtros de partículas también son una aproximación, pero con suficientes partículas pueden ser mucho más precisos. [ 2 ] [ 4 ] [ 5 ] [ 49 ] [ 50 ] La ecuación de filtrado no lineal viene dada por la recursión

con la convención para k = 0. El problema de filtrado no lineal consiste en calcular estas distribuciones condicionales secuencialmente.p(x0|y0,,yk1)=p(x0){\displaystyle p(x_{0}|y_{0},\cdots ,y_{k-1})=p(x_{0})}

Formulación de Feynman-Kac

Fijamos un horizonte temporal n y una secuencia de observaciones , y para cada k = 0, ..., n establecemos:Y0=y0,,Yn=yn{\displaystyle Y_{0}=y_{0},\cdots ,Y_{n}=y_{n}}

Gk(xk)=p(yk|xk).{\displaystyle G_{k}(x_{k})=p(y_{k}|x_{k}).}

En esta notación, para cualquier función acotada F en el conjunto de trayectorias desde el origen k = 0 hasta el tiempo k = n , tenemos la fórmula de Feynman-Kac.Xk{\displaystyle X_{k}}

F(x0,,xn)p(x0,,xn|y0,,yn)dx0dxn=F(x0,,xn){k=0np(yk|xk)}p(x0,,xn)dx0dxn{k=0np(yk|xk)}p(x0,,xn)dx0dxn=E(F(X0,,Xn)k=0nGk(Xk))E(k=0nGk(Xk)){\displaystyle {\begin{aligned}\int F(x_{0},\cdots ,x_{n})p(x_{0},\cdots ,x_{n}|y_{0},\cdots ,y_{n})dx_{0}\cdots dx_{n}&={\frac {\int F(x_{0},\cdots ,x_{n})\left\{\prod \limits _{k=0}^{n}p(y_{k}|x_{k})\right\}p(x_{0},\cdots ,x_{n})dx_{0}\cdots dx_{n}}{\int \left\{\prod \limits _{k=0}^{n}p(y_{k}|x_{k})\right\}p(x_{0},\cdots ,x_{n})dx_{0}\cdots dx_{n}}}\\&={\frac {E\left(F(X_{0},\cdots ,X_{n})\prod \limits _{k=0}^{n}G_{k}(X_{k})\right)}{E\left(\prod \limits _{k=0}^{n}G_{k}(X_{k})\right)}}\end{aligned}}}

Los modelos de integración de trayectorias de Feynman-Kac surgen en diversas disciplinas científicas, incluyendo la física computacional, la biología, la teoría de la información y las ciencias de la computación. [ 8 ] [ 10 ] [ 5 ] Sus interpretaciones dependen del dominio de aplicación. Por ejemplo, si elegimos la función indicadora de algún subconjunto del espacio de estados, representan la distribución condicional de una cadena de Markov dado que permanece en un tubo determinado; es decir, tenemos:Gn(xn)=1A(xn){\displaystyle G_{n}(x_{n})=1_{A}(x_{n})}

E(F(X0,,Xn)|X0A,,XnA)=E(F(X0,,Xn)k=0nGk(Xk))E(k=0nGk(Xk)){\displaystyle E\left(F(X_{0},\cdots ,X_{n})|X_{0}\in A,\cdots ,X_{n}\in A\right)={\frac {E\left(F(X_{0},\cdots ,X_{n})\prod \limits _{k=0}^{n}G_{k}(X_{k})\right)}{E\left(\prod \limits _{k=0}^{n}G_{k}(X_{k})\right)}}}

y

P(X0A,,XnA)=E(k=0nGk(Xk)){\displaystyle P\left(X_{0}\in A,\cdots ,X_{n}\in A\right)=E\left(\prod \limits _{k=0}^{n}G_{k}(X_{k})\right)}

tan pronto como la constante de normalización sea estrictamente positiva.

Filtros de partículas

Un algoritmo de partículas de tipo genético

Inicialmente, dicho algoritmo comienza con N variables aleatorias independientes con densidad de probabilidad común . Las transiciones de selección-mutación del algoritmo genético [ 2 ] [ 4 ](ξ0i)1iN{\displaystyle \left(\xi _{0}^{i}\right)_{1\leqslant i\leqslant N}}p(x0){\displaystyle p(x_{0})}

ξk:=(ξki)1iNselectionξ^k:=(ξ^ki)1iNmutationξk+1:=(ξk+1i)1iN{\displaystyle \xi _{k}:=\left(\xi _{k}^{i}\right)_{1\leqslant i\leqslant N}{\stackrel {\text{selection}}{\longrightarrow }}{\widehat {\xi }}_{k}:=\left({\widehat {\xi }}_{k}^{i}\right)_{1\leqslant i\leqslant N}{\stackrel {\text{mutation}}{\longrightarrow }}\xi _{k+1}:=\left(\xi _{k+1}^{i}\right)_{1\leqslant i\leqslant N}}

imitar/aproximar las transiciones de actualización-predicción de la evolución del filtro óptimo ( Ec. 1 ):

  • Durante la transición de selección-actualización, muestreamos N variables aleatorias (condicionalmente) independientes con una distribución común (condicional).ξ^k:=(ξ^ki)1iN{\displaystyle {\widehat {\xi }}_{k}:=\left({\widehat {\xi }}_{k}^{i}\right)_{1\leqslant i\leqslant N}}
i=1Np(yk|ξki)j=1Np(yk|ξkj)δξki(dxk){\displaystyle \sum _{i=1}^{N}{\frac {p(y_{k}|\xi _{k}^{i})}{\sum _{j=1}^{N}p(y_{k}|\xi _{k}^{j})}}\delta _{\xi _{k}^{i}}(dx_{k})}

donde representa la medida de Dirac en un estado dado a.δa{\displaystyle \delta _{a}}

  • Durante la transición de predicción de mutación, de cada partícula seleccionada muestreamos independientemente una transiciónξ^ki{\displaystyle {\widehat {\xi }}_{k}^{i}}
ξ^kiξk+1ip(xk+1|ξ^ki),i=1,,N.{\displaystyle {\widehat {\xi }}_{k}^{i}\longrightarrow \xi _{k+1}^{i}\sim p(x_{k+1}|{\widehat {\xi }}_{k}^{i}),\qquad i=1,\cdots ,N.}

En las fórmulas mostradas anteriormente, representa la función de verosimilitud evaluada en , y representa la densidad condicional evaluada en .p(yk|ξki){\displaystyle p(y_{k}|\xi _{k}^{i})}xkp(yk|xk){\displaystyle x_{k}\mapsto p(y_{k}|x_{k})}xk=ξki{\displaystyle x_{k}=\xi _{k}^{i}}p(xk+1|ξ^ki){\displaystyle p(x_{k+1}|{\widehat {\xi }}_{k}^{i})}p(xk+1|xk){\displaystyle p(x_{k+1}|x_{k})}xk=ξ^ki{\displaystyle x_{k}={\widehat {\xi }}_{k}^{i}}

En cada instante k , tenemos las aproximaciones de partículas

p^(dxk|y0,,yk):=1Ni=1Nδξ^ki(dxk)Np(dxk|y0,,yk)Ni=1Np(yk|ξki)i=1Np(yk|ξkj)δξki(dxk){\displaystyle {\widehat {p}}(dx_{k}|y_{0},\cdots ,y_{k}):={\frac {1}{N}}\sum _{i=1}^{N}\delta _{{\widehat {\xi }}_{k}^{i}}(dx_{k})\approx _{N\uparrow \infty }p(dx_{k}|y_{0},\cdots ,y_{k})\approx _{N\uparrow \infty }\sum _{i=1}^{N}{\frac {p(y_{k}|\xi _{k}^{i})}{\sum _{i=1}^{N}p(y_{k}|\xi _{k}^{j})}}\delta _{\xi _{k}^{i}}(dx_{k})}

y

p^(dxk|y0,,yk1):=1Ni=1Nδξki(dxk)Np(dxk|y0,,yk1){\displaystyle {\widehat {p}}(dx_{k}|y_{0},\cdots ,y_{k-1}):={\frac {1}{N}}\sum _{i=1}^{N}\delta _{\xi _{k}^{i}}(dx_{k})\approx _{N\uparrow \infty }p(dx_{k}|y_{0},\cdots ,y_{k-1})}

En la comunidad de algoritmos genéticos y computación evolutiva , la cadena de Markov de mutación-selección descrita anteriormente se conoce comúnmente como algoritmo genético con selección proporcional. En los artículos también se han propuesto varias variantes de ramificación, incluyendo aquellas con tamaños de población aleatorios. [ 5 ] [ 45 ] [ 48 ]

Los métodos de partículas, al igual que todos los enfoques basados ​​en muestreo (por ejemplo, el método de Monte Carlo de cadenas de Markov ), generan un conjunto de muestras que aproximan la densidad de filtrado.

p(xk|y0,,yk).{\displaystyle p(x_{k}|y_{0},\cdots ,y_{k}).}

Por ejemplo, podemos tener N muestras de la distribución posterior aproximada de , donde las muestras están etiquetadas con superíndices como:Xk{\displaystyle X_{k}}

ξ^k1,,ξ^kN.{\displaystyle {\widehat {\xi }}_{k}^{1},\cdots ,{\widehat {\xi }}_{k}^{N}.}

Luego, las expectativas con respecto a la distribución de filtrado se aproximan mediante

con

p^(dxk|y0,,yk)=1Ni=1Nδξ^ki(dxk){\displaystyle {\widehat {p}}(dx_{k}|y_{0},\cdots ,y_{k})={\frac {1}{N}}\sum _{i=1}^{N}\delta _{{\widehat {\xi }}_{k}^{i}}(dx_{k})}

donde representa la medida de Dirac en un estado dado a. La función f , de la forma habitual para Monte Carlo, puede dar todos los momentos, etc., de la distribución hasta cierto error de aproximación. Cuando la ecuación de aproximación ( Ec. 2 ) se satisface para cualquier función acotada f, escribimosδa{\displaystyle \delta _{a}}

p(dxk|y0,,yk):=p(xk|y0,,yk)dxkNp^(dxk|y0,,yk)=1Ni=1Nδξ^ki(dxk){\displaystyle p(dx_{k}|y_{0},\cdots ,y_{k}):=p(x_{k}|y_{0},\cdots ,y_{k})dx_{k}\approx _{N\uparrow \infty }{\widehat {p}}(dx_{k}|y_{0},\cdots ,y_{k})={\frac {1}{N}}\sum _{i=1}^{N}\delta _{{\widehat {\xi }}_{k}^{i}}(dx_{k})}

Los filtros de partículas pueden interpretarse como un algoritmo de partículas de tipo genético que evoluciona con transiciones de mutación y selección. Podemos realizar un seguimiento de las líneas ancestrales.

(ξ^0,ki,ξ^1,ki,,ξ^k1,ki,ξ^k,ki){\displaystyle \left({\widehat {\xi }}_{0,k}^{i},{\widehat {\xi }}_{1,k}^{i},\cdots ,{\widehat {\xi }}_{k-1,k}^{i},{\widehat {\xi }}_{k,k}^{i}\right)}

de las partículas . Los estados aleatorios , con los índices inferiores l=0,...,k, representan al ancestro del individuo en el nivel l=0,...,k. En esta situación, tenemos la fórmula de aproximación.i=1,,N{\displaystyle i=1,\cdots ,N}ξ^l,ki{\displaystyle {\widehat {\xi }}_{l,k}^{i}}ξ^k,ki=ξ^ki{\displaystyle {\widehat {\xi }}_{k,k}^{i}={\widehat {\xi }}_{k}^{i}}

con la medida empírica

p^(d(x0,,xk)|y0,,yk):=1Ni=1Nδ(ξ^0,ki,ξ^1,ki,,ξ^k,ki)(d(x0,,xk)){\displaystyle {\widehat {p}}(d(x_{0},\cdots ,x_{k})|y_{0},\cdots ,y_{k}):={\frac {1}{N}}\sum _{i=1}^{N}\delta _{\left({\widehat {\xi }}_{0,k}^{i},{\widehat {\xi }}_{1,k}^{i},\cdots ,{\widehat {\xi }}_{k,k}^{i}\right)}(d(x_{0},\cdots ,x_{k}))}

Aquí F representa cualquier función fundada en el espacio de trayectorias de la señal. En una forma más sintética ( Ec. 3 ) es equivalente a

p(d(x0,,xk)|y0,,yk):=p(x0,,xk|y0,,yk)dx0dxkNp^(d(x0,,xk)|y0,,yk):=1Ni=1Nδ(ξ^0,ki,,ξ^k,ki)(d(x0,,xk)){\displaystyle {\begin{aligned}p(d(x_{0},\cdots ,x_{k})|y_{0},\cdots ,y_{k})&:=p(x_{0},\cdots ,x_{k}|y_{0},\cdots ,y_{k})\,dx_{0}\cdots dx_{k}\\&\approx _{N\uparrow \infty }{\widehat {p}}(d(x_{0},\cdots ,x_{k})|y_{0},\cdots ,y_{k})\\&:={\frac {1}{N}}\sum _{i=1}^{N}\delta _{\left({\widehat {\xi }}_{0,k}^{i},\cdots ,{\widehat {\xi }}_{k,k}^{i}\right)}(d(x_{0},\cdots ,x_{k}))\end{aligned}}}

Los filtros de partículas pueden interpretarse de diversas maneras. Desde el punto de vista probabilístico, coinciden con una interpretación de partículas de campo medio de la ecuación de filtrado no lineal. Las transiciones de actualización-predicción de la evolución del filtro óptimo también pueden interpretarse como las transiciones clásicas de selección-mutación de tipo genético de los individuos. La técnica de remuestreo de importancia secuencial proporciona otra interpretación de las transiciones de filtrado, acoplando el muestreo de importancia con el paso de remuestreo bootstrap. Por último, pero no menos importante, los filtros de partículas pueden considerarse una metodología de aceptación-rechazo equipada con un mecanismo de reciclaje. [ 10 ] [ 5 ]

El principio general de probabilidad

La evolución del filtrado no lineal puede interpretarse como un sistema dinámico en el conjunto de medidas de probabilidad de la forma donde representa alguna función del conjunto de distribuciones de probabilidad en sí misma. Por ejemplo, la evolución del predictor óptimo de un pasoηn+1=Φn+1(ηn){\displaystyle \eta _{n+1}=\Phi _{n+1}\left(\eta _{n}\right)}Φn+1{\displaystyle \Phi _{n+1}}ηn(dxn)=p(xn|y0,,yn1)dxn{\displaystyle \eta _{n}(dx_{n})=p(x_{n}|y_{0},\cdots ,y_{n-1})dx_{n}}

satisface una evolución no lineal que comienza con la distribución de probabilidad . Una de las formas más sencillas de aproximar estas medidas de probabilidad es comenzar con N variables aleatorias independientes con una distribución de probabilidad común . Supongamos que hemos definido una secuencia de N variables aleatorias tales queη0(dx0)=p(x0)dx0{\displaystyle \eta _{0}(dx_{0})=p(x_{0})dx_{0}}(ξ0i)1iN{\displaystyle \left(\xi _{0}^{i}\right)_{1\leqslant i\leqslant N}}η0(dx0)=p(x0)dx0{\displaystyle \eta _{0}(dx_{0})=p(x_{0})dx_{0}}(ξni)1iN{\displaystyle \left(\xi _{n}^{i}\right)_{1\leqslant i\leqslant N}}

1Ni=1Nδξni(dxn)Nηn(dxn){\displaystyle {\frac {1}{N}}\sum _{i=1}^{N}\delta _{\xi _{n}^{i}}(dx_{n})\approx _{N\uparrow \infty }\eta _{n}(dx_{n})}

En el siguiente paso, muestreamos N variables aleatorias (condicionalmente) independientes con ley común .ξn+1:=(ξn+1i)1iN{\displaystyle \xi _{n+1}:=\left(\xi _{n+1}^{i}\right)_{1\leqslant i\leqslant N}}

Φn+1(1Ni=1Nδξni)NΦn+1(ηn)=ηn+1{\displaystyle \Phi _{n+1}\left({\frac {1}{N}}\sum _{i=1}^{N}\delta _{\xi _{n}^{i}}\right)\approx _{N\uparrow \infty }\Phi _{n+1}\left(\eta _{n}\right)=\eta _{n+1}}

Una interpretación particulada de la ecuación de filtrado

Ilustramos este principio de partículas de campo medio en el contexto de la evolución de los predictores óptimos de un paso.

Para k = 0 utilizamos la convención .p(x0|y0,,y1):=p(x0){\displaystyle p(x_{0}|y_{0},\cdots ,y_{-1}):=p(x_{0})}

Por la ley de los grandes números, tenemos

p^(dx0)=1Ni=1Nδξ0i(dx0)Np(x0)dx0{\displaystyle {\widehat {p}}(dx_{0})={\frac {1}{N}}\sum _{i=1}^{N}\delta _{\xi _{0}^{i}}(dx_{0})\approx _{N\uparrow \infty }p(x_{0})dx_{0}}

en el sentido de que

f(x0)p^(dx0)=1Ni=1Nf(ξ0i)Nf(x0)p(dx0)dx0{\displaystyle \int f(x_{0}){\widehat {p}}(dx_{0})={\frac {1}{N}}\sum _{i=1}^{N}f(\xi _{0}^{i})\approx _{N\uparrow \infty }\int f(x_{0})p(dx_{0})dx_{0}}

para cualquier función acotada . Además, suponemos que hemos construido una secuencia de partículas de rango k tal quef{\displaystyle f}(ξki)1iN{\displaystyle \left(\xi _{k}^{i}\right)_{1\leqslant i\leqslant N}}

p^(dxk|y0,,yk1):=1Ni=1Nδξki(dxk)N p(xk | y0,,yk1)dxk{\displaystyle {\widehat {p}}(dx_{k}|y_{0},\cdots ,y_{k-1}):={\frac {1}{N}}\sum _{i=1}^{N}\delta _{\xi _{k}^{i}}(dx_{k})\approx _{N\uparrow \infty }~p(x_{k}~|~y_{0},\cdots ,y_{k-1})dx_{k}}

en el sentido de que para cualquier función acotada tenemosf{\displaystyle f}

f(xk)p^(dxk|y0,,yk1)=1Ni=1Nf(ξki)Nf(xk)p(dxk|y0,,yk1)dxk{\displaystyle \int f(x_{k}){\widehat {p}}(dx_{k}|y_{0},\cdots ,y_{k-1})={\frac {1}{N}}\sum _{i=1}^{N}f(\xi _{k}^{i})\approx _{N\uparrow \infty }\int f(x_{k})p(dx_{k}|y_{0},\cdots ,y_{k-1})dx_{k}}

En esta situación, al reemplazar por la medida empírica en la ecuación de evolución del filtro óptimo de un paso establecido en ( Ec. 4 ), encontramos quep(xk|y0,,yk1)dxk{\displaystyle p(x_{k}|y_{0},\cdots ,y_{k-1})dx_{k}}p^(dxk|y0,,yk1){\displaystyle {\widehat {p}}(dx_{k}|y_{0},\cdots ,y_{k-1})}

p(xk+1|y0,,yk)Np(xk+1|xk)p(yk|xk)p^(dxk|y0,,yk1)p(yk|xk)p^(dxk|y0,,yk1){\displaystyle p(x_{k+1}|y_{0},\cdots ,y_{k})\approx _{N\uparrow \infty }\int p(x_{k+1}|x'_{k}){\frac {p(y_{k}|x_{k}'){\widehat {p}}(dx'_{k}|y_{0},\cdots ,y_{k-1})}{\int p(y_{k}|x''_{k}){\widehat {p}}(dx''_{k}|y_{0},\cdots ,y_{k-1})}}}

Observe que el lado derecho de la fórmula anterior es una mezcla de probabilidad ponderada.

p(xk+1|xk)p(yk|xk)p^(dxk|y0,,yk1)p(yk|xk)p^(dxk|y0,,yk1)=i=1Np(yk|ξki)i=1Np(yk|ξkj)p(xk+1|ξki)=:q^(xk+1|y0,,yk){\displaystyle \int p(x_{k+1}|x'_{k}){\frac {p(y_{k}|x_{k}'){\widehat {p}}(dx'_{k}|y_{0},\cdots ,y_{k-1})}{\int p(y_{k}|x''_{k}){\widehat {p}}(dx''_{k}|y_{0},\cdots ,y_{k-1})}}=\sum _{i=1}^{N}{\frac {p(y_{k}|\xi _{k}^{i})}{\sum _{i=1}^{N}p(y_{k}|\xi _{k}^{j})}}p(x_{k+1}|\xi _{k}^{i})=:{\widehat {q}}(x_{k+1}|y_{0},\cdots ,y_{k})}

donde representa la densidad evaluada en , y representa la densidad evaluada en parap(yk|ξki){\displaystyle p(y_{k}|\xi _{k}^{i})}p(yk|xk){\displaystyle p(y_{k}|x_{k})}xk=ξki{\displaystyle x_{k}=\xi _{k}^{i}}p(xk+1|ξki){\displaystyle p(x_{k+1}|\xi _{k}^{i})}p(xk+1|xk){\displaystyle p(x_{k+1}|x_{k})}xk=ξki{\displaystyle x_{k}=\xi _{k}^{i}}i=1,,N.{\displaystyle i=1,\cdots ,N.}

Luego, tomamos una muestra de N variables aleatorias independientes con densidad de probabilidad común de modo que(ξk+1i)1iN{\displaystyle \left(\xi _{k+1}^{i}\right)_{1\leqslant i\leqslant N}}q^(xk+1|y0,,yk){\displaystyle {\widehat {q}}(x_{k+1}|y_{0},\cdots ,y_{k})}

p^(dxk+1|y0,,yk):=1Ni=1Nδξk+1i(dxk+1)Nq^(xk+1|y0,,yk)dxk+1Np(xk+1|y0,,yk)dxk+1{\displaystyle {\widehat {p}}(dx_{k+1}|y_{0},\cdots ,y_{k}):={\frac {1}{N}}\sum _{i=1}^{N}\delta _{\xi _{k+1}^{i}}(dx_{k+1})\approx _{N\uparrow \infty }{\widehat {q}}(x_{k+1}|y_{0},\cdots ,y_{k})dx_{k+1}\approx _{N\uparrow \infty }p(x_{k+1}|y_{0},\cdots ,y_{k})dx_{k+1}}

Al iterar este procedimiento, diseñamos una cadena de Markov tal que

p^(dxk|y0,,yk1):=1Ni=1Nδξki(dxk)Np(dxk|y0,,yk1):=p(xk|y0,,yk1)dxk{\displaystyle {\widehat {p}}(dx_{k}|y_{0},\cdots ,y_{k-1}):={\frac {1}{N}}\sum _{i=1}^{N}\delta _{\xi _{k}^{i}}(dx_{k})\approx _{N\uparrow \infty }p(dx_{k}|y_{0},\cdots ,y_{k-1}):=p(x_{k}|y_{0},\cdots ,y_{k-1})dx_{k}}

Nótese que el filtro óptimo se aproxima en cada paso de tiempo k utilizando las fórmulas de Bayes.

p(dxk|y0,,yk)Np(yk|xk)p^(dxk|y0,,yk1)p(yk|xk)p^(dxk|y0,,yk1)=i=1Np(yk|ξki)j=1Np(yk|ξkj) δξki(dxk){\displaystyle p(dx_{k}|y_{0},\cdots ,y_{k})\approx _{N\uparrow \infty }{\frac {p(y_{k}|x_{k}){\widehat {p}}(dx_{k}|y_{0},\cdots ,y_{k-1})}{\int p(y_{k}|x'_{k}){\widehat {p}}(dx'_{k}|y_{0},\cdots ,y_{k-1})}}=\sum _{i=1}^{N}{\frac {p(y_{k}|\xi _{k}^{i})}{\sum _{j=1}^{N}p(y_{k}|\xi _{k}^{j})}}~\delta _{\xi _{k}^{i}}(dx_{k})}

La terminología "aproximación de campo medio" proviene del hecho de que reemplazamos en cada paso de tiempo la medida de probabilidad por la aproximación empírica . La aproximación de partículas de campo medio del problema de filtrado dista mucho de ser única. En los libros se desarrollan varias estrategias. [ 10 ] [ 5 ]p(dxk|y0,,yk1){\displaystyle p(dx_{k}|y_{0},\cdots ,y_{k-1})}p^(dxk|y0,,yk1){\displaystyle {\widehat {p}}(dx_{k}|y_{0},\cdots ,y_{k-1})}

Algunos resultados de convergencia

El análisis de la convergencia de los filtros de partículas se inició en 1996 [ 2 ] [ 4 ] y en 2000 en el libro [ 8 ] y la serie de artículos. [ 48 ] [ 49 ] [ 50 ] [ 51 ] [ 52 ] [ 68 ] [ 69 ] Desarrollos más recientes se pueden encontrar en los libros, [ 10 ] [ 5 ] Cuando la ecuación de filtrado es estable (en el sentido de que corrige cualquier condición inicial errónea), el sesgo y la varianza de las estimaciones de partículas

Ik(f):=f(xk)p(dxk|y0,,yk1)NI^k(f):=f(xk)p^(dxk|y0,,yk1){\displaystyle I_{k}(f):=\int f(x_{k})p(dx_{k}|y_{0},\cdots ,y_{k-1})\approx _{N\uparrow \infty }{\widehat {I}}_{k}(f):=\int f(x_{k}){\widehat {p}}(dx_{k}|y_{0},\cdots ,y_{k-1})}

están controlados por las estimaciones uniformes no asintóticas

supk0|E(I^k(f))Ik(f)|c1N{\displaystyle \sup _{k\geqslant 0}\left\vert E\left({\widehat {I}}_{k}(f)\right)-I_{k}(f)\right\vert \leqslant {\frac {c_{1}}{N}}}
supk0E([I^k(f)Ik(f)]2)c2N{\displaystyle \sup _{k\geqslant 0}E\left(\left[{\widehat {I}}_{k}(f)-I_{k}(f)\right]^{2}\right)\leqslant {\frac {c_{2}}{N}}}

para cualquier función f acotada por 1, y para algunas constantes finitas Además, para cualquier :c1,c2.{\displaystyle c_{1},c_{2}.}x0{\displaystyle x\geqslant 0}

P(|I^k(f)Ik(f)|c1xN+c2xNsup0kn|I^k(f)Ik(f)|cxlog(n)N)>1ex{\displaystyle \mathbf {P} \left(\left|{\widehat {I}}_{k}(f)-I_{k}(f)\right|\leqslant c_{1}{\frac {x}{N}}+c_{2}{\sqrt {\frac {x}{N}}}\land \sup _{0\leqslant k\leqslant n}\left|{\widehat {I}}_{k}(f)-I_{k}(f)\right|\leqslant c{\sqrt {\frac {x\log(n)}{N}}}\right)>1-e^{-x}}

para algunas constantes finitas relacionadas con el sesgo asintótico y la varianza de la estimación de partículas, y alguna constante finita c . Se obtienen los mismos resultados si reemplazamos el predictor óptimo de un paso por la aproximación del filtro óptimo.c1,c2{\displaystyle c_{1},c_{2}}

Árboles genealógicos y propiedades de imparcialidad

Suavizado de partículas basado en árboles genealógicos

Rastreando los linajes ancestrales a lo largo del tiempo

(ξ^0,ki,ξ^1,ki,,ξ^k1,ki,ξ^k,ki),(ξ0,ki,ξ1,ki,,ξk1,ki,ξk,ki){\displaystyle \left({\widehat {\xi }}_{0,k}^{i},{\widehat {\xi }}_{1,k}^{i},\cdots ,{\widehat {\xi }}_{k-1,k}^{i},{\widehat {\xi }}_{k,k}^{i}\right),\quad \left(\xi _{0,k}^{i},\xi _{1,k}^{i},\cdots ,\xi _{k-1,k}^{i},\xi _{k,k}^{i}\right)}

de los individuos y en cada paso de tiempo k , también tenemos las aproximaciones de partículasξ^ki(=ξ^k,ki){\displaystyle {\widehat {\xi }}_{k}^{i}\left(={\widehat {\xi }}_{k,k}^{i}\right)}ξki(=ξk,ki){\displaystyle \xi _{k}^{i}\left(={\xi }_{k,k}^{i}\right)}

p^(d(x0,,xk)|y0,,yk):=1Ni=1Nδ(ξ^0,ki,,ξ^0,ki)(d(x0,,xk))Np(d(x0,,xk)|y0,,yk)Ni=1Np(yk|ξk,ki)j=1Np(yk|ξk,kj)δ(ξ0,ki,,ξ0,ki)(d(x0,,xk)) p^(d(x0,,xk)|y0,,yk1):=1Ni=1Nδ(ξ0,ki,,ξk,ki)(d(x0,,xk))Np(d(x0,,xk)|y0,,yk1):=p(x0,,xk|y0,,yk1)dx0,,dxk{\displaystyle {\begin{aligned}{\widehat {p}}(d(x_{0},\cdots ,x_{k})|y_{0},\cdots ,y_{k})&:={\frac {1}{N}}\sum _{i=1}^{N}\delta _{\left({\widehat {\xi }}_{0,k}^{i},\cdots ,{\widehat {\xi }}_{0,k}^{i}\right)}(d(x_{0},\cdots ,x_{k}))\\&\approx _{N\uparrow \infty }p(d(x_{0},\cdots ,x_{k})|y_{0},\cdots ,y_{k})\\&\approx _{N\uparrow \infty }\sum _{i=1}^{N}{\frac {p(y_{k}|\xi _{k,k}^{i})}{\sum _{j=1}^{N}p(y_{k}|\xi _{k,k}^{j})}}\delta _{\left(\xi _{0,k}^{i},\cdots ,\xi _{0,k}^{i}\right)}(d(x_{0},\cdots ,x_{k}))\\&\ \\{\widehat {p}}(d(x_{0},\cdots ,x_{k})|y_{0},\cdots ,y_{k-1})&:={\frac {1}{N}}\sum _{i=1}^{N}\delta _{\left(\xi _{0,k}^{i},\cdots ,\xi _{k,k}^{i}\right)}(d(x_{0},\cdots ,x_{k}))\\&\approx _{N\uparrow \infty }p(d(x_{0},\cdots ,x_{k})|y_{0},\cdots ,y_{k-1})\\&:=p(x_{0},\cdots ,x_{k}|y_{0},\cdots ,y_{k-1})dx_{0},\cdots ,dx_{k}\end{aligned}}}

Estas aproximaciones empíricas son equivalentes a las aproximaciones de la integral de partículas.

F(x0,,xn)p^(d(x0,,xk)|y0,,yk):=1Ni=1NF(ξ^0,ki,,ξ^0,ki)NF(x0,,xn)p(d(x0,,xk)|y0,,yk)Ni=1Np(yk|ξk,ki)j=1Np(yk|ξk,kj)F(ξ0,ki,,ξk,ki) F(x0,,xn)p^(d(x0,,xk)|y0,,yk1):=1Ni=1NF(ξ0,ki,,ξk,ki)NF(x0,,xn)p(d(x0,,xk)|y0,,yk1){\displaystyle {\begin{aligned}\int F(x_{0},\cdots ,x_{n}){\widehat {p}}(d(x_{0},\cdots ,x_{k})|y_{0},\cdots ,y_{k})&:={\frac {1}{N}}\sum _{i=1}^{N}F\left({\widehat {\xi }}_{0,k}^{i},\cdots ,{\widehat {\xi }}_{0,k}^{i}\right)\\&\approx _{N\uparrow \infty }\int F(x_{0},\cdots ,x_{n})p(d(x_{0},\cdots ,x_{k})|y_{0},\cdots ,y_{k})\\&\approx _{N\uparrow \infty }\sum _{i=1}^{N}{\frac {p(y_{k}|\xi _{k,k}^{i})}{\sum _{j=1}^{N}p(y_{k}|\xi _{k,k}^{j})}}F\left(\xi _{0,k}^{i},\cdots ,\xi _{k,k}^{i}\right)\\&\ \\\int F(x_{0},\cdots ,x_{n}){\widehat {p}}(d(x_{0},\cdots ,x_{k})|y_{0},\cdots ,y_{k-1})&:={\frac {1}{N}}\sum _{i=1}^{N}F\left(\xi _{0,k}^{i},\cdots ,\xi _{k,k}^{i}\right)\\&\approx _{N\uparrow \infty }\int F(x_{0},\cdots ,x_{n})p(d(x_{0},\cdots ,x_{k})|y_{0},\cdots ,y_{k-1})\end{aligned}}}

para cualquier función acotada F en las trayectorias aleatorias de la señal. Como se muestra en [ 54 ], la evolución del árbol genealógico coincide con una interpretación de partículas de campo medio de las ecuaciones de evolución asociadas con las densidades posteriores de las trayectorias de la señal. Para más detalles sobre estos modelos de espacio de trayectorias, remitimos a los libros. [ 10 ] [ 5 ]

Estimaciones de partículas insesgadas de funciones de verosimilitud

Utilizamos la fórmula del producto.

p(y0,,yn)=k=0np(yk|y0,,yk1){\displaystyle p(y_{0},\cdots ,y_{n})=\prod _{k=0}^{n}p(y_{k}|y_{0},\cdots ,y_{k-1})}

con

p(yk|y0,,yk1)=p(yk|xk)p(dxk|y0,,yk1){\displaystyle p(y_{k}|y_{0},\cdots ,y_{k-1})=\int p(y_{k}|x_{k})p(dx_{k}|y_{0},\cdots ,y_{k-1})}

y las convenciones y para k = 0. Reemplazando por la aproximación empíricap(y0|y0,,y1)=p(y0){\displaystyle p(y_{0}|y_{0},\cdots ,y_{-1})=p(y_{0})}p(x0|y0,,y1)=p(x0),{\displaystyle p(x_{0}|y_{0},\cdots ,y_{-1})=p(x_{0}),}p(xk|y0,,yk1)dxk{\displaystyle p(x_{k}|y_{0},\cdots ,y_{k-1})dx_{k}}

p^(dxk|y0,,yk1):=1Ni=1Nδξki(dxk)Np(dxk|y0,,yk1){\displaystyle {\widehat {p}}(dx_{k}|y_{0},\cdots ,y_{k-1}):={\frac {1}{N}}\sum _{i=1}^{N}\delta _{\xi _{k}^{i}}(dx_{k})\approx _{N\uparrow \infty }p(dx_{k}|y_{0},\cdots ,y_{k-1})}

En la fórmula mostrada anteriormente, diseñamos la siguiente aproximación de partículas insesgada de la función de verosimilitud.

p(y0,,yn)Np^(y0,,yn)=k=0np^(yk|y0,,yk1){\displaystyle p(y_{0},\cdots ,y_{n})\approx _{N\uparrow \infty }{\widehat {p}}(y_{0},\cdots ,y_{n})=\prod _{k=0}^{n}{\widehat {p}}(y_{k}|y_{0},\cdots ,y_{k-1})}

con

p^(yk|y0,,yk1)=p(yk|xk)p^(dxk|y0,,yk1)=1Ni=1Np(yk|ξki){\displaystyle {\widehat {p}}(y_{k}|y_{0},\cdots ,y_{k-1})=\int p(y_{k}|x_{k}){\widehat {p}}(dx_{k}|y_{0},\cdots ,y_{k-1})={\frac {1}{N}}\sum _{i=1}^{N}p(y_{k}|\xi _{k}^{i})}

donde representa la densidad evaluada en . El diseño de esta estimación de partículas y la propiedad de insesgadez se demostraron en 1996 en el artículo. [ 2 ] Las estimaciones de varianza refinadas se pueden encontrar en [ 5 ] y. [ 10 ]p(yk|ξki){\displaystyle p(y_{k}|\xi _{k}^{i})}p(yk|xk){\displaystyle p(y_{k}|x_{k})}xk=ξki{\displaystyle x_{k}=\xi _{k}^{i}}

Suavizadores de partículas inversos

Utilizando la regla de Bayes, tenemos la fórmula

p(x0,,xn|y0,,yn1)=p(xn|y0,,yn1)p(xn1|xn,y0,,yn1)p(x1|x2,y0,y1)p(x0|x1,y0){\displaystyle p(x_{0},\cdots ,x_{n}|y_{0},\cdots ,y_{n-1})=p(x_{n}|y_{0},\cdots ,y_{n-1})p(x_{n-1}|x_{n},y_{0},\cdots ,y_{n-1})\cdots p(x_{1}|x_{2},y_{0},y_{1})p(x_{0}|x_{1},y_{0})}

Observa que

p(xk1|xk,(y0,,yk1))p(xk|xk1)p(xk1|(y0,,yk1))p(xk1|(y0,,yk1)p(yk1|xk1)p(xk1|(y0,,yk2){\displaystyle {\begin{aligned}p(x_{k-1}|x_{k},(y_{0},\cdots ,y_{k-1}))&\propto p(x_{k}|x_{k-1})p(x_{k-1}|(y_{0},\cdots ,y_{k-1}))\\p(x_{k-1}|(y_{0},\cdots ,y_{k-1})&\propto p(y_{k-1}|x_{k-1})p(x_{k-1}|(y_{0},\cdots ,y_{k-2})\end{aligned}}}

Esto implica que

p(xk1|xk,(y0,,yk1))=p(yk1|xk1)p(xk|xk1)p(xk1|y0,,yk2)p(yk1|xk1)p(xk|xk1)p(xk1|y0,,yk2)dxk1{\displaystyle p(x_{k-1}|x_{k},(y_{0},\cdots ,y_{k-1}))={\frac {p(y_{k-1}|x_{k-1})p(x_{k}|x_{k-1})p(x_{k-1}|y_{0},\cdots ,y_{k-2})}{\int p(y_{k-1}|x'_{k-1})p(x_{k}|x'_{k-1})p(x'_{k-1}|y_{0},\cdots ,y_{k-2})dx'_{k-1}}}}

Sustituir los predictores óptimos de un paso por las medidas empíricas de partículas.p(xk1|(y0,,yk2))dxk1{\displaystyle p(x_{k-1}|(y_{0},\cdots ,y_{k-2}))dx_{k-1}}

p^(dxk1|(y0,,yk2))=1Ni=1Nδξk1i(dxk1)(Np(dxk1|(y0,,yk2)):=p(xk1|(y0,,yk2))dxk1){\displaystyle {\widehat {p}}(dx_{k-1}|(y_{0},\cdots ,y_{k-2}))={\frac {1}{N}}\sum _{i=1}^{N}\delta _{\xi _{k-1}^{i}}(dx_{k-1})\left(\approx _{N\uparrow \infty }p(dx_{k-1}|(y_{0},\cdots ,y_{k-2})):={p}(x_{k-1}|(y_{0},\cdots ,y_{k-2}))dx_{k-1}\right)}

encontramos que

p(dxk1|xk,(y0,,yk1))Np^(dxk1|xk,(y0,,yk1)):=p(yk1|xk1)p(xk|xk1)p^(dxk1|y0,,yk2)p(yk1|xk1) p(xk|xk1)p^(dxk1|y0,,yk2)=i=1Np(yk1|ξk1i)p(xk|ξk1i)j=1Np(yk1|ξk1j)p(xk|ξk1j)δξk1i(dxk1){\displaystyle {\begin{aligned}p(dx_{k-1}|x_{k},(y_{0},\cdots ,y_{k-1}))&\approx _{N\uparrow \infty }{\widehat {p}}(dx_{k-1}|x_{k},(y_{0},\cdots ,y_{k-1}))\\&:={\frac {p(y_{k-1}|x_{k-1})p(x_{k}|x_{k-1}){\widehat {p}}(dx_{k-1}|y_{0},\cdots ,y_{k-2})}{\int p(y_{k-1}|x'_{k-1})~p(x_{k}|x'_{k-1}){\widehat {p}}(dx'_{k-1}|y_{0},\cdots ,y_{k-2})}}\\&=\sum _{i=1}^{N}{\frac {p(y_{k-1}|\xi _{k-1}^{i})p(x_{k}|\xi _{k-1}^{i})}{\sum _{j=1}^{N}p(y_{k-1}|\xi _{k-1}^{j})p(x_{k}|\xi _{k-1}^{j})}}\delta _{\xi _{k-1}^{i}}(dx_{k-1})\end{aligned}}}

Concluimos que

p(d(x0,,xn)|(y0,,yn1))Np^backward(d(x0,,xn)|(y0,,yn1)){\displaystyle p(d(x_{0},\cdots ,x_{n})|(y_{0},\cdots ,y_{n-1}))\approx _{N\uparrow \infty }{\widehat {p}}_{backward}(d(x_{0},\cdots ,x_{n})|(y_{0},\cdots ,y_{n-1}))}

con la aproximación de partículas hacia atrás

p^backward(d(x0,,xn)|(y0,,yn1))=p^(dxn|(y0,,yn1))p^(dxn1|xn,(y0,,yn1))p^(dx1|x2,(y0,y1))p^(dx0|x1,y0){\displaystyle {\begin{aligned}{\widehat {p}}_{backward}(d(x_{0},\cdots ,x_{n})|(y_{0},\cdots ,y_{n-1}))={\widehat {p}}(dx_{n}|(y_{0},\cdots ,y_{n-1})){\widehat {p}}(dx_{n-1}|x_{n},(y_{0},\cdots ,y_{n-1}))\cdots {\widehat {p}}(dx_{1}|x_{2},(y_{0},y_{1})){\widehat {p}}(dx_{0}|x_{1},y_{0})\end{aligned}}}

La medida de probabilidad

p^backward(d(x0,,xn)|(y0,,yn1)){\displaystyle {\widehat {p}}_{backward}(d(x_{0},\cdots ,x_{n})|(y_{0},\cdots ,y_{n-1}))}

es la probabilidad de las trayectorias aleatorias de una cadena de Markov que se ejecuta hacia atrás en el tiempo desde el tiempo k=n hasta el tiempo k=0, y que evoluciona en cada paso de tiempo k en el espacio de estados asociado con la población de partículas.(Xk,n)0kn{\displaystyle \left(\mathbb {X} _{k,n}^{\flat }\right)_{0\leqslant k\leqslant n}}ξki,i=1,,N.{\displaystyle \xi _{k}^{i},i=1,\cdots ,N.}

  • Inicialmente (en el instante k=n), la cadena elige aleatoriamente un estado con la distribuciónXn,n{\displaystyle \mathbb {X} _{n,n}^{\flat }}
p^(dxn|(y0,,yn1))=1Ni=1Nδξni(dxn){\displaystyle {\widehat {p}}(dx_{n}|(y_{0},\cdots ,y_{n-1}))={\frac {1}{N}}\sum _{i=1}^{N}\delta _{\xi _{n}^{i}}(dx_{n})}
  • Desde el instante k hasta el instante (k-1), la cadena que comienza en algún estado para algún en el instante k se mueve en el instante (k-1) a un estado aleatorio elegido con la probabilidad ponderada discretaXk,n=ξki{\displaystyle \mathbb {X} _{k,n}^{\flat }=\xi _{k}^{i}}i=1,,N{\displaystyle i=1,\cdots ,N}Xk1,n{\displaystyle \mathbb {X} _{k-1,n}^{\flat }}
p^(dxk1|ξki,(y0,,yk1))=j=1Np(yk1|ξk1j)p(ξki|ξk1j)l=1Np(yk1|ξk1l)p(ξki|ξk1l) δξk1j(dxk1){\displaystyle {\widehat {p}}(dx_{k-1}|\xi _{k}^{i},(y_{0},\cdots ,y_{k-1}))=\sum _{j=1}^{N}{\frac {p(y_{k-1}|\xi _{k-1}^{j})p(\xi _{k}^{i}|\xi _{k-1}^{j})}{\sum _{l=1}^{N}p(y_{k-1}|\xi _{k-1}^{l})p(\xi _{k}^{i}|\xi _{k-1}^{l})}}~\delta _{\xi _{k-1}^{j}}(dx_{k-1})}

En la fórmula mostrada anteriormente, representa la distribución condicional evaluada en . De la misma manera, y representan las densidades condicionales y evaluadas en y . Estos modelos permiten reducir la integración con respecto a las densidades en términos de operaciones matriciales con respecto a las transiciones de Markov de la cadena descrita anteriormente. [ 55 ] Por ejemplo, para cualquier función tenemos las estimaciones de partículasp^(dxk1|ξki,(y0,,yk1)){\displaystyle {\widehat {p}}(dx_{k-1}|\xi _{k}^{i},(y_{0},\cdots ,y_{k-1}))}p^(dxk1|xk,(y0,,yk1)){\displaystyle {\widehat {p}}(dx_{k-1}|x_{k},(y_{0},\cdots ,y_{k-1}))}xk=ξki{\displaystyle x_{k}=\xi _{k}^{i}}p(yk1|ξk1j){\displaystyle p(y_{k-1}|\xi _{k-1}^{j})}p(ξki|ξk1j){\displaystyle p(\xi _{k}^{i}|\xi _{k-1}^{j})}p(yk1|xk1){\displaystyle p(y_{k-1}|x_{k-1})}p(xk|xk1){\displaystyle p(x_{k}|x_{k-1})}xk=ξki{\displaystyle x_{k}=\xi _{k}^{i}}xk1=ξk1j.{\displaystyle x_{k-1}=\xi _{k-1}^{j}.}p((x0,,xn)|(y0,,yn1)){\displaystyle p((x_{0},\cdots ,x_{n})|(y_{0},\cdots ,y_{n-1}))}fk{\displaystyle f_{k}}

p(d(x0,,xn)|(y0,,yn1))fk(xk)Np^backward(d(x0,,xn)|(y0,,yn1))fk(xk)=p^(dxn|(y0,,yn1))p^(dxn1|xn,(y0,,yn1))p^(dxk|xk+1,(y0,,yk))fk(xk)=[1N,,1N]N timesMn1Mk[fk(ξk1)fk(ξkN)]{\displaystyle {\begin{aligned}\int p(d(x_{0},\cdots ,x_{n})&|(y_{0},\cdots ,y_{n-1}))f_{k}(x_{k})\\&\approx _{N\uparrow \infty }\int {\widehat {p}}_{backward}(d(x_{0},\cdots ,x_{n})|(y_{0},\cdots ,y_{n-1}))f_{k}(x_{k})\\&=\int {\widehat {p}}(dx_{n}|(y_{0},\cdots ,y_{n-1})){\widehat {p}}(dx_{n-1}|x_{n},(y_{0},\cdots ,y_{n-1}))\cdots {\widehat {p}}(dx_{k}|x_{k+1},(y_{0},\cdots ,y_{k}))f_{k}(x_{k})\\&=\underbrace {\left[{\tfrac {1}{N}},\cdots ,{\tfrac {1}{N}}\right]} _{N{\text{ times}}}\mathbb {M} _{n-1}\cdots \mathbb {M} _{k}{\begin{bmatrix}f_{k}(\xi _{k}^{1})\\\vdots \\f_{k}(\xi _{k}^{N})\end{bmatrix}}\end{aligned}}}

dónde

Mk=(Mk(i,j))1i,jN:Mk(i,j)=p(ξki|ξk1j) p(yk1|ξk1j)l=1Np(ξki|ξk1l)p(yk1|ξk1l){\displaystyle \mathbb {M} _{k}=(\mathbb {M} _{k}(i,j))_{1\leqslant i,j\leqslant N}:\qquad \mathbb {M} _{k}(i,j)={\frac {p(\xi _{k}^{i}|\xi _{k-1}^{j})~p(y_{k-1}|\xi _{k-1}^{j})}{\sum \limits _{l=1}^{N}p(\xi _{k}^{i}|\xi _{k-1}^{l})p(y_{k-1}|\xi _{k-1}^{l})}}}

Esto también demuestra que si

F¯(x0,,xn):=1n+1k=0nfk(xk){\displaystyle {\overline {F}}(x_{0},\cdots ,x_{n}):={\frac {1}{n+1}}\sum _{k=0}^{n}f_{k}(x_{k})}

entonces

F¯(x0,,xn)p(d(x0,,xn)|(y0,,yn1))NF¯(x0,,xn)p^backward(d(x0,,xn)|(y0,,yn1))=1n+1k=0n[1N,,1N]N timesMn1Mn2Mk[fk(ξk1)fk(ξkN)]{\displaystyle {\begin{aligned}\int {\overline {F}}(x_{0},\cdots ,x_{n})p(d(x_{0},\cdots ,x_{n})|(y_{0},\cdots ,y_{n-1}))&\approx _{N\uparrow \infty }\int {\overline {F}}(x_{0},\cdots ,x_{n}){\widehat {p}}_{backward}(d(x_{0},\cdots ,x_{n})|(y_{0},\cdots ,y_{n-1}))\\&={\frac {1}{n+1}}\sum _{k=0}^{n}\underbrace {\left[{\tfrac {1}{N}},\cdots ,{\tfrac {1}{N}}\right]} _{N{\text{ times}}}\mathbb {M} _{n-1}\mathbb {M} _{n-2}\cdots \mathbb {M} _{k}{\begin{bmatrix}f_{k}(\xi _{k}^{1})\\\vdots \\f_{k}(\xi _{k}^{N})\end{bmatrix}}\end{aligned}}}

El suavizado de partículas también se puede lograr en una sola pasada en línea a través de una aproximación de retardo fijo. [ 70 ]

Algunos resultados de convergencia

Supondremos que la ecuación de filtrado es estable, en el sentido de que corrige cualquier condición inicial errónea.

En esta situación, las aproximaciones de partículas de las funciones de verosimilitud no están sesgadas y la varianza relativa está controlada por

E(p^(y0,,yn))=p(y0,,yn),E([p^(y0,,yn)p(y0,,yn)1]2)cnN,{\displaystyle E\left({\widehat {p}}(y_{0},\cdots ,y_{n})\right)=p(y_{0},\cdots ,y_{n}),\qquad E\left(\left[{\frac {{\widehat {p}}(y_{0},\cdots ,y_{n})}{p(y_{0},\cdots ,y_{n})}}-1\right]^{2}\right)\leqslant {\frac {cn}{N}},}

para alguna constante finita c . Además, para cualquier :x0{\displaystyle x\geqslant 0}

P(|1nlogp^(y0,,yn)1nlogp(y0,,yn)|c1xN+c2xN)>1ex{\displaystyle \mathbf {P} \left(\left\vert {\frac {1}{n}}\log {{\widehat {p}}(y_{0},\cdots ,y_{n})}-{\frac {1}{n}}\log {p(y_{0},\cdots ,y_{n})}\right\vert \leqslant c_{1}{\frac {x}{N}}+c_{2}{\sqrt {\frac {x}{N}}}\right)>1-e^{-x}}

para algunas constantes finitas relacionadas con el sesgo asintótico y la varianza de la estimación de partículas, y para alguna constante finita c .c1,c2{\displaystyle c_{1},c_{2}}

El sesgo y la varianza de las estimaciones de partículas basadas en las líneas ancestrales de los árboles genealógicos

Ikpath(F):=F(x0,,xk)p(d(x0,,xk)|y0,,yk1)NI^kpath(F):=F(x0,,xk)p^(d(x0,,xk)|y0,,yk1)=1Ni=1NF(ξ0,ki,,ξk,ki){\displaystyle {\begin{aligned}I_{k}^{path}(F)&:=\int F(x_{0},\cdots ,x_{k})p(d(x_{0},\cdots ,x_{k})|y_{0},\cdots ,y_{k-1})\\&\approx _{N\uparrow \infty }{\widehat {I}}_{k}^{path}(F)\\&:=\int F(x_{0},\cdots ,x_{k}){\widehat {p}}(d(x_{0},\cdots ,x_{k})|y_{0},\cdots ,y_{k-1})\\&={\frac {1}{N}}\sum _{i=1}^{N}F\left(\xi _{0,k}^{i},\cdots ,\xi _{k,k}^{i}\right)\end{aligned}}}

están controlados por las estimaciones uniformes no asintóticas

|E(I^kpath(F))Ikpath(F)|c1kN,E([I^kpath(F)Ikpath(F)]2)c2kN,{\displaystyle \left|E\left({\widehat {I}}_{k}^{path}(F)\right)-I_{k}^{path}(F)\right|\leqslant {\frac {c_{1}k}{N}},\qquad E\left(\left[{\widehat {I}}_{k}^{path}(F)-I_{k}^{path}(F)\right]^{2}\right)\leqslant {\frac {c_{2}k}{N}},}

para cualquier función F acotada por 1, y para algunas constantes finitas Además, para cualquier :c1,c2.{\displaystyle c_{1},c_{2}.}x0{\displaystyle x\geqslant 0}

P(|I^kpath(F)Ikpath(F)|c1kxN+c2kxNsup0kn|I^kpath(F)Ikpath(F)|cxnlog(n)N)>1ex{\displaystyle \mathbf {P} \left(\left|{\widehat {I}}_{k}^{path}(F)-I_{k}^{path}(F)\right|\leqslant c_{1}{\frac {kx}{N}}+c_{2}{\sqrt {\frac {kx}{N}}}\land \sup _{0\leqslant k\leqslant n}\left|{\widehat {I}}_{k}^{path}(F)-I_{k}^{path}(F)\right|\leqslant c{\sqrt {\frac {xn\log(n)}{N}}}\right)>1-e^{-x}}

para algunas constantes finitas relacionadas con el sesgo asintótico y la varianza de la estimación de partículas, y para alguna constante finita c . El mismo tipo de estimaciones de sesgo y varianza se aplican a los suavizadores de partículas hacia atrás. Para funcionales aditivos de la formac1,c2{\displaystyle c_{1},c_{2}}

F¯(x0,,xn):=1n+10knfk(xk){\displaystyle {\overline {F}}(x_{0},\cdots ,x_{n}):={\frac {1}{n+1}}\sum _{0\leqslant k\leqslant n}f_{k}(x_{k})}

con

Inpath(F¯)NIn,path(F¯):=F¯(x0,,xn)p^backward(d(x0,,xn)|(y0,,yn1)){\displaystyle I_{n}^{path}({\overline {F}})\approx _{N\uparrow \infty }I_{n}^{\flat ,path}({\overline {F}}):=\int {\overline {F}}(x_{0},\cdots ,x_{n}){\widehat {p}}_{backward}(d(x_{0},\cdots ,x_{n})|(y_{0},\cdots ,y_{n-1}))}

con funciones acotadas por 1, tenemosfk{\displaystyle f_{k}}

supn0|E(I^n,path(F¯))Inpath(F¯)|c1N{\displaystyle \sup _{n\geqslant 0}{\left\vert E\left({\widehat {I}}_{n}^{\flat ,path}({\overline {F}})\right)-I_{n}^{path}({\overline {F}})\right\vert }\leqslant {\frac {c_{1}}{N}}}

y

E([I^n,path(F)Inpath(F)]2)c2nN+c3N2{\displaystyle E\left(\left[{\widehat {I}}_{n}^{\flat ,path}(F)-I_{n}^{path}(F)\right]^{2}\right)\leqslant {\frac {c_{2}}{nN}}+{\frac {c_{3}}{N^{2}}}}

Para algunas constantes finitas, se desarrollan estimaciones más refinadas que incluyen una probabilidad de errores exponencialmente pequeña en [ 10 ] .c1,c2,c3.{\displaystyle c_{1},c_{2},c_{3}.}

Remuestreo de importancia secuencial (SIR)

Filtro de Monte Carlo y filtro bootstrap

El remuestreo de importancia secuencial (SIR) , el filtrado de Monte Carlo (Kitagawa 1993 [ 35 ] ), el algoritmo de filtrado bootstrap (Gordon et al. 1993 [ 37 ] ) y el remuestreo de distribución única (Bejuri WMYB et al. 2017 [ 71 ] ) también son algoritmos de filtrado comúnmente aplicados, que aproximan la densidad de probabilidad de filtrado mediante un conjunto ponderado de N muestras.p(xk|y0,,yk){\displaystyle p(x_{k}|y_{0},\cdots ,y_{k})}

{(wk(i),xk(i)) : i{1,,N}}.{\displaystyle \left\{\left(w_{k}^{(i)},x_{k}^{(i)}\right)\ :\ i\in \{1,\cdots ,N\}\right\}.}

Los pesos de importancia son aproximaciones a las probabilidades posteriores relativas (o densidades) de las muestras, de tal manera quewk(i){\displaystyle w_{k}^{(i)}}

i=1Nwk(i)=1.{\displaystyle \sum _{i=1}^{N}w_{k}^{(i)}=1.}

El muestreo de importancia secuencial (SIS) es una versión secuencial (es decir, recursiva) del muestreo de importancia . Al igual que en el muestreo de importancia, la esperanza de una función f se puede aproximar como un promedio ponderado.

f(xk)p(xk|y0,,yk)dxki=1Nwk(i)f(xk(i)).{\displaystyle \int f(x_{k})p(x_{k}|y_{0},\dots ,y_{k})dx_{k}\approx \sum _{i=1}^{N}w_{k}^{(i)}f(x_{k}^{(i)}).}

Para un conjunto finito de muestras, el rendimiento del algoritmo depende de la elección de la distribución de la propuesta.

π(xk|x0:k1,y0:k){\displaystyle \pi (x_{k}|x_{0:k-1},y_{0:k})\,}.

La distribución de propuestas " óptima" se da como la distribución objetivo.

π(xk|x0:k1,y0:k)=p(xk|xk1,yk)=p(yk|xk)p(yk|xk)p(xk|xk1)dxk p(xk|xk1).{\displaystyle \pi (x_{k}|x_{0:k-1},y_{0:k})=p(x_{k}|x_{k-1},y_{k})={\frac {p(y_{k}|x_{k})}{\int p(y_{k}|x_{k})p(x_{k}|x_{k-1})dx_{k}}}~p(x_{k}|x_{k-1}).}

Esta elección particular de transición de propuesta fue propuesta por P. Del Moral en 1996 y 1998. [ 4 ] Cuando es difícil muestrear transiciones de acuerdo con la distribución, una estrategia natural es utilizar la siguiente aproximación de partículas.p(xk|xk1,yk){\displaystyle p(x_{k}|x_{k-1},y_{k})}

p(yk|xk)p(yk|xk)p(xk|xk1)dxkp(xk|xk1)dxkNp(yk|xk)p(yk|xk)p^(dxk|xk1)p^(dxk|xk1)=i=1Np(yk|Xki(xk1))j=1Np(yk|Xkj(xk1))δXki(xk1)(dxk){\displaystyle {\begin{aligned}{\frac {p(y_{k}|x_{k})}{\int p(y_{k}|x_{k})p(x_{k}|x_{k-1})dx_{k}}}p(x_{k}|x_{k-1})dx_{k}&\simeq _{N\uparrow \infty }{\frac {p(y_{k}|x_{k})}{\int p(y_{k}|x_{k}){\widehat {p}}(dx_{k}|x_{k-1})}}{\widehat {p}}(dx_{k}|x_{k-1})\\&=\sum _{i=1}^{N}{\frac {p(y_{k}|X_{k}^{i}(x_{k-1}))}{\sum _{j=1}^{N}p(y_{k}|X_{k}^{j}(x_{k-1}))}}\delta _{X_{k}^{i}(x_{k-1})}(dx_{k})\end{aligned}}}

con la aproximación empírica

p^(dxk|xk1)=1Ni=1NδXki(xk1)(dxk) Np(xk|xk1)dxk{\displaystyle {\widehat {p}}(dx_{k}|x_{k-1})={\frac {1}{N}}\sum _{i=1}^{N}\delta _{X_{k}^{i}(x_{k-1})}(dx_{k})~\simeq _{N\uparrow \infty }p(x_{k}|x_{k-1})dx_{k}}

asociado con N (o cualquier otro número grande de muestras) muestras aleatorias independientes con la distribución condicional del estado aleatorio dado . La consistencia del filtro de partículas resultante de esta aproximación y otras extensiones se desarrollan en. [ 4 ] En la pantalla anterior representa la medida de Dirac en un estado dado a.Xki(xk1),i=1,,N{\displaystyle X_{k}^{i}(x_{k-1}),i=1,\cdots ,N}Xk{\displaystyle X_{k}}Xk1=xk1{\displaystyle X_{k-1}=x_{k-1}}δa{\displaystyle \delta _{a}}

Sin embargo, la distribución de probabilidad previa de transición se usa a menudo como función de importancia, ya que es más fácil extraer partículas (o muestras) y realizar cálculos posteriores de ponderación de importancia:

π(xk|x0:k1,y0:k)=p(xk|xk1).{\displaystyle \pi (x_{k}|x_{0:k-1},y_{0:k})=p(x_{k}|x_{k-1}).}

Los filtros de remuestreo de importancia secuencial (SIR) con distribución de probabilidad previa de transición como función de importancia se conocen comúnmente como filtro bootstrap y algoritmo de condensación .

El remuestreo se utiliza para evitar el problema de la degeneración del algoritmo, es decir, para evitar que todos los pesos de importancia, excepto uno, sean cercanos a cero. El rendimiento del algoritmo también puede verse afectado por la elección adecuada del método de remuestreo. El muestreo estratificado propuesto por Kitagawa (1993 [ 35 ] ) es óptimo en términos de varianza.

Un único paso de remuestreo de importancia secuencial es el siguiente:

1) Para extraer muestras de la distribución de la propuestai=1,,N{\displaystyle i=1,\cdots ,N}
xk(i)π(xk|x0:k1(i),y0:k){\displaystyle x_{k}^{(i)}\sim \pi (x_{k}|x_{0:k-1}^{(i)},y_{0:k})}
2) Para actualizar los pesos de importancia hasta una constante de normalización: i=1,,N{\displaystyle i=1,\cdots ,N}
w^k(i)=wk1(i)p(yk|xk(i))p(xk(i)|xk1(i))π(xk(i)|x0:k1(i),y0:k).{\displaystyle {\hat {w}}_{k}^{(i)}=w_{k-1}^{(i)}{\frac {p(y_{k}|x_{k}^{(i)})p(x_{k}^{(i)}|x_{k-1}^{(i)})}{\pi (x_{k}^{(i)}|x_{0:k-1}^{(i)},y_{0:k})}}.}
Tenga en cuenta que cuando utilizamos la distribución de probabilidad previa de transición como función de importancia,
π(xk(i)|x0:k1(i),y0:k)=p(xk(i)|xk1(i)),{\displaystyle \pi (x_{k}^{(i)}|x_{0:k-1}^{(i)},y_{0:k})=p(x_{k}^{(i)}|x_{k-1}^{(i)}),}
Esto se simplifica a lo siguiente  :
w^k(i)=wk1(i)p(yk|xk(i)),{\displaystyle {\hat {w}}_{k}^{(i)}=w_{k-1}^{(i)}p(y_{k}|x_{k}^{(i)}),}
3) Para calcular los pesos de importancia normalizados: i=1,,N{\displaystyle i=1,\cdots ,N}
wk(i)=w^k(i)j=1Nw^k(j){\displaystyle w_{k}^{(i)}={\frac {{\hat {w}}_{k}^{(i)}}{\sum _{j=1}^{N}{\hat {w}}_{k}^{(j)}}}}
4) Calcular una estimación del número efectivo de partículas como
N^eff=1i=1N(wk(i))2{\displaystyle {\hat {N}}_{\mathit {eff}}={\frac {1}{\sum _{i=1}^{N}\left(w_{k}^{(i)}\right)^{2}}}}
Este criterio refleja la varianza de los pesos. Otros criterios se pueden encontrar en el artículo [ 6 ] , incluyendo su análisis riguroso y teoremas del límite central.
5) Si el número efectivo de partículas es menor que un umbral determinado , entonces realice un remuestreo: N^eff<Nthr{\displaystyle {\hat {N}}_{\mathit {eff}}<N_{thr}}
a) Extraiga N partículas del conjunto de partículas actual con probabilidades proporcionales a sus pesos. Reemplace el conjunto de partículas actual con este nuevo conjunto.
b) Para el conjuntoi=1,,N{\displaystyle i=1,\cdots ,N}wk(i)=1/N.{\displaystyle w_{k}^{(i)}=1/N.}

El término "remuestreo por importancia de muestreo" también se usa a veces al referirse a los filtros SIR, pero el término remuestreo por importancia es más preciso porque la palabra "remuestreo" implica que el muestreo inicial ya se ha realizado. [ 72 ]

Muestreo de importancia secuencial (SIS)

El muestreo de importancia secuencial (SIS) es similar al algoritmo SIR, pero sin la etapa de remuestreo. Esta versión suele presentar un colapso en la ponderación de partículas, donde toda la probabilidad se concentra en una o dos partículas, y el resto de las ponderaciones corresponden a probabilidades muy pequeñas. La introducción del remuestreo mitiga este problema.

Algoritmo de "versión directa"

El algoritmo de "versión directa" es bastante simple (en comparación con otros algoritmos de filtrado de partículas) y utiliza composición y rechazo. Para generar una sola muestra x en k a partir de :pxk|y1:k(x|y1:k){\displaystyle p_{x_{k}|y_{1:k}}(x|y_{1:k})}

1) Establezca n = 0 (Esto contará el número de partículas generadas hasta el momento)
2) Elija uniformemente un índice i del rango{1,...,N}{\displaystyle \{1,...,N\}}
3) Generar una prueba a partir de la distribución conx^{\displaystyle {\hat {x}}}p(xk|xk1){\displaystyle p(x_{k}|x_{k-1})}xk1=xk1|k1(i){\displaystyle x_{k-1}=x_{k-1|k-1}^{(i)}}
4) Generar la probabilidad de usar desde donde es el valor medidoy^{\displaystyle {\hat {y}}}x^{\displaystyle {\hat {x}}}p(yk|xk), with xk=x^{\displaystyle p(y_{k}|x_{k}),~{\mbox{with}}~x_{k}={\hat {x}}}yk{\displaystyle y_{k}}
5) Generar otra u uniforme desde donde[0,mk]{\displaystyle [0,m_{k}]}mk=supxkp(yk|xk){\displaystyle m_{k}=\sup _{x_{k}}p(y_{k}|x_{k})}
6) Compara u yp(y^){\displaystyle p\left({\hat {y}}\right)}
6a) Si u es mayor, repita desde el paso 2.
6b) Si u es menor, guárdalo como e incrementa n.x^{\displaystyle {\hat {x}}}xk|k(i){\displaystyle x_{k|k}^{(i)}}
7) Si n == N, entonces salir

El objetivo es generar P "partículas" en k usando solo las partículas de . Esto requiere que se pueda escribir (y calcular) una ecuación de Markov para generar una partícula basada solo en . Este algoritmo usa la composición de las P partículas de para generar una partícula en k y repite (pasos 2-6) hasta que se generen P partículas en k .k1{\displaystyle k-1}xk{\displaystyle x_{k}}xk1{\displaystyle x_{k-1}}k1{\displaystyle k-1}

Esto se puede visualizar más fácilmente si x se considera como una matriz bidimensional. Una dimensión es k y la otra es el número de partícula. Por ejemplo, sería la i -ésima partícula en y también se puede escribir (como se hizo anteriormente en el algoritmo). El paso 3 genera un potencial basado en una partícula elegida aleatoriamente ( ) en el tiempo y lo rechaza o acepta en el paso 6. En otras palabras, los valores se generan utilizando el generado previamente .x(k,i){\displaystyle x(k,i)}k{\displaystyle k}xk(i){\displaystyle x_{k}^{(i)}}xk{\displaystyle x_{k}}xk1(i){\displaystyle x_{k-1}^{(i)}}k1{\displaystyle k-1}xk{\displaystyle x_{k}}xk1{\displaystyle x_{k-1}}

Aplicaciones

Los filtros de partículas y las metodologías de partículas de Feynman-Kac encuentran aplicación en varios contextos, como un medio eficaz para abordar observaciones ruidosas o fuertes no linealidades, tales como:

Otros filtros de partículas

Véase también

Referencias

  1. Wills, Adrian G.; Schön, Thomas B. (3 de mayo de 2023). "Monte Carlo secuencial: una revisión unificada" . Annual Review of Control, Robotics, and Autonomous Systems . 6 (1): 159– 182. doi : 10.1146/annurev-control-042920-015119 . ISSN 2573-5144 . S2CID 255638127 .  
  2. 1 2 3 4 5 6 7 8 9 10 Del Moral, Pierre (1996). "Filtrado no lineal: solución de partículas interactuantes" (PDF) . Procesos de Markov y campos relacionados . 2 (4): 555– 580.
  3. Liu, Jun S.; Chen, Rong (1998-09-01). "Métodos secuenciales de Monte Carlo para sistemas dinámicos". Journal of the American Statistical Association . 93 (443): 1032– 1044. doi : 10.1080/01621459.1998.10473765 . ISSN 0162-1459 . 
  4. ^ Del Moral , Pierre ( 1998 ) . "Medir procesos valorados y sistemas de partículas que interactúan. Aplicación a problemas de filtrado no lineal" . Anales de probabilidad aplicada . 8 (2) (Publicaciones du Laboratoire de Statistique et Probabilités, 96-15 (1996) ed.): 438– 495. doi : 10.1214/aoap/1028903535 . 
  5. 1 2 3 4 5 6 7 8 9 10 11 12 Del Moral, Pierre (2004). Fórmulas de Feynman-Kac. Aproximaciones genealógicas y de partículas interactuantes . Springer. Serie: Probabilidad y aplicaciones. pág. 556. ISBN  978-0-387-20268-6.
  6. 1 2 3 Del Moral, Pierre; Doucet, Arnaud; Jasra, Ajay (2012). "Sobre procedimientos de remuestreo adaptativo para métodos secuenciales de Monte Carlo" (PDF) . Bernoulli . 18 (1): 252– 278. doi : 10.3150/10-bej335 . S2CID 4506682 . 
  7. 1 2 3 Del Moral, Pierre (2004). Fórmulas de Feynman-Kac. Aproximaciones genealógicas y de partículas interactuantes . Probabilidad y sus aplicaciones. Springer. pág. 575. ISBN  9780387202686Serie : Probabilidad y aplicaciones
  8. 1 2 3 4 5 6 7 8 Del Moral, Pierre; Micló, Laurent (2000). "Aproximaciones de sistemas de partículas ramificadas e interactivas de fórmulas de Feynman-Kac con aplicaciones al filtrado no lineal". En Jacques Azéma; Michel Ledoux; Michel Émery; Marc Yor (eds.). Seminario de Probabilités XXXIV (PDF) . Apuntes de conferencias de matemáticas. vol. 1729. págs. 1– 145. doi : 10.1007/bfb0103798 . ISBN   978-3-540-67314-9.
  9. 1 2 Del Moral, Pierre; Miclo, Laurent (2000). "Una aproximación del sistema de partículas de Moran de las fórmulas de Feynman-Kac". Stochastic Processes and Their Applications . 86 (2): 193– 216. doi : 10.1016/S0304-4149(99)00094-0 . S2CID 122757112 . 
  10. 1 2 3 4 5 6 7 8 9 10 11 Del Moral, Pierre (2013). Simulación de campo medio para la integración de Monte Carlo . Chapman & Hall/CRC Press. pág. 626. Monografías sobre estadística y probabilidad aplicada 
  11. Moral, Piere Del; Doucet, Arnaud (2014). "Métodos de partículas: una introducción con aplicaciones" . ESAIM: Proc . 44 : 1–46 . doi : 10.1051/proc/201444001 .
  12. 1 2 Rosenbluth, Marshall, N.; Rosenbluth, Arianna, W. (1955). "Cálculos de Monte Carlo de la extensión promedio de cadenas macromoleculares" . J. Chem. Phys . 23 (2): 356– 359. Bibcode : 1955JChPh..23..356R . doi : 10.1063/1.1741967 . S2CID 89611599 . {{cite journal}}: CS1 maint: multiple names: authors list (link)
  13. 1 2 3 Hetherington, Jack, H. (1984). "Observaciones sobre la iteración estadística de matrices". Phys. Rev. A . 30 (2713): 2713– 2719. Bibcode : 1984PhRvA..30.2713H . doi : 10.1103/PhysRevA.30.2713 .{{cite journal}}: CS1 maint: multiple names: authors list (link)
  14. 1 2 Del Moral, Pierre (2003). "Aproximaciones de partículas de exponentes de Lyapunov conectados a operadores de Schrödinger y semigrupos de Feynman-Kac" . ESAIM Probability & Statistics . 7 : 171–208 . doi : 10.1051/ps:2003001 .
  15. Assaraf, Roland; Caffarel, Michel; Khelif, Anatole (2000). "Métodos de Monte Carlo de difusión con un número fijo de caminantes" (PDF) . Phys. Rev. E. 61 ( 4): 4566–4575 . Bibcode : 2000PhRvE..61.4566A . doi : 10.1103/physreve.61.4566 . PMID 11088257. Archivado del original (PDF) el 7 de noviembre de 2014. 
  16. Caffarel, Michel; Ceperley, David; Kalos, Malvin (1993). "Comentario sobre el cálculo de integrales de trayectoria de Feynman-Kac de las energías del estado fundamental de los átomos". Phys. Rev. Lett . 71 (13): 2159. Bibcode : 1993PhRvL..71.2159C . doi : 10.1103/physrevlett.71.2159 . PMID 10054598 . 
  17. Ocone, DL (1 de enero de 1999). "Estabilidad asintótica de los filtros de Beneš". Stochastic Analysis and Applications . 17 (6): 1053– 1074. doi : 10.1080/07362999908809648 . ISSN 0736-2994 . 
  18. ^ Maurel, Mireille Chaleyat; Michel, Dominique (1 de enero de 1984). "Des resultats de inexistencia de filtro de dimensión finie". Estocásticos . 13 ( 1– 2): 83– 102. doi : 10.1080/17442508408833312 . ISSN 0090-9491 . 
  19. 1 2 3 Hajiramezanali, Ehsan; Imani, Mahdi; Braga-Neto, Ulisses; Qian, Xiaoning; Dougherty, Edward R. (2019). "Clasificación bayesiana óptima escalable de trayectorias de células individuales bajo incertidumbre del modelo regulatorio" . BMC Genomics . 20 (Supl. 6): 435. arXiv : 1902.03188 . Bibcode : 2019arXiv190203188H . doi : 10.1186/ s12864-019-5720-3 . PMC 6561847. PMID 31189480 .  
  20. Cruz, Marcelo G.; Peters, Gareth W.; Shevchenko, Pavel V. (27 de febrero de 2015). Aspectos fundamentales del riesgo operacional y el análisis de seguros: Manual de riesgo operacional (1.ª ed.). Wiley. doi : 10.1002/9781118573013 . ISBN  978-1-118-11839-9.
  21. Peters, Gareth W.; Shevchenko, Pavel V. (2015-02-20). Avances en el modelado de riesgos con distribuciones de cola pesada: Manual de riesgo operacional (1.ª ed.). Wiley. doi : 10.1002/9781118909560 . ISBN  978-1-118-90953-9.
  22. Turing, Alan M. (octubre de 1950). "Máquinas de computación e inteligencia". Mind . LIX (238): 433– 460. doi : 10.1093/mind/LIX.236.433 .
  23. ^ Barricelli, Nils Aall (1954). "Ejemplos numéricos de procesos de evolución". Métodos : 45– 68.
  24. Barricelli, Nils Aall (1957). "Procesos de evolución simbiogenética realizados mediante métodos artificiales". Methodos : 143–182 .
  25. Hammersley, JM; Morton, KW (1954). "El Monte Carlo del pobre". Journal of the Royal Statistical Society. Serie B (Metodológica) . 16 (1): 23– 38. doi : 10.1111/j.2517-6161.1954.tb00145.x . JSTOR 2984008 . 
  26. Barricelli, Nils Aall (1963). "Pruebas numéricas de teorías de la evolución. Parte II. Pruebas preliminares de rendimiento, simbiogénesis y vida terrestre". Acta Biotheoretica . 16 ( 3–4 ): 99–126 . doi : 10.1007/BF01556602 . S2CID 86717105 . 
  27. "Adaptación en sistemas naturales y artificiales | The MIT Press" . mitpress.mit.edu . Consultado el 6 de junio de 2015 .
  28. Fraser, Alex (1957). "Simulación de sistemas genéticos mediante computadoras digitales automáticas. I. Introducción" . Aust. J. Biol. Sci . 10 (4): 484– 491. doi : 10.1071/BI9570484 .
  29. Fraser, Alex ; Burnell, Donald (1970). Computer Models in Genetics . Nueva York: McGraw-Hill. ISBN 978-0-07-021904-5.
  30. Crosby, Jack L. (1973). Simulación por ordenador en genética . Londres: John Wiley & Sons. ISBN 978-0-471-18880-3.
  31. Assaraf, Roland; Caffarel, Michel; Khelif, Anatole (2000). "Métodos de Monte Carlo de difusión con un número fijo de caminantes" (PDF) . Phys. Rev. E. 61 ( 4): 4566–4575 . Bibcode : 2000PhRvE..61.4566A . doi : 10.1103/physreve.61.4566 . PMID 11088257. Archivado del original (PDF) el 7 de noviembre de 2014. 
  32. Caffarel, Michel; Ceperley, David; Kalos, Malvin (1993). "Comentario sobre el cálculo de integrales de trayectoria de Feynman-Kac de las energías del estado fundamental de los átomos". Phys. Rev. Lett . 71 (13): 2159. Bibcode : 1993PhRvL..71.2159C . doi : 10.1103/physrevlett.71.2159 . PMID 10054598 . 
  33. Fermi, Enrique; Richtmyer, Robert, D. (1948). "Nota sobre la toma de censos en cálculos de Monte Carlo" (PDF) . LAM . 805 (A). Informe desclasificado del Archivo de Los Alamos.{{cite journal}}: CS1 maint: multiple names: authors list (link)
  34. Herman, Kahn; Harris, Theodore, E. (1951). "Estimación de la transmisión de partículas mediante muestreo aleatorio" (PDF) . Natl. Bur. Stand. Appl. Math. Ser . 12 : 27–30 .{{cite journal}}: CS1 maint: multiple names: authors list (link)
  35. 1 2 3 Kitagawa, G. (enero de 1993). "Un método de filtrado y suavizado de Monte Carlo para modelos de espacio de estados no lineales no gaussianos" (PDF) . Actas del 2.º Seminario Conjunto EE. UU.-Japón sobre Análisis Estadístico de Series Temporales : 110–131 .
  36. Kitagawa, G. (1996). "Filtro y suavizador de Monte Carlo para modelos de espacio de estados no lineales no gaussianos". Journal of Computational and Graphical Statistics . 5 (1): 1– 25. doi : 10.2307/1390750 . JSTOR 1390750 . 
  37. 1 2 Gordon, NJ; Salmond, DJ; Smith, AFM (abril de 1993). "Nuevo enfoque para la estimación de estado bayesiana no lineal/no gaussiana". IEE Proceedings F - Radar and Signal Processing . 140 (2): 107– 113. doi : 10.1049/ip-f-2.1993.0015 . ISSN 0956-375X . 
  38. Carvalho, Himilcon; Del Moral, Pierre; Monin, André; Salut, Gérard (julio de 1997). "Filtrado no lineal óptimo en la integración GPS/INS" (PDF) . IEEE Transactions on Aerospace and Electronic Systems . 33 (3): 835. Bibcode : 1997ITAES..33..835C . doi : 10.1109/7.599254 . S2CID 27966240. Archivado del original (PDF) el 10 de noviembre de 2022. Recuperado el 1 de junio de 2015 . 
  39. P. Del Moral, G. Rigal y G. Salut. Estimación y control óptimo no lineal : un marco unificado para soluciones de partículas LAAS-CNRS, Toulouse, Informe de investigación no. 91137, contrato DRET-DIGILOG-LAAS/CNRS, abril (1991).
  40. P. Del Moral, G. Rigal y G. Salut. Filtros de partículas no lineales y no gaussianos aplicados al reposicionamiento de plataformas inerciales. LAAS-CNRS, Toulouse, Informe de investigación n.º 92207, Convenio STCAN/DIGILOG-LAAS/CNRS STCAN n.º A.91.77.013, (94 págs.) septiembre (1991).
  41. P. Del Moral, G. Rigal y G. Salut. Estimación y control óptimo no lineal : Resolución de partículas en filtrado y estimación. Resultados experimentales. Convenio DRET n.º 89.34.553.00.470.75.01, Informe de investigación n.º 2 (54 págs.), enero (1992).
  42. P. Del Moral, G. Rigal y G. Salut. Estimación y control óptimo no lineal : Resolución de partículas en filtrado y estimación. Resultados teóricos . Convenio DRET n.º 89.34.553.00.470.75.01, Informe de investigación n.º 3 (123 págs.), octubre (1992).
  43. P. Del Moral, J.-Ch. Noyer, G. Rigal y G. Salut. Filtros de partículas en el procesamiento de señales de radar : detección, estimación y reconocimiento de objetivos aéreos. LAAS-CNRS, Toulouse, Informe de investigación n.º 92495, diciembre (1992).
  44. P. Del Moral, G. Rigal y G. Salut. Estimación y control óptimo no lineal : Resolución de partículas en filtrado y estimación. Estudios sobre: ​​Filtrado, control óptimo y estimación de máxima verosimilitud. Convenio DRET n.º 89.34.553.00.470.75.01. Informe de investigación n.º 4 (210 págs.), enero de 1993.
  45. 1 2 Crisan, Dan; Gaines, Jessica; Lyons, Terry (1998). "Convergencia de un método de partículas ramificadas a la solución del problema de Zakai". SIAM Journal on Applied Mathematics . 58 (5): 1568– 1590. doi : 10.1137/s0036139996307371 . S2CID 39982562 . 
  46. Crisan, Dan; Lyons, Terry (1997). "Filtrado no lineal y procesos con valores de medida" . Probability Theory and Related Fields . 109 (2): 217– 244. doi : 10.1007/s004400050131 . S2CID 119809371 . 
  47. Crisan, Dan; Lyons, Terry (1999). "Una aproximación de partículas de la solución de la ecuación de Kushner-Stratonovitch" . Probability Theory and Related Fields . 115 (4): 549– 578. doi : 10.1007/s004400050249 . S2CID 117725141 . 
  48. 1 2 3 Crisan, Dan; Del Moral, Pierre; Lyons, Terry (1999). "Filtrado discreto mediante sistemas de partículas ramificadas e interactuantes" (PDF) . Procesos de Markov y campos relacionados . 5 (3): 293– 318.
  49. 1 2 3 4 Del Moral, Pierre; Guionnet, Alice (1999). "Sobre la estabilidad de los procesos con valores de medida con aplicaciones al filtrado". CR Acad. Sci. Paris . 39 (1): 429– 434.
  50. 1 2 3 4 Del Moral, Pierre; Guionnet, Alice (2001). "Sobre la estabilidad de procesos interactuantes con aplicaciones al filtrado y algoritmos genéticos" . Annales de l'Institut Henri Poincaré . 37 (2): 155– 194. Bibcode : 2001AIHPB..37..155D . doi : 10.1016/s0246-0203(00)01064-5 . Archivado del original el 7 de noviembre de 2014.
  51. 1 2 Del Moral, P.; Guionnet, A. (1999). "Teorema del límite central para filtrado no lineal y sistemas de partículas interactuantes" . The Annals of Applied Probability . 9 (2): 275– 297. doi : 10.1214/aoap/1029962742 . ISSN 1050-5164 . 
  52. 1 2 Del Moral, Pierre; Miclo, Laurent (2001). "Genealogías y propagación creciente del caos para los modelos genéticos y de Feynman-Kac" . The Annals of Applied Probability . 11 (4): 1166– 1198. doi : 10.1214/aoap/1015345399 . ISSN 1050-5164 . 
  53. 1 2 Doucet, A.; De Freitas, N.; Murphy, K.; Russell, S. (2000). Filtrado de partículas Rao-Blackwell para redes bayesianas dinámicas . Actas de la decimosexta conferencia sobre incertidumbre en inteligencia artificial. págs. 176–183 . CiteSeerX 10.1.1.137.5199 .  
  54. 1 2 Del Moral, Pierre; Miclo, Laurent (2001). "Genealogías y propagación creciente del caos para los modelos genéticos y de Feynman-Kac" . Anales de Probabilidad Aplicada . 11 (4): 1166– 1198.
  55. 1 2 Del Moral, Pierre; Doucet, Arnaud; Singh, Sumeetpal, S. (2010). "Una interpretación de partículas hacia atrás de las fórmulas de Feynman-Kac" (PDF) . M2AN . 44 (5): 947– 976. doi : 10.1051/m2an/2010048 . S2CID 14758161 . {{cite journal}}: CS1 maint: multiple names: authors list (link)
  56. Vergé, Christelle; Dubarry, Cyrille; Del Moral, Pierre; Moulines, Eric (2013). "Sobre la implementación paralela de métodos secuenciales de Monte Carlo: el modelo de partículas de isla". Statistics and Computing . 25 (2): 243– 260. arXiv : 1306.3911 . Bibcode : 2013arXiv1306.3911V . doi : 10.1007/s11222-013-9429-x . S2CID 39379264 . 
  57. Chopin, Nicolas; Jacob, Pierre, E.; Papaspiliopoulos, Omiros (2011). "SMC^2: un algoritmo eficiente para el análisis secuencial de modelos de espacio de estados". arXiv : 1101.1528v3 [ stat.CO ].{{cite arXiv}}: CS1 maint: multiple names: authors list (link)
  58. Andrieu, Christophe; Doucet, Arnaud; Holenstein, Roman (2010). "Métodos de Monte Carlo de cadena de Markov de partículas" . Journal of the Royal Statistical Society, Serie B. 72 ( 3): 269– 342. doi : 10.1111/j.1467-9868.2009.00736.x .
  59. Del Moral, Pierre; Patras, Federico; Kohn, Robert (2014). "Sobre los modelos Monte Carlo de cadena de partículas de Markov y Feynman-Kac". arXiv : 1404.5733 [ matemáticas.PR ].
  60. Del Moral, Pierre; Doucet, Arnaud; Jasra, Ajay (2006). "Muestreadores secuenciales de Monte Carlo" . Revista de la Real Sociedad de Estadística. Serie B (Metodología Estadística) . 68 (3): 411– 436. arXiv : cond-mat/0212648 . doi : 10.1111/j.1467-9868.2006.00553.x . ISSN 1369-7412 . JSTOR 3879283 .  
  61. Peters, Gareth (2005). "Temas en muestreadores secuenciales de Monte Carlo" . Revista electrónica SSRN . doi : 10.2139/ssrn.3785582 . ISSN 1556-5068 . 
  62. Del Moral, Pierre; Doucet, Arnaud; Peters, Gareth (2004). "Sequential Monte Carlo Samplers CUED Technical Report" . SSRN Electronic Journal . doi : 10.2139/ssrn.3841065 . ISSN 1556-5068 . 
  63. Sisson, SA; Fan, Y.; Beaumont, MA, eds. (2019). Handbook of approximation Bayesian computation . Boca Raton: CRC Press, Taylor and Francis Group. ISBN 978-1-315-11719-5.
  64. Peters, Gareth W.; Wüthrich, Mario V.; Shevchenko, Pavel V. (2010-08-01). "Método de la escalera de cadenas: bootstrap bayesiano versus bootstrap clásico" . Insurance: Mathematics and Economics . 47 (1): 36– 51. arXiv : 1004.2548 . doi : 10.1016/j.insmatheco.2010.03.007 . ISSN 0167-6687 . 
  65. Del Moral, Pierre; Jacod, Jean; Protter, Philip (2001-07-01). "El método de Montecarlo para el filtrado con observaciones de tiempo discreto". Probability Theory and Related Fields . 120 (3): 346– 368. doi : 10.1007/PL00008786 . hdl : 1813/9179 . ISSN 0178-8051 . S2CID 116274 .  
  66. Del Moral, Pierre; Doucet, Arnaud; Jasra, Ajay (2011). "Un método adaptativo secuencial de Monte Carlo para la computación bayesiana aproximada". Statistics and Computing . 22 (5): 1009– 1020. CiteSeerX 10.1.1.218.9800 . doi : 10.1007/s11222-011-9271-y . ISSN 0960-3174 . S2CID 4514922 .   
  67. Martin, James S.; Jasra, Ajay; Singh, Sumeetpal S.; Whiteley, Nick; Del Moral, Pierre; McCoy, Emma (4 de mayo de 2014). "Cálculo bayesiano aproximado para suavizado". Stochastic Analysis and Applications . 32 (3): 397– 420. arXiv : 1206.5208 . doi : 10.1080/07362994.2013.879262 . ISSN 0736-2994 . S2CID 17117364 .  
  68. Del Moral, Pierre; Rio, Emmanuel (2011). "Desigualdades de concentración para modelos de partículas de campo medio". The Annals of Applied Probability . 21 (3): 1017– 1052. arXiv : 1211.1837 . doi : 10.1214/10-AAP716 . ISSN 1050-5164 . S2CID 17693884 .  
  69. Del Moral, Pierre; Hu, Peng; Wu, Liming (2012). Sobre las propiedades de concentración de los procesos de partículas interactuantes . Hanover, MA, EE. UU.: Now Publishers Inc. ISBN 978-1601985125.
  70. 1 2 Duffield, Samuel; Singh, Sumeetpal (2022). "Suavizado de partículas en línea con aplicación a la correspondencia de mapas". IEEE Transactions on Signal Processing . 70 : 497– 508. arXiv : 2012.04602 . Bibcode : 2022ITSP...70..497D . doi : 10.1109/TSP.2022.3141259 . ISSN 1053-587X . 
  71. ^ Bejuri, Wan Mohd Yaakob Wan; Mohamad, Mohd Murtadha; Raja Mohd Radzi, Raja Zahilah; Salleh, Mazleena; Yusof, Ahmad Fadhil (18 de octubre de 2017). "Remuestreo de distribución única basado en memoria adaptativa para filtro de partículas" . Revista de Big Data . 4 (1): 33. doi : 10.1186/s40537-017-0094-3 . ISSN 2196-1115 . S2CID 256407088 .  
  72. Gelman, Andrew ; Carlin, John B.; Stern, Hal S.; Dunson, David B.; Vehtari, Aki; Rubin, Donald B. (2013). Análisis de datos bayesianos, tercera edición . Chapman and Hall/CRC. ISBN 978-1-4398-4095-5.
  73. Creal, Drew (2012). "Una revisión de los métodos secuenciales de Monte Carlo para economía y finanzas" . Econometric Reviews . 31 (2): 245– 296. doi : 10.1080/07474938.2011.607333 . hdl : 1871/15287 . S2CID 2730761 . 
  74. Moss, Robert; Zarebski, Alexander; Dawson, Peter; McCaw, James M. (2016). "Pronóstico de la dinámica del brote de influenza en Melbourne a partir de datos de vigilancia de consultas de búsqueda en Internet" . Influenza and Other Respiratory Viruses . 10 (4): 314– 323. doi : 10.1111/irv.12376 . PMC 4910172. PMID 26859411 .  
  75. Shen, Yin; Xiangping, Zhu (2015). "Filtro de partículas inteligente y su aplicación a la detección de fallas en sistemas no lineales". IEEE Transactions on Industrial Electronics . 62 (6): 1. Bibcode : 2015ITIE...62.3852Y . doi : 10.1109/TIE.2015.2399396 . S2CID 23951880 . 
  76. D'Amato, Edigio; Notaro, Immacolata; Nardi, Vito Antonio; Scordamaglia, Valerio (2021). "Un enfoque de filtrado de partículas para la detección y aislamiento de fallas en sensores IMU de UAV: ​​diseño, implementación y análisis de sensibilidad" . Sensors . 21 ( 9): 3066. Bibcode : 2021Senso..21.3066D . doi : 10.3390/s21093066 . PMC 8124649. PMID 33924891 .  
  77. Kadirkamanathan, V.; Li, P.; Jaward, MH; Fabri, SG (2002). "Detección de fallas basada en filtrado de partículas en sistemas estocásticos no lineales". International Journal of Systems Science . 33 (4): 259– 265. Bibcode : 2002IJSyS..33..259K . doi : 10.1080/00207720110102566 . S2CID 28634585 . 
  78. Bonate P: Modelado y simulación farmacocinética-farmacodinámica. Berlín: Springer; 2011.
  79. Dieter Fox, Wolfram Burgard, Frank Dellaert y Sebastian Thrun, " Localización Monte Carlo: Estimación eficiente de la posición para robots móviles ". Actas de la Decimosexta Conferencia Nacional sobre Inteligencia Artificial, John Wiley & Sons Ltd, 1999.
  80. Sebastian Thrun, Wolfram Burgard, Dieter Fox. Robótica probabilística. MIT Press, 2005. Cap. 8.3 ISBN 9780262201629.
  81. Sebastian Thrun, Dieter Fox, Wolfram Burgard, Frank Dellaert. " Localización robusta de Monte Carlo para robots móviles ". Inteligencia Artificial 128.1 (2001): 99–141.
  82. Abbasi, Mahdi; Khosravi, Mohammad R. (2020). "Un método robusto y preciso de detección de pupilas basado en filtros de partículas para grandes conjuntos de datos de vídeo ocular" . Journal of Grid Computing . 18 (2): 305– 325. doi : 10.1007/s10723-019-09502-1 . S2CID 209481431 . 
  83. Pitt, MK; Shephard, N. (1999). "Filtrado mediante simulación: filtros de partículas auxiliares" . Journal of the American Statistical Association . 94 (446): 590– 591. doi : 10.2307/2670179 . JSTOR 2670179. Archivado del original el 16 de octubre de 2007. Recuperado el 6 de mayo de 2008 . 
  84. Zand, G.; Taherkhani, M.; Safabakhsh, R. (2015). "Filtro de partículas naturales exponencial". arXiv : 1511.06603 [ cs.LG ].
  85. Canton-Ferrer, C.; Casas, JR; Pardàs, M. (2011). "Captura de movimiento humano mediante modelos corporales escalables". Computer Vision and Image Understanding . 115 (10): 1363– 1374. doi : 10.1016/j.cviu.2011.06.001 . hdl : 2117/13393 .
  86. Akyildiz, Ömer Deniz; Míguez, Joaquín (01-03-2020). "Empujando el filtro de partículas" . Estadística y Computación . 30 (2): 305– 330. doi : 10.1007/s11222-019-09884-y . hdl : 10044/1/100011 . ISSN 1573-1375 . S2CID 88515918 .  
  87. Liu, J.; Wang, W.; Ma, F. (2011). "Un enfoque de filtrado de partículas auxiliar regularizado para la estimación del estado del sistema y la predicción de la vida útil de la batería" . Materiales y estructuras inteligentes . 20 (7): 1– 9. Bibcode : 2011SMaS...20g5021L . doi : 10.1088/0964-1726/20/7/075021 . S2CID 110670991 . 
  88. Blanco, JL; Gonzalez, J.; Fernandez-Madrigal, JA (2008). Un algoritmo de filtrado óptimo para modelos de observación no paramétricos en la localización de robots . Conferencia Internacional IEEE sobre Robótica y Automatización (ICRA'08). pp. 461–466 . CiteSeerX 10.1.1.190.7092 .  
  89. Blanco, J.L.; Gonzalez, J.; Fernandez-Madrigal, J.A. (2010). "Optimal Filtering for Non-Parametric Observation Models: Applications to Localization and SLAM". The International Journal of Robotics Research. 29 (14): 1726–1742. CiteSeerX 10.1.1.1031.4931. doi:10.1177/0278364910364165. S2CID 453697.

Bibliography

  • Del Moral, Pierre (1996). "Non Linear Filtering: Interacting Particle Solution"(PDF). Markov Processes and Related Fields. 2 (4): 555–580. Archived from the original(PDF) on 2016-03-04. Retrieved 2015-05-31.
  • Del Moral, Pierre (2004). Feynman-Kac formulae. Genealogical and interacting particle approximations. Springer. p. 575. "Series: Probability and Applications"
  • Del Moral, Pierre (2013). Mean field simulation for Monte Carlo integration. Chapman & Hall/CRC Press. p. 626. "Monographs on Statistics & Applied Probability"
  • Cappe, O.; Moulines, E.; Ryden, T. (2005). Inference in Hidden Markov Models. Springer.
  • Liu, J.S. (2001). Monte Carlo strategies in Scientific Computing. Springer.
  • Kong, A.; Liu, J.S.; Wong, W.H. (1994). "Sequential imputations and Bayesian missing data problems"(PDF). Journal of the American Statistical Association. 89 (425): 278–288. doi:10.1080/01621459.1994.10476469.
  • Liu, J.S.; Chen, R. (1995). "Blind deconvolution via sequential imputations"(PDF). Journal of the American Statistical Association. 90 (430): 567–576. doi:10.2307/2291068. JSTOR 2291068.
  • Ristic, B.; Arulampalam, S.; Gordon, N. (2004). Beyond the Kalman Filter: Particle Filters for Tracking Applications. Artech House.
  • Doucet, A.; Johansen, A.M. (December 2008). "A tutorial on particle filtering and smoothing: fifteen years later"(PDF). Technical Report.
  • Doucet, A.; Godsill, S.; Andrieu, C. (2000). "Sobre métodos de muestreo secuencial de Monte Carlo para filtrado bayesiano". Statistics and Computing . 10 (3): 197– 208. doi : 10.1023/A:1008935410038 . S2CID 16288401 . 
  • Arulampalam, MS; Maskell, S.; Gordon, N.; Clapp, T. (2002). "Un tutorial sobre filtros de partículas para el seguimiento bayesiano no lineal/no gaussiano en línea". IEEE Transactions on Signal Processing . 50 (2): 174– 188. Bibcode : 2002ITSP...50..174A . CiteSeerX 10.1.1.471.8617 . doi : 10.1109/78.978374 . S2CID 55577025 .  
  • Cappe, O.; Godsill, S.; Moulines, E. (2007). "Una visión general de los métodos existentes y los avances recientes en Monte Carlo secuencial". Actas del IEEE . 95 (5): 899– 924. Bibcode : 2007IEEEP..95..899C . doi : 10.1109/JPROC.2007.893250 . S2CID 3081664 . 
  • Kitagawa, G. (1996). "Filtro y suavizador de Monte Carlo para modelos de espacio de estados no lineales no gaussianos". Journal of Computational and Graphical Statistics . 5 (1): 1– 25. doi : 10.2307/1390750 . JSTOR 1390750 . 
  • Kotecha, JH; Djuric, P. (2003). "Filtrado de partículas gaussianas". IEEE Transactions on Signal Processing . 51 (10): 2592. Bibcode : 2003ITSP...51.2592K . doi : 10.1109/TSP.2003.816758 .
  • Haug, AJ (2005). "Tutorial sobre técnicas de estimación y seguimiento bayesianas aplicables a procesos no lineales y no gaussianos" (PDF) . The MITRE Corporation, EE. UU., Informe técnico, febrero . Archivado (PDF) del original el 22 de diciembre de 2021. Recuperado el 22 de diciembre de 2021 .
  • Pitt, MK; Shephard, N. (1999). "Filtrado mediante simulación: filtros de partículas auxiliares" . Journal of the American Statistical Association . 94 (446): 590– 591. doi : 10.2307/2670179 . JSTOR 2670179. Archivado del original el 16 de octubre de 2007. Recuperado el 6 de mayo de 2008 . 
  • Gordon, NJ; Salmond, DJ; Smith, AFM (1993). "Nuevo enfoque para la estimación de estado bayesiana no lineal/no gaussiana". IEE Proceedings F - Radar and Signal Processing . 140 (2): 107– 113. doi : 10.1049/ip-f-2.1993.0015 .
  • Vaswani, N.; Rathi, Y.; Yezzi, A.; Tannenbaum, A. (2007). "Seguimiento de objetos deformables mediante filtrado de partículas para contornos activos geométricos" . IEEE Transactions on Pattern Analysis and Machine Intelligence . 29 (8): 1470– 1475. Bibcode : 2007ITPAM..29.1470R . doi : 10.1109/tpami.2007.1081 . PMC 3663080. PMID 17568149 .  
  • Modelos de Feynman-Kac y algoritmos de partículas interactuantes (también conocidos como filtrado de partículas): aspectos teóricos y una lista de dominios de aplicación de los filtros de partículas.
  • Página principal de los métodos secuenciales de Monte Carlo (filtrado de partículas) en la Universidad de Cambridge.
  • Animaciones MCL de Dieter Fox
  • Software gratuito de Rob Hess
  • SMCTC: Una clase plantilla para implementar algoritmos SMC en C++
  • Applet de Java sobre filtrado de partículas
  • vSMC  : Monte Carlo secuencial vectorizado
  • Explicación del filtro de partículas en el contexto de los coches autónomos.
Obtenido de " https://en.wikipedia.org/w/index.php?title=Particle_filter&oldid=1326472427#Other_particle_filters "