Matriu de velocitat de transició

En teoria de la probabilitat, una matriu de velocitat de transició (també coneguda com a matriu d'intensitat[1][2] o matriu generadora infinitesimal)[3] és una matriu de nombres que descriuen la velocitat d'una cadena de Màrkov a temps continu que es mou entre els estats.

En una matriu de velocitat de transició Q (de vegades escrit A),[4] l'element qij (per a ij) denota la velocitat de sortida i i d'arribada a l'estat j. Els elements diagonal qii es defineixen tal que

q i i = j i q i j . {\displaystyle q_{ii}=-\sum _{j\neq i}q_{ij}.}

i per tant, les files de la matriu se sumen a zero.

Definició

Una matriu Q (qij) satisfà les següents condicions:[5]

  1. 0 q i i < {\displaystyle 0\leq -q_{ii}<\infty }
  2. 0 q i j : f o r i j {\displaystyle 0\leq q_{ij}:\mathrm {for} \;i\neq j}
  3. j q i j = 0 : f o r a l l i {\displaystyle \sum _{j}q_{ij}=0:\mathrm {for} \;\mathrm {all} \;i}

Aquesta definició es pot interpretar com el laplacià d'un gràf ponderat dirigit, els vèrtexs dels quals corresponen als estats de la cadena de Màrkov.

Exemple

Una cua M/M/1, un model que compta el nombre de treballs en un sistema de cues amb arribades a la velocitat λ i serveis a la velocitat μ, té matriu de velocitat de transició

Q = ( λ λ μ ( μ + λ ) λ μ ( μ + λ ) λ μ ( μ + λ ) λ ) . {\displaystyle Q={\begin{pmatrix}-\lambda &\lambda \\\mu &-(\mu +\lambda )&\lambda \\&\mu &-(\mu +\lambda )&\lambda \\&&\mu &-(\mu +\lambda )&\lambda &\\&&&&\ddots \end{pmatrix}}.}

Referències

  1. Syski, R. Passage Times for Markov Chains (en anglès). IOS Press, 1992. DOI 10.3233/978-1-60750-950-9-i. ISBN 90-5199-060-X. 
  2. Asmussen, S. R. «Markov Jump Processes». A: Applied Probability and Queues. 51, 2003, p. 39–59 (Stochastic Modelling and Applied Probability). DOI 10.1007/0-387-21525-5_2. ISBN 978-0-387-00211-8. 
  3. Trivedi, K. S; Kulkarni, V. G. «FSPNs: Fluid stochastic Petri nets». A: Application and Theory of Petri Nets 1993 (en anglès). 691, 1993, p. 24 (Lecture Notes in Computer Science). DOI 10.1007/3-540-56863-8_38. ISBN 978-3-540-56863-6. 
  4. Rubino, Gerardo; Sericola «Sojourn Times in Finite Markov Processes» (en anglès). Journal of Applied Probability, 26(4), 1989, pàg. 744-756. JSTOR: 3214379.
  5. Norris, J. R. Markov Chains (en anglès), 1997. DOI 10.1017/CBO9780511810633. ISBN 9780511810633.