O matrice de tranziție Markov este o matrice pătrată care descrie probabilitățile de a trece dintr-o stare în alta într-un sistem dinamic. În fiecare rând există probabilitățile de a trece de la starea reprezentată de acel rând, la celelalte stări. Astfel, rândurile unei matrice de tranziție Markov se adaugă fiecare la una. Uneori, o astfel de matrice este denumită ceva ca Q (x '| x) care poate fi înțeles astfel: că Q este o matrice, x este starea existentă, x' este o posibilă stare viitoare și pentru orice x și x 'în modelul, probabilitatea de a merge la x 'având în vedere că starea existentă este x, sunt în Q.
Articole ale jurnalului privind matricea de tranziție Markov