Jika \(A\) merupakan matriks stokastik, vektor probabilitas \(\qvec\) disebut vektor keadaan tunak atau stasioner jika \(A\qvec = \qvec\text{.}\)