Vektor yang entri-entrinya taknegatif dan berjumlah 1 disebut vektor probabilitas. Matriks persegi yang kolom-kolomnya merupakan vektor probabilitas disebut matriks stokastik.