siirtymätodennäköisyysmatriisi
Siirtymätodennäköisyysmatriisi on neliömäinen matriisi, joka kuvaa Markovin ketjun tilojen välisiä siirtymiä. Sen alkiot edustavat todennäköisyyttä siirtyä tilasta toiseen tietyn ajan yksikön aikana. Matriisin rivit edustavat lähtötiloja ja sarakkeet kohdetiloja. Matriisin kaikkien rivien alkioiden summa on aina yksi, sillä jokaisesta tilasta on varmuudella siirryttävä johonkin tilaan.
Siirtymätodennäköisyysmatriisin avulla voidaan mallintaa monenlaisia ilmiöitä, kuten osakemarkkinoiden liikkeitä, säätilojen muutoksia tai kuluttajien ostokäyttäytymistä. Matriisin avulla
Esimerkiksi, jos meillä on kaksi tilaa, A ja B, siirtymätodennäköisyysmatriisi voisi näyttää tältä:
Tämä tarkoittaa, että jos ollaan tilassa A, on 80% todennäköisyys pysyä tilassa A ja 20% todennäköisyys siirtyä
Siirtymätodennäköisyysmatriisin tutkiminen voi paljastaa Markovin ketjun pitkän aikavälin käyttäytymistä, kuten sen tasapainotiloja. Tasapainotila on tila, jossa