Матрица вероятностей перехода однородной цепи Маркова имеет вид 
а вектор начального распределения вероятностей – 
. Тогда вектор вероятностей состояний цепи Маркова на втором шаге равен …
а вектор начального распределения вероятностей – . Тогда вектор вероятностей состояний цепи Маркова на втором шаге равен …• 
• 
• 
• 