Вообще-то автору достаточно знать формулу, по которой выражается матрица вероятностей перехода за n шагов через матрицу вероятностей перехода за 1 шаг. Вот только никогда не поверю, что автору эту очевидную формулу не давали на лекциях, а сразу дали на неё задачу. Не проще заглянуть в свои записи или в учебник, чем спрашивать тут, сколько будет 2х2?