Судя по тому, что термин "уравнения Колмогорова" не встречался, время-таки дискретно. Матрица вероятностей перехода за t шагов есть t-я степень матрицы вероятностей перехода за один шаг. Начните перемножать. Судя по заданию, должны выявиться некоторые закономерности, позволяющие выписать p_{i,j}(t).
О вроде легко найти если так. Спасибо! А стационарные вероятности как тогда искать?