Macierz przejść łańcuch Markowa

[bonzai1990]

Hej potrzebuje waszej pomocy bo nic za nic nie ogarniam tego łańcucha Markowa. Czytałem wszystkie definicje ale srednio je rozumiem. Czy jest ktos w stanie tak na chłopski rozum mi to wytłumaczyć.?

Mam taką treść zadania:
a)Można dobrać tak p,q aby macierz P była macierzą przejścia łańcucha Markowa na zbiorze stanów {1,2,3,4} oraz stan 2 był okresowy Chciałbym to policzyć żeby wiedzieć jak to sprawdzić ale brak pojęcia jak)

\(\displaystyle{ \left[\begin{array}{cccc}0&p&1/2&q-1/2\\q&0&0&p\\0&0&1/2&1/2\\0&1/3&1/3&1/3\end{array}\right]}\)


b) Można tak dobrać parametry p,q aby macierz P była macierzą przejścia łańcucha Markowa na zbiorze stanów {1,2,3,4} oraz aby łańcuch ten miał same stany istotne ??

Proszę pomóżcie to rozwiązać bo mam z tego egzamin.