Definicja klasyczna. Prawdopodobieństwo warunkowe i całkowite. Zmienne losowe i ich parametry. Niezależność. Prawa wielkich liczb oraz centralne twierdzenia graniczne i ich zastosowania.
Skończony łańcuch Markowa ma przynajmniej jeden stan powracający, więc szukany łańcuch ma przynajmniej dwa stany chwilowe. Łańcuch, który podałeś ma dokładnie jeden stan powracający i dwa chwilowe, więc jest minimalny ze względu na liczbę stanów, czyli OK.