Budeme simulovat Markovské řetězce. Markovský řetězec je diskrétní náhodný proces, při kterém pravděpodobnost přechodu do následujícího stavu je závislá výhradně na stavu současném. Užití takovéto simulace je v mnoha oblastech, od logistiky a dopravní optimalizace, přes ekonomii a politologii po genetiku.