1. komponenta

Vrsta nastave	Ukupno
Predavanja	30
Auditorne vježbe	30

* Opterećenje je izraženo u školskim satima (1 školski sat = 45 minuta)

CILJ KOLEGIJA: Cilj kolegija je upoznavanje s fundamentalnim rezultatima teorije homogenih Markovljevih lanaca s diskretnim vremenom, te primjena Markovljevih lanaca u matematičkom modeliranju slučajnih fenomena.

NASTAVNI SADRŽAJI:
1. Uvod u Markovljeve lance.
2. Definicija i osnovna svojstva. Prijelazna matrica. Klase.
3. Vremena pogađanja. Vjerojatnosti apsorpcije.
4. Jako Markovljevo svojstvo.
5. Povratnost i prolaznost. Analiza slučajnih šetnji.
6. Invarijantna i stacionarna distribucija. Granična distribucija.
7. Konvergencija prema graničnoj distribuciji.
8. Ergodski teorem.
9. Okretanje vremena.
10. Uvod u Markovljeve lance s neprekidnim vremenom.
11. Primjena Markovljevih lanaca: električne mreže
12. Primjena Markovljevih lanaca u biologiji.
13. Markovljevi procesi odlučivanja.
14. MCMC (Markov chain Monte Carlo).

1. Markov Chains: Gibbs Fields, Monte Carlo Simulation, and Queues, P. Bremaud, Springer Verlag, 1999.
2. Markov Chains, J. R. Norris, Cambridge University Press, 1997.
3. Adventures in Stochastic Processes, S. I. Resnick, Birkhäuser, 1992.

Obavezni predmet - Redovni Studij - Matematička statistika