Διαδικασίες Markov Διακριτού Χρόνου

Ορισμός Διαδικασιών Markov Διακριτού Χρόνου, Μαρκοβιανή Ιδιότητα, Πιθανότητες n-βημάτων, Εξισώσεις Kolmogorov, Μεταβατική Κατανομή, Πιθανότητες Πρώτου Περάσματος, Κατηγοριοποίηση Καταστάσεων, Κατηγοριοποίηση Αλυσίδων, Στάσιμη Κατανομή, Οριακή Κατανομή, Time Average Κατανομή, Εργοδικές Αλυσίδες Markov