Στοχαστικές Διαδικασίες
Προκαταρκτικές έννοιες από τη Θεωρία Πιθανοτήτων. Γενικά περί στοχαστικών διαδικασιών. Μαρκοβιανές αλυσίδες σε διακριτό χρόνο. Πίνακας πιθανοτήτων μετάβασης, εξισώσεις Chapman-Kolmogov. Πιθανότητες πρώτης επίσκεψης (ή επιστροφής) και κατανομή της χρονικής στιγμής πρώτης επίσκεψης (ή επιστροφής). Ταξινόμηση καταστάσεων. Επαναλαμβανόμενες καταστάσεις, παροδικές καταστάσεις, απορροφητικές περιοδικές καταστάσεις, μη περιοδικές καταστάσεις. Κλάσεις επικοινωνούντων καταστάσεων. Κλειστά σύνολα καταστάσεων. Κανονική μορφή του πίνακα μετάβασης. Οριακή συμπεριφορά καταστάσεων, εργοδικό θεώρημα, στάσιμη κατανομή. Μελέτη τυχαίων περιπάτων. Χρεωκοπία του παίκτη. Μαρκοβιανές αλυσίδες σε συνεχή χρόνο. Πίνακας γεννήτορας, εξισώσεις Kolmogorov, οριακή συμπεριφορά καταστάσεων. Διαδικασία Poisson, διαδικασία γεννήσεων-θανάτoυ. Εισαγωγή στα συστήματα ουρών.