Markov-Prozesse stellenProzessMarkovMarkov, A. eine grundlegende Klasse von stochastischen Prozessen dar, die durch eine Gedächtnislosigkeitseigenschaft gekennzeichnet sind, die sie hoch handhabbar und vorteilhaft in praktischen Anwendungen macht. In diesem Kapitel ist die Menge der Indizes \(I = {{\mathbb {R}}}_{\ge 0}\) , wobei \(t \in I\) als Zeitpunkt interpretiert wird.