Markow-Ketten-Modell

Ein stochastischer Prozess auf einer diskreten oder abzählbaren Zustandsmenge, bei dem die Wahrscheinlichkeitsverteilung des nächsten Zustands nur vom gegenwärtigen Zustand abhängt (Markow‑Eigenschaft); spezifiziert durch Übergangswahrscheinlichkeiten (oder -kernel) und Anfangsverteilung, verwendet zur Analyse von Zustandsübergängen, stationärem Verhalten, Treffzeiten und Pfadwahrscheinlichkeiten.