Stochastische Ketten

Sind bei einem stochastischen Prozeß sowohl der Zustandsraum als auch der Parameterraum diskret, d.h., die Zustandsgröße Xt und der Parameter t können nur endlich viele oder abzählbar unendlich viele Werte annehmen, dann spricht man von einer stochastischen Kette. Bei einer stochastischen Kette können demzufolge sowohl die Zustände als auch die Parameterwerte durchnumeriert werden:

(16.108)
(16.109)

Die Zeitpunkte müssen nicht äquidistant sein.