Das vorliegende Buch führt den Leser in die Welt der stochastischen Modellbildung ein. Im Vordergrund steht dabei eine anschauliche Darstellung zeitdiskreter und zeitstetiger Modelle, die auf einer klaren Formulierung der mathematischen Grundlagen basiert. Der Begriff der Markov-Kette zieht sich wie ein roter Faden durch die einzelnen Kapitel. Markov-Ketten sind von Interesse bei der Analyse zeitdiskreter dynamischer Systeme, die zufälligen Einflüssen unterliegen. Sie beeindrucken durch ihre klare Struktur und ihre Einfachheit in der Darstellung und Lösung. Zudem sind sie zusammen mit Poisson-Prozessen und ihren Verallgemeinerungen ein wichtiger Baustein zum Verständnis zeitstetiger Systeme. Nicht zuletzt unterstreichen Markovsche Entscheidungsprozesse, die eine optimale Steuerung von Markov-Ketten beinhalten, die Bedeutung der Markov-Kette als wichtiges Analyseinstrument.