Ein diskreter Markowprozess mit endlichem Zustandsraum, auch Markow-Kette genannt, kann durch ein Übergangs­diagramm und einen Startvektor beschrieben werden. Die passende Software zum Erstellen so eines Übergangsdiagramms ist ein Graph-Editor, wie z.B. "yEd" (gesprochen: wy-eht).