Поднимаясь по лестнице времени из прошлого в будущее, мы, занося ногу на следующую ступень в будущее, второй ногой опираемся на ступень настоящего. Оглядываемся ли на ступени прошлого? Крайне редко, полагая, что нынешнее состояние дел и во многом определяет ближайшее будущее. Такой подход в математике получил название как «марковское свойство»: в любой момент времени условное распределение будущих состояний процесса с заданными текущим и прошлыми состояниями зависит только от текущего состояния, но не от прошлых состояний (свойство отсутствия памяти). Случайный процесс с марковским свойством называется марковским процессом.