La propiedad de Markov es la condición de que el siguiente estado de un proceso dependa solo del estado y la acción actuales, no de toda la historia de estados previos. Permite modelar de forma simplificada problemas de decisión secuencial y subyace a las cadenas de Markov y los procesos de decisión de Markov.