Este documento presenta el proceso de decisión markoviano. Explica las cadenas o procesos de Markov, usando un ejemplo de los estados del clima (seco u húmedo) y sus probabilidades de transición de un día a otro. Solicita determinar la matriz de transición, diagrama de transición y probabilidad de estado estable del sistema climático dado. También menciona las ventajas y desventajas de los procesos de Markov, así como sus aplicaciones.