FINITE-STATE MARKOV CHAINS - MIT OpenCourseWare