マルコフ過程とマルコフ連鎖 時刻における状態をと表し、の確率がから決まるのではなく、１つ前の状態のみによって定まるときにこれをマルコフ性といい、このような性質を持つ確率過程をマルコフ過程といいます。状態が離散的なとき、特にマルコフ連鎖と呼び…