Markov Özelliği

Markov özelliği, olasılık teorisi ve sıralı karar verme problemlerinde merkezi öneme sahip bir varsayımdır. Bu varsayıma göre sistemin geleceği, geçmişin tamamını bilmeden yalnızca mevcut durumdan tahmin edilebilir. Pekiştirmeli öğrenme, Markov karar süreçleri ve zaman bağımlı modelleme bu mantık üzerine kuruludur. Gerçek dünyada tam Markov davranışı her zaman sağlanmasa da, bu varsayım karmaşık süreçleri modellemeyi ciddi biçimde kolaylaştırır. Bu yüzden Markov özelliği, belirsizliği yönetilebilir hale getiren güçlü bir soyutlamadır.