Aşağıdakılara görə, Markov qərar prosesi nədir?
Riyaziyyatda bir Markov qərar prosesi (MDP) diskretli vaxt stoxastik idarəetmə prosesidir.Nəticələrin qismən təsadüfi və qismən bir qərar istehsalçısının nəzarəti altında olduğu vəziyyətlərdə qərar qəbul etmək üçün bir riyazi çərçivə təqdim edir.MDPS dinamik proqramlaşdırma yolu ilə həll olunan optimallaşdırma problemlərinin öyrənilməsi üçün faydalıdır.MDPS, ən azı 1950-ci illər qədər məlum idi;Markov qərar prosesləri üzrə əsas tədqiqat orqanı Ronald Howardın 1960-cı il kitabı, dinamik proqramlaşdırma və Markov prosesləri nəticəsində yaranmışdır.Robototexnika, avtomatik idarəetmə, iqtisadiyyat və istehsal da daxil olmaqla bir çox fənlərdə istifadə olunur.MDP-nin adı Rusiya riyaziyyatçısı Andrey Markovdan gəlir, çünki onlar Markov zəncirlərinin uzadılmasıdır.
Markov Qərar Prosesi (MDP), nəticələrin qərar qəbul edənlərin nəzarəti altında olmadığı hallarda qərar qəbul etmək üçün bir riyazi çərçivədir.MDPS robototexnika və iqtisadiyyat kimi müxtəlif fənlərdə istifadə olunur.