मार्कोव्ह निर्णय प्रक्रिया (एमडीपी) अशी एक गणितीय रचना आहे जी निर्णय घेणाऱ्यांच्या नियंत्रणाखाली नसलेल्या प्रकरणांमध्ये निर्णय घेण्यासाठी मॉडेलिंग करते. एमडीपीचा वापर रोबोटिक्स आणि अर्थशास्त्र यासारख्या विविध शाखेत केला जातो.
खालील प्रमाणे, मार्कोव्ह निर्णय प्रक्रिया काय आहे?
Context:गणितामध्ये, मार्कोव्ह निर्णय प्रक्रिया (एमडीपी) ही एक स्वतंत्र-वेळ स्टोकास्टिक नियंत्रण प्रक्रिया आहे. ज्या परिस्थितीत परिणाम अंशतः यादृच्छिक असतात आणि अंशतः निर्णय घेणाऱ्याच्या नियंत्रणाखाली असतात अशा परिस्थितीत निर्णय घेण्याच्या मॉडेलिंगसाठी हे एक गणितीय फ्रेमवर्क प्रदान करते. डायनॅमिक प्रोग्रामिंगद्वारे सोडवलेल्या ऑप्टिमायझेशन समस्यांचा अभ्यास करण्यासाठी एमडीपी उपयुक्त आहेत. एमडीपी किमान १९५० च्या दशकापासून ओळखले जात होते; मार्कोव्ह निर्णय प्रक्रियेवरील संशोधनाचा एक मुख्य भाग रोनाल्ड हॉवर्डच्या १९६० च्या पुस्तक, डायनॅमिक प्रोग्रामिंग अँड मार्कोव्ह प्रोसेसमधून आला. रोबोटिक्स, स्वयंचलित नियंत्रण, अर्थशास्त्र आणि उत्पादन यासह अनेक शाखेत त्यांचा वापर केला जातो. एमडीपीचे नाव रशियन गणितज्ञ आंद्रेई मार्कोव्ह यांच्या नावावरून आले आहे कारण ते मार्कोव्ह साखळ्यांचे विस्तार आहेत.