Зміст:
- Визначення - Що означає процес рішення Маркова (MDP)?
- Техопедія пояснює процес прийняття рішень Маркова (MDP)
Визначення - Що означає процес рішення Маркова (MDP)?
Процес прийняття рішення Маркова (МДП) - це те, що професіонали називають "дискретним процесом стохастичного контролю часу". Він заснований на математиці, яку створив російський академік Андрій Марков наприкінці 19 - початку 20 століть.
Техопедія пояснює процес прийняття рішень Маркова (MDP)
Один із способів пояснення процесу прийняття рішення Маркова та пов'язаних з ним ланцюгів Маркова полягає в тому, що це елементи сучасної теорії ігор, що спираються на більш прості математичні дослідження російського вченого кількасот років тому. Опис процесу рішення Маркова полягає в тому, що він вивчає сценарій, коли система знаходиться в певному наборі станів, і переходить до іншої держави на основі рішень того, хто приймає рішення.
Ланцюжок Маркова як модель показує послідовність подій, коли ймовірність даної події залежить від раніше досягнутого стану. Професіонали можуть говорити про «лічильний простір стану», описуючи процес прийняття рішення Маркова - деякі асоціюють ідею моделі рішення Маркова з моделлю «випадкової прогулянки» або іншою стохастичною моделлю на основі ймовірностей (модель випадкової прогулянки, часто цитується на Уолл Вулиця, моделює рух акцій вгору або вниз у контексті ринкової ймовірності).
Загалом, процеси прийняття рішень Маркова часто застосовуються до деяких найскладніших технологій, над якими сьогодні працюють професіонали, наприклад, в моделях робототехніки, автоматики та досліджень.
