Управление марковской цепью с непрерывным ограниченным множеством состояний, оптимизирующее стационарное распределение цепи

Рассматривается управляемая марковская цепь с непрерывным ограниченным множеством состояний. Ставится задача нахождения такой стратегии управления, при которой стационарное распределение цепи максимально приближено к некоторому заданному распределению на множестве состояний. Приводится мотивация постановки задачи и обсуждается ее решение.

Control of a Discrete-Time Markov Chain with Continuous Bounded State Space which Leads to the Given Stationary Distribution

We consider a controlled Markov chain with discrete time and continuous bounded state space. The problem under consideration is to find such a control policy for the chain under which the stationary distribution of the chain is as close as possible to the given stationary distribution. Motivation for this problem is illustrated through the example.

Authors
Konovalov M.G.1 , Razumchik R.V.1
Publisher
РУДН
Language
Russian
Pages
351-354
Status
Published
Organizations
  • 1 Institute of Informatics Problems, FRC CSC RAS
  • 2 Peoples' Friendship University of Russia (RUDN University)
Keywords
Markov chain; adaptive control; continuous state space; robotics; цепь Маркова; адаптивное управление; непрерывное множество состояний; робототехника
Date of creation
20.10.2018
Date of change
20.10.2018
Short link
https://repository.rudn.ru/en/records/article/record/13874/
Share

Other records

Velieva T.R., Zavozina A.V., Korolkova A.V.
Информационно-телекоммуникационные технологии и математическое моделирование высокотехнологичных систем: материалы Всероссийской конференции с международным участием. Москва, РУДН, 16–20 апреля 2018 г.. РУДН. P. 311-313