Doorgaan naar hoofdnavigatie Doorgaan naar zoeken Ga verder naar hoofdinhoud

Determination of the spectral radius of a Markov decision process

  • W.H.M. Zijm

Onderzoeksoutput: Boek/rapportRapportAcademic

83 Downloads (Pure)

Samenvatting

Consider a Markov decision process in the situation of discrete time, finite state space and finite action space. A positive probability for fading of the system is allowed. In this case, contraction properties of certain operators, used in Dynamic Programming, are strictly related to the spectral radius of the process. In this paper a method for estimating this spectral radius is proposed. The result can be extended immediately to the case in which the transition probability matrices are replaced by general nonnegative matrices.
Originele taal-2Engels
Plaats van productieEindhoven
UitgeverijTechnische Hogeschool Eindhoven
Aantal pagina's15
StatusGepubliceerd - 1979

Publicatie series

NaamMemorandum COSOR
Volume7909
ISSN van geprinte versie0926-4493

Vingerafdruk

Duik in de onderzoeksthema's van 'Determination of the spectral radius of a Markov decision process'. Samen vormen ze een unieke vingerafdruk.

Citeer dit