Inference Strategies for Solving Semi−Markov Decision Processes

Inference Strategies for Solving Semi−Markov Decision Processes

Semi-Markov decision processes are used to formulate many control problems and also play a key role in hierarchical reinforcement learning. In this chapter we show how to translate the decision making problem into a form that can instead be solved by inference and learning techniques. In particular,...

Bibliografiset tiedot
Päätekijät:	Hoffman, M, de Freitas, N
Aineistotyyppi:	Book section
Julkaistu:	2012

Samankaltaisia teoksia

New inference strategies for solving Markov Decision Processes using reversible jump MCMC
Tekijä: Hoffman, M, et al.
Julkaistu: (2009)

New inference strategies for solving Markov Decision Processes using reversible jump MCMC
Tekijä: Hoffman, M, et al.
Julkaistu: (2009)

On solving a Stochastic Shortest-Path Markov Decision Process as probabilistic inference
Tekijä: Baioumy, M, et al.
Julkaistu: (2022)

An expectation maximization algorithm for continuous Markov decision processes with arbitrary rewards
Tekijä: Hoffman, M, et al.
Julkaistu: (2009)

An Expectation Maximization Algorithm for Continuous Markov Decision Processes with Arbitrary Reward
Tekijä: Hoffman, M, et al.
Julkaistu: (2009)

Approximate solution methods for partially observable Markov and semi-Markov decision processes
Tekijä: Yu, Huizhen, Ph. D. Massachusetts Institute of Technology
Julkaistu: (2007)

Applied semi-Markov processes /
Tekijä: Janssen, Jacques, 1939-, et al.
Julkaistu: (2006)

Markov decision processes /
Tekijä: 352167 White, D. J.
Julkaistu: (1993)

Markov chain Monte Carlo : stochastic simulation for Bayesian inference /
Tekijä: 360681 Gamerman, Dani, et al.
Julkaistu: (2006)

Communicating via Markov decision processes
Tekijä: Sokota, S, et al.
Julkaistu: (2022)

Markov abstractions for PAC reinforcement learning in non-Markov decision processes
Tekijä: Ronca, A, et al.
Julkaistu: (2022)

Bounds for Markov Decision Processes
Tekijä: Desai, Vijay V., et al.
Julkaistu: (2019)

The complexity of Markov decision processes
Julkaistu: (2003)

A policy gradient method for semi-Markov decision processes with application to call admission control
Tekijä: Singh, S, et al.
Julkaistu: (2007)

The Hierarchical Dirichlet Process Hidden Semi-Markov Model
Tekijä: Johnson, Matthew James, et al.
Julkaistu: (2013)

Multi-objective robust strategy synthesis for Interval Markov decision processes
Tekijä: Hahn, E, et al.
Julkaistu: (2017)

Trace refinement in labelled Markov decision processes
Tekijä: Fijalkow, N, et al.
Julkaistu: (2020)

Trace refinement in labelled Markov decision processes
Tekijä: Fijalkow, N, et al.
Julkaistu: (2015)

Trace refinement in labelled Markov decision processes
Tekijä: Fijalkow, N, et al.
Julkaistu: (2015)

Robust anytime learning of Markov decision processes
Tekijä: Suilen, M, et al.
Julkaistu: (2023)

Comparing labelled Markov decision processes
Tekijä: Kiefer, S, et al.
Julkaistu: (2020)

Reachability in recursive Markov decision processes.
Tekijä: Brázdil, T, et al.
Julkaistu: (2008)

Mean-Variance Optimization in Markov Decision Processes
Tekijä: Mannor, Shie, et al.
Julkaistu: (2013)

Inference in hidden Markov models /
Tekijä: 389105 Cappe, Olivier, et al.
Julkaistu: (2005)

Tensor decomposition and parallelization of Markov Decision Processes
Tekijä: Smart, David P. (David Paul)
Julkaistu: (2016)

Simulation-based optimization of Markov decision processes
Tekijä: Marbach, Peter, 1966-
Julkaistu: (2005)

Hazard avoidance alerting with Markov decision processes
Tekijä: Winder, Lee F. (Lee Francis), 1973-
Julkaistu: (2005)

Trading Performance for Stability in Markov Decision Processes
Tekijä: Brázdil, T, et al.
Julkaistu: (2013)

Hazard Avoidance Alerting With Markov Decision Processes
Tekijä: Winder, Lee F., et al.
Julkaistu: (2007)

Quantum partially observable Markov decision processes
Tekijä: Barry, Jennifer, et al.
Julkaistu: (2014)

Hierarchical Solution of Large Markov Decision Processes
Tekijä: Barry, Jennifer, et al.
Julkaistu: (2011)

Trading performance for stability in Markov decision processes
Tekijä: Brazdil, T, et al.
Julkaistu: (2016)

Simulation-based algorithms for Markov decision processes /
Tekijä: Chang, Hyeong Soo
Julkaistu: (2007)

Online Reinforcement Learning in Factored Markov Decision Processes and Unknown Markov Games
Tekijä: Tian, Yi
Julkaistu: (2022)

MULTI-OBJECTIVE MODEL CHECKING OF MARKOV DECISION PROCESSES
Tekijä: Etessami, K, et al.
Julkaistu: (2008)

Inference and Learning for Active Sensing, Experimental Design and Control
Tekijä: Kueck, H, et al.
Julkaistu: (2009)

Bayesian Nonparametric Hidden Semi-Markov Models
Tekijä: Johnson, Matthew James, et al.
Julkaistu: (2013)

Algorithmic aspects of mean–variance optimization in Markov decision processes
Tekijä: Tsitsiklis, John N, et al.
Julkaistu: (2017)

Markov decision processes : discrete stochastic dynamic programming /
Tekijä: 198736 Puterman, Martin L.
Julkaistu: (2005)

Approximate inference by Markov chains on union spaces
Tekijä: Welling, M, et al.
Julkaistu: (2004)