Controller Synthesis and Verification for Markov Decision Processes with Qualitative Branching Time Objectives.

Controller Synthesis and Verification for Markov Decision Processes with Qualitative Branching Time Objectives.

We show that the controller synthesis and verification problems for Markov decision processes with qualitative PECTL* objectives are 2-EXPTIME complete. More precisely, the algorithms are polynomial in the size of a given Markov decision process and doubly exponential in the size of a given qualitat...

Ausführliche Beschreibung

Bibliographische Detailangaben
Hauptverfasser:	Brázdil, T, Forejt, V, Kucera, A
Weitere Verfasser:	Aceto, L
Format:	Journal article
Sprache:	English
Veröffentlicht:	Springer 2008

Ähnliche Einträge

Markov Decision Processes with Multiple Long-run Average Objectives
von: Brázdil, T, et al.
Veröffentlicht: (2011)

Reachability in recursive Markov decision processes.
von: Brázdil, T, et al.
Veröffentlicht: (2008)

Markov Decision Processes with Multiple Long-run Average Objectives
von: Tomáš Brázdil, et al.
Veröffentlicht: (2014-02-01)

Trading Performance for Stability in Markov Decision Processes
von: Brázdil, T, et al.
Veröffentlicht: (2013)

Trading performance for stability in Markov decision processes
von: Brazdil, T, et al.
Veröffentlicht: (2016)

Branching-Time Model-Checking of Probabilistic Pushdown Automata.
von: Brázdil, T, et al.
Veröffentlicht: (2009)

Continuous-Time Stochastic Games with Time-Bounded Reachability.
von: Brázdil, T, et al.
Veröffentlicht: (2009)

Multi-objective robust strategy synthesis for Interval Markov decision processes
von: Hahn, E, et al.
Veröffentlicht: (2017)

Life is Random, Time is Not: Markov Decision Processes with Window Objectives
von: Thomas Brihaye, et al.
Veröffentlicht: (2020-12-01)

Synchronizing Objectives for Markov Decision Processes
von: Mahsa Shirmohammadi, et al.
Veröffentlicht: (2011-02-01)

The Satisfiability Problem for Probabilistic CTL.
von: Brázdil, T, et al.
Veröffentlicht: (2008)

Stability in graphs and games
von: Brázdil, T, et al.
Veröffentlicht: (2016)

Quantitative Multi-objective Verification for Probabilistic Systems.
von: Forejt, V, et al.
Veröffentlicht: (2011)

MULTI-OBJECTIVE MODEL CHECKING OF MARKOV DECISION PROCESSES
von: Etessami, K, et al.
Veröffentlicht: (2008)

Multi-Objective Model Checking of Markov Decision Processes
von: Kousha Etessami, et al.
Veröffentlicht: (2008-11-01)

Multi-weighted Markov Decision Processes with Reachability Objectives
von: Patricia Bouyer, et al.
Veröffentlicht: (2018-09-01)

Verification of general Markov decision processes by approximate similarity relations and policy refinement
von: Haesaert, S, et al.
Veröffentlicht: (2017)

Faster Convergence of Modified Policy Iteration for Quantitative Verification of Markov Decision Processes
von: M.S. Mohagheghi
Veröffentlicht: (2018-12-01)

Geometric branching reproduction Markov processes
von: Assen Tchorbadjieff, et al.
Veröffentlicht: (2020-09-01)

Nonlinear Markov branching processes with immigration and resurrection
von: Zhang Lina, et al.
Veröffentlicht: (2024-10-01)

Markov decision processes /
von: 352167 White, D. J.
Veröffentlicht: (1993)

Controllable Summarization with Constrained Markov Decision Process
von: Hou Pong Chan, et al.
Veröffentlicht: (2021-01-01)

Bounds for Markov Decision Processes
von: Desai, Vijay V., et al.
Veröffentlicht: (2019)

Framework for solving time-delayed Markov Decision Processes
von: Yorgo Sawaya, et al.
Veröffentlicht: (2023-07-01)

Quantum logic gate synthesis as a Markov decision process
von: M. Sohaib Alam, et al.
Veröffentlicht: (2023-10-01)

Unifying Two Views on Multiple Mean-Payoff Objectives in Markov Decision Processes
von: Krishnendu Chatterjee, et al.
Veröffentlicht: (2017-07-01)

The complexity of Markov decision processes
Veröffentlicht: (2003)

Markov decision processes approximation with coupled dynamics via Markov deterministic control systems
von: Portillo-Ramírez Gustavo, et al.
Veröffentlicht: (2023-10-01)

Symblicit algorithms for optimal strategy synthesis in monotonic Markov decision processes
von: Aaron Bohy, et al.
Veröffentlicht: (2014-07-01)

Safety Verification of Continuous-Space Pure Jump Markov Processes
von: Esmaeil Zadeh Soudjani, S, et al.
Veröffentlicht: (2016)

Convergence Rates and Limit Theorems for the Dual Markov Branching Process
von: Anthony G. Pakes
Veröffentlicht: (2017-01-01)

The multiple birth properties of multi-type Markov branching processes
von: Junping Li, et al.
Veröffentlicht: (2024-09-01)

Verification of Linear Duration Properties over Continuous Time Markov Chains
von: Chen, T, et al.
Veröffentlicht: (2012)

Verification of Linear Duration Properties over Continuous−Time Markov Chains
von: Chen, T, et al.
Veröffentlicht: (2012)

Monotone optimal control for a class of Markov decision processes
von: Li, Michael Z. F., et al.
Veröffentlicht: (2013)

Polynomial time algorithms for finite horizon, stationary Markov decision processes
Veröffentlicht: (2003)

Comparing labelled Markov decision processes
von: Kiefer, S, et al.
Veröffentlicht: (2020)

Communicating via Markov decision processes
von: Sokota, S, et al.
Veröffentlicht: (2022)

Entropic Regularization of Markov Decision Processes
von: Boris Belousov, et al.
Veröffentlicht: (2019-07-01)

Markov abstractions for PAC reinforcement learning in non-Markov decision processes
von: Ronca, A, et al.
Veröffentlicht: (2022)