ESAIM Control Optimisation and Calculus of Variations· 2026Q1
Absorbe Edici Markov Karar Süreçleri: Geometrik Özellikler ve Deterministik Politikaların Sonlu Karışımlarının Yeterliliği
Absorbing markov decision processes: geometric properties and sufficiency of finite mixtures of deterministic policies
- 0atıf
- Q1SCImago
- 2026yıl
Kısa özet
Bu çalışma, absorbe edici Markov Karar Süreçlerindeki (MKS) doluluk ölçümlerinin geometrik özelliklerini karakterize ederek, bu yapıların MKS parametreleri tarafından tamamen tanımlandığını göstermektedir.
Yapay zekâ ile başlık ve abstract'tan üretildi; tam metin okunmaz.
Ana noktalar
- Absorbe edici MKS'lerde doluluk ölçümlerinin geometrik özellikleri, yüzler ve göreceli içleri dahil olmak üzere analiz edilmektedir.
- Bu geometrik yapılar, MKS'yi tanımlayan parametreler tarafından tam olarak karakterize edilmektedir.
- Deterministik durağan politikaların sonlu karışımlarının, tekdüze absorbe edici MKS'ler için yeterli bir politika sınıfı olduğu gösterilmiştir.
- Bir doluluk ölçüsünün deterministik politikaların sonlu karışımı tarafından üretilebilmesi için bir koşul sağlanmıştır.
Yapay zekâ ile başlık ve abstract'tan üretildi; tam metin okunmaz.
Özet (abstract)
In this paper we investigate several geometric properties of the set of occupancy measures of an absorbing Markov decision process (MDP). In particular, we analyse the structure of the faces generated by a given occupancy measure, together with their relative algebraic interior. We also determine the affine hulls of these faces and describe the associated parallel linear subspaces. It is shown that these structures can be fully characterised in terms of the parameters that define the underlying Markov decision process. Moreover, we establish that the class of finite mixtures of deterministic stationary policies constitutes a sufficient class of policies for uniformly absorbing MDPs with a measurable state space and multiple criteria. We also provide a sufficient condition, stated in terms of the MDP's parameters and a given occupancy measure, under which that measure can be generated by a finite mixture of deterministic policies.
Yazarların özeti; kaynağından alınmıştır. ESAIM Control Optimisation and Calculus of Variations, 2026 · DOI ↗
Ücretsiz hesapla devam et
Makaleye Sor ile bu makaleye günde 3 soru ücretsiz; makaleyi kaydet, kaynakçasını al, ilgi alanına göre her gün yeni özetler. Çıkarımlar Premium.
Web'de ücretsiz devam etGoogle ya da Apple hesabınla giriş; kart istemez. Bu makaleye geri dönersin.
Telefonda:
Management Information SystemsBusiness, Management and Accounting