Recursive self-tuning control of finite Markov chains

Szczegóły
Opis

Tytuł:: Recursive self-tuning control of finite Markov chains
Autorzy:: Borkar, Vivek
Data publikacji:: 1997
Wydawca:: Polska Akademia Nauk. Instytut Matematyczny PAN
Tematy:: controlled Markov chains
stochastic approximation
relative value iteration
self-tuning control
adaptive control
Źródło:: Applicationes Mathematicae; 1996-1997, 24, 2; 169-188
1233-7234
Język:: angielski
Prawa:: Wszystkie prawa zastrzeżone. Swoboda użytkownika ograniczona do ustawowego zakresu dozwolonego użytku
Dostawca treści:: Biblioteka Nauki
: Artykuł

Przejdź do źródła

A recursive self-tuning control scheme for finite Markov chains is proposed wherein the unknown parameter is estimated by a stochastic approximation scheme for maximizing the log-likelihood function and the control is obtained via a relative value iteration algorithm. The analysis uses the asymptotic o.d.e.s associated with these.

Informacja

Recursive self-tuning control of finite Markov chains

Powiązane pozycje