Optimálne adaptívne riadenie a diferenciálne hry podľa princípov učenia posilňovaním

Pôvodný názov:

Optimal Adaptive Control and Differential Games by Reinforcement Learning Principles

Obsah knihy:

Adaptívne regulátory a optimálne regulátory sú dve odlišné metódy návrhu systémov automatického riadenia.

Adaptívne regulátory sa učia online v reálnom čase, ako riadiť systémy, ale neprinášajú optimálny výkon, zatiaľ čo optimálne regulátory sa musia navrhovať offline s využitím úplných znalostí dynamiky systémov. Táto kniha ukazuje, ako sa aproximatívne dynamické programovanie - technika strojového učenia s posilnením, ktorá je motivovaná mechanizmami učenia v biologických a živočíšnych systémoch, môže použiť na návrh rodiny adaptívnych algoritmov optimálneho riadenia, ktoré konvergujú v reálnom čase k optimálnym riešeniam riadenia meraním údajov pozdĺž trajektórií systému.

V knihe sa tiež opisuje, ako používať metódy približného dynamického programovania na riešenie diferenciálnych hier pre viacerých hráčov online. Ukázalo sa, že diferenciálne hry sú dôležité pri hinfinitnom robustnom riadení na odmietanie porúch a pri koordinácii činností medzi viacerými agentmi v sieťových tímoch. Táto kniha sa zameriava na kontinuálne časové systémy, ktorých dynamické modely možno odvodiť priamo z fyzikálnych princípov založených na Hamiltonovej alebo Lagrangeovej dynamike.

V celej knihe sú uvedené simulačné príklady a opísaných je niekoľko metód, ktoré nevyžadujú úplné informácie o stavovej dynamike. Optimálne adaptívne riadenie a diferenciálne hry podľa princípov posilňovania učenia je nevyhnutným doplnkom knižných políc strojných, elektrických a leteckých inžinierov pracujúcich v oblasti návrhu spätnoväzbových riadiacich systémov.