text: 隨機控制使系統完成預期的控制任務。隨機控制可能是配合離散時間系統，也可能是連續時間系統。確定性等效.隨機控制中最常被探討的控制器是線性平方高斯控制的最佳控制律是控制器觀測值的線性函式。若有任何和上述假設不同的地方：非線性狀態方程、非二次目標函式、或是系統為分散式控制系統都會讓確定性等效性質不成立。例如在分散式系統中的Witsenhausen反例就是說明確定性等效性質在分散式系統中不成立。離散時間系統.在離散時間系統中，控制器會在每個時間週期觀測狀態變數，從最後的時間一直倒退迭代到目前時間。考慮離散時間系統，其傳遞矩陣或控制響應矩陣中的引數有不確定性，但仍然是線性狀態函式以及二次性目標函式，仍然可以用每一個時間週期的解，用後向迭代的方式求解Riccati方程，不過可能沒有確定性等效的特性ch.13。若離散時間系統的目標函式不是二次性的，但是隻要處理加性不確定性，也可以進行隨機控制，不過會比較複雜。例子.以下是一個典型的離散時間隨機線性二次控制問題，要最小化:ch. 13;formula_1其中E1為在"y"0條件下的期望值運運算元，上標"T"表示是轉置矩陣，"S"為時間區間，其狀態方程如下formula_2其中"y"是"n" × 1的可觀察狀態變數向量，"u"是"k" × 1的控制變數向量，"A""t"是時間"t"時的隨機"n" × "n"狀態轉移矩陣的實現，"B""t"是時間t時的隨機"n" × "k"控制乘數矩陣的實現，"Q" ("n" × "n")和"R" ("k" × "k")是已知的正定費用矩陣。假設"A"和"B"的每個元素都是在時間上聯合的獨立同分布，因此期望值運算不用考慮時間的條件。可以用貝爾曼方程得到每個時間的最佳控制解:ch. 13formula_3配合對稱正定cost-to-go矩陣"X"，從formula_4開始，以倒退時間方式迭代，方程式為formula_5這個就是此問題離散時間下的動態Riccati方程。有關矩陣"A"和"B"中未知引數所需要知道的資訊只有每個矩中每個元素的期望值、方差，同個矩陣不同元素的共變異數，以及不同矩陣中元素的共變異數。若在狀態方程中有平均值為0、獨立且相同分佈的加性擾動出現，只要和矩陣"A"和"B"的元素沒有關係，此擾動不會影響最佳方程。假如擾動和矩陣有關，每個時間的最佳控制解會包括額外的加性常數向量。若加性常數向量出現在狀態方程中，則每個時間的最佳控制解會再包括額外的加性常數向量。"X"的穩態特徵若存在，會和"S"延伸到無限大的的無限時間問題相關。可以用重覆迭代動態方程中的"X"，一直到收斂為止來計算，此時的動態方程中的"X"就不用有關時間的下標了。連續時間.若模型是連續時間下的系統，控制器知道系統在每一個時間下的狀態。其目標可能是最大化狀態變數凹函式的在時間區間0到最後時間T之間的積分。隨著時間的演進，會持續的觀測到新的值，也會依最佳化的方式來調整控制變數。隨機模型預測控制.在，有二種隨機系統的模型預測控制：強健模型預測控制。強健模型預測控制是較保守的方式，在最佳化過程中會考慮最差的情形，不過此方式和其他強健控制類似，會讓整個控制器的效能變差，只適用不確定性有明確範圍在系統。而隨機模型預測控制是用軟性的限制。是用機率的不等式來讓違反限制的機率不會超過一定範圍。金融的應用.在金融領域連續系統的研究中，隨機微分方程的狀態變數多半是財富或是淨值，控制變數是不同時間下各資產的配置情形。給定任一時間下的，財富變化的決定因素是資產的隨機收益以及無風險資產的利率。隨機控制的領域在1970年代開始大幅發展，有不少人應用在金融上。Robert Merton用隨機控制來研究安全資產以及風險資產的。以及布萊克-舒爾茲模型改變了金融特質。有影響力的相關數學教科書包括及Rishel合著的教科書、以及Fleming和合著的教科書。Jerome Stein將這些技巧應用在2007年–2008年環球金融危機。在最後日期"T"的淨值期望值對數的最大值，和財富成份的隨機過程有關。在連續系統中，伊藤引理是主要分析工具。若是要探討在時間(0,"T")內凹函式積分的最大值，會使用動態規劃。這裡沒有類似較舊的確定等效關係，因為控制變數的係數也是隨機性的。
metadata: erhwenkuo/wikipedia-zhtw
metadata: 隨機控制
metadata: https://zh.wikipedia.org/wiki?curid=6284554