本書介紹了馬爾科夫決策過程及其它相關(guān)方法在公共安全領(lǐng)域的應(yīng)用，主要面向安全科學(xué)與工程專業(yè)的高年級本科生，作為其安全決策方法類課程的教材，同時也可作為其它學(xué)科運(yùn)籌學(xué)馬爾科夫過程部分的參考資料。

在廣與深的關(guān)系上，本書從處理大多數(shù)實(shí)際問題使用的馬爾科夫假設(shè)開始，圍繞著馬氏決策過程和動態(tài)規(guī)劃貝爾曼方程，依次介紹有限狀態(tài)問題、無限狀態(tài)問題和折扣成本問題，之后分別針對馬氏過程的各個要素，從狀態(tài)集、動作集等方面向外擴(kuò)展出Q學(xué)習(xí)、近似線性規(guī)劃、隱馬爾科夫模型和部分可觀測馬爾科夫模型，并用一章簡略介紹其它常用決策算法，這使得本書在重點(diǎn)突出的同時具有一定的廣度；

在難與易的關(guān)系上，本書力求避免復(fù)雜艱深的數(shù)學(xué)概念，書中的定理證明和公式推導(dǎo)只需要最基本的高等數(shù)學(xué)知識，同時對于有關(guān)數(shù)學(xué)內(nèi)容以附錄形式做出了說明，此外，書中每一個部分都有緊貼內(nèi)容的例子輔助理解，同時設(shè)有一章專門討論相關(guān)方法用于安全領(lǐng)域決策的典型案例，使得讀者能清楚地理解本書意圖闡述的內(nèi)容。