本書全面總結(jié)了離散時間、一般狀態(tài)空間的馬爾可夫過程理論,特別給出了通常的遍歷性和幾何遍歷性的判別準(zhǔn)則,以及馬爾可夫過程理論在通訊網(wǎng)絡(luò)等工程技術(shù)領(lǐng)域中的大量應(yīng)用實例。本書起點不高，論述詳盡，條理清楚，曾獲得1994年度ORSA/TIMS“應(yīng)用概率優(yōu)秀出版物獎”。第2版保留了第一版的內(nèi)容和風(fēng)格，并新增“第2版結(jié)束語”一章。該章內(nèi)容包括幾何遍歷性和譜理論，仿真和MCMC，連續(xù)時間模型。