В последнее время в теории цепей Маркова получено много новых результатов. Активную роль в развитии этой области играют именно прикладные исследования. Тема этой книги критически важна как для современных приложений (финансовая математика, менеджмент, телекоммуникации, обработка сигналов, биоинформатика), так и для классических (актуарная математика, социология, инженерия). Авторы собрали большое количество упражнений, снабженных полными решениями. Необходимые теоретические сведения приводятся по ходу изложения; кроме того, текст снабжен историческими отступлениями. Настоящее издание, по сравнению с изданием 2010 г., существенно переработано и выходит в двух частях. Часть I в основном ориентирована на студентов и преподавателей, часть II - на аспирантов и научных работников.