马尔科夫链简介

核心三要素

状态空间states space:状态是有限的,只能来自状态空间里的状态
无记忆性memorylessness:当期选择的概率只受上期状态影响
转移矩阵Transition Matrix:可以把上面的转移概率数据放$2*2$的矩阵中

应用

参考

【数之道 18】"马尔可夫链"是什么?了解它只需5分钟!_哔哩哔哩_bilibili