===== 随机游走 ===== 有一类随机游走问题定义如下:在数轴中 $[0,n]$ 之间的整点上随机走动,走到 $0$ 或点 $n$ 时停止。否则,在点 $i$ 处,分别有 $f(i),g(i),h(i)$ 的概率向左走一步,不动,或者向右走一步,其中 $f(i)+g(i)+h(i)=1$。 首先可以计算出 $P(i)$,表示从点 $i$ 走到点 $n$ 的概率。那么有 ) $$ P(i)= \begin{cases} &0&(i=0)\\ &f(i)P(i-1)+g(i)P(i)+h(i)P(i+1)&(0N) \end{cases} $$ 形象地说,当随机时间 $N$ 达到之后,随机过程即停止,不再发生变化。 ==== 引理 1 ==== 若 $N$ 是鞅 $\{X_{n}\}$ 的随机时间,则停止过程 $\{\overline{X}_{n}\}$ 也是鞅。 因此 $E[\overline{X}_{n}]=E[\overline{X}_{0}]=E[X_{0}]$。 ==== 定理 1(停时定理) ==== 若 $N$ 是鞅 $\{X_{n}\}$ 的停时,那么(在一定的正则性条件下)$E[X_{N}]=E[X_{0}]$。 这是一个重要的定理,为后面的方法奠定了基础。 ==== 基本思想 ==== 假设有一个随机过程 $\{X_{n},n\ge0\}$ 及其停时 $T$,现在需要求出 $E[T]$。但是通常来说 $E(T)$ 并不好求。但是对于随机游走这样的随机过程,不妨构造 $X$ 的一个势函数 $\phi(X)$,使得 $$ \begin{aligned} &E[\phi(X_{n+1})-\phi(X_{n})|X_{0},\ldots,X_{n}]=-1&(n