【抽样分布】

在使用统计量进行统计推断时，常需要知道它的分布，统计量的分布被称为抽样分布

当总体的分布函数已知时，抽样分布是确定的，但要求出统计量的精确分布，一般来说是比较困难的

【统计量】

样本是进行统计推断的依据，在实际应用中，往往不是直接使用样本本身，而是针对不同的问题构造样本的适当函数，利用这些样本的函数进行统计推断

设 $X_1,X_2,\cdots,X_n$，是来自总体 $X$ 的一个样本，$g(X_1,X_2,\cdots,X_n)$ 是 $X_1,X_2,\cdots,X_n$ 的函数，若 $g$ 中不含未知参数，则称 $g(X_1,X_2,\cdots,X_n)$ 是一统计量

【概率论与数理统计】

概率论和数理统计解决的问题是互逆的

假设有一个具有不确定性的过程，然后这个过程可以随机的产生不同的结果，那么概率论和数理统计的区别可以描述为：

【更新过程】

Poisson 过程的到达时间间隔是相互独立同服从指数分布的随机变量序列，那么一种自然的推广是考虑到达时间间隔相互独立同分布，但分布函数任意的计数随机过程，这样的计数过程即更新过程

设 $\{T_n,n=1,2,\cdots\}$ 是一列相互独立同分布的非负随机变量，令

【引入】

泊松（Poisson）过程是一类直观意义很强且极为重要的计数过程，其应用范围遍布各个领域

考虑一个来到某服务点要求服务的顾客流，顾客到达服务点的到达过程，即可认为是一个 Poisson 过程，当抽象的服务点和顾客流有着不同含义时，即可得到不同的 Poisson 过程

【概述】

1905 年，统计学家卡尔·皮尔逊公开求解随机游走问题（Random Walk Problem）：如果一个醉汉走路时每步的方向和大小完全随机，经过一段时间之后，在什么地方找到他的可能性最大？

1921年，匈牙利数学家 Polya 在研究随机游走问题后，证明了一维或二维随机游走具有常返性的随机游走定理，并得出了随机游走的醉汉最终会返回原点的结论。日本数学家角谷静夫将 Polya 随机游走定理表述为：喝醉的酒鬼总能找到回家的路，因此，随机游走定理也被称为酒鬼回家定理

【等价类】

对于马尔可夫链 $\{X_n,n\geq0\}$，根据互通这一等价关系，可以将状态空间 $S$ 划分为有限个或可列无限个互不相交的子集 $S_1,S_2,\cdots$ 的并，即

显然，同一子集 $S_n$ 中的所有状态都互通，不同子集 $S_m$ 和 $S_n$ 中的状态不互通

【Doeblin 公式】

设马尔可夫链 $\{X_n,n\geq0\}$，对任意 $i,j\in S$，有

进一步，可推得

【可逆马尔可夫链】

设马尔可夫链 $\{X_n,n\geq0\}$ 的转移概率矩阵为 $P$，若有状态分布 $\pi=(\pi_1,\pi_1,\cdots)^T$，对任意状态 $i,j\in S$，对任意一个时刻 $t$ 满足：

则称该马尔可夫链为可逆马尔可夫链（Reversible Markov Chain）

【状态的基本属性】

首达概率与迟早概率

设马尔可夫链 $\{X_n,n\geq0\}$，当 $i,j\in S$，称：