1 偶然误差的统计特性及精度指标

回顾正态分布

• 随机变量的分布函数、概率密度和分布律都能完整地描述随机变量
• 由随机变量的分布所确定的，能刻画随机变量某一方面的特征的常数称为数字特征

一维正态分布

$$f(x)=\frac{1}{\sqrt{2\pi }\sigma }\exp \left[-\frac{(x-\mu {)}^2}{2{\sigma }^2}\right]$$

二维正态分布

$$f(x,y)=\frac{1}{2\pi {\sigma }_x{\sigma }_y\sqrt{1-{\rho }^2}}\exp \left\{-\frac{1}{2(1-{\rho }^2)}\left[\frac{(x-{\mu }_x{)}^2}{{\sigma }_x^2}-2\rho \frac{(x-{\mu }_x)(x-{\mu }_y)}{{\sigma }_x{\sigma }_y}+\frac{(y-{\mu }_y{)}^2}{{\sigma }_y^2}\right]\right\}$$

其中 $\rho$ 为相关系数，$\rho =0$ 时 $f(x,y)=f(x)f(y)$。

对于正态分布，不相关 = 相互独立

$n$ 维正态分布的矩阵形式

$$f(X_1,X_2,\cdots ,X_n)=\frac{1}{(2\pi {)}^{\frac{n}{2}}|{\mathbf{D}}_{XX}{|}^{\frac{1}{2}}}\exp \left\{-\frac{1}{2}[\mathbf{X}-E(\mathbf{X}){]}^{\mathrm{T}}{\mathbf{D}}_{XX}^{-1}[\mathbf{X}-E(\mathbf{X})]\right\}$$

其中有

$$X_{n\times 1}=\left[\begin{array}{c}{X}_1\\ X_2\\ ⋮\\ X_n\end{array}\right],{E(\mathbf{X})}_{n\times 1}=\left[\begin{array}{c}E(X_1)\\ E(X_2)\\ ⋮\\ E(X_n)\end{array}\right],{{\mathbf{D}}_{XX}}_{n\times n}=\left[\begin{array}{cccc}{\sigma }_{X_1}^2& {\sigma }_{X_1{X}_2}& \cdots & {\sigma }_{X_1{X}_n}\\ {\sigma }_{X_1{X}_2}& {\sigma }_{X_2}^2& \cdots & {\sigma }_{X_2{X}_n}\\ ⋮& ⋮& \ddots & ⋮\\ {\sigma }_{X_1{X}_n}& {\sigma }_{X_2{X}_n}& \cdots & {\sigma }_{X_n}^2\end{array}\right]$$

偶然误差的统计特性

• 有界性：绝对值不会超过一定阈值
• 趋向性：大误差概率小，小误差概率大
• 对称性：正负误差频率大致相等
• 抵偿性：观测次数无限增大时理论平均值趋于零

精度的概念

• 精度：观测值 $X$ 与期望 $E(X)$ 之差
• 准确度：期望 $E(X)$ 与真值 $\tilde{X}$ 之差
  • 衡量标准：偏差 $\epsilon =\tilde{X}-E(X)$
• 精准度：观测值 $X$ 与真值 $\tilde{X}$ 之差
  • 衡量标准：均方误差 $\mathrm{MSE}(X)=E(X-\tilde{X}{)}^2$

NOTE

图	精度	准确度	精准度
(a)	低	高	低
(b)	高	低	低
(c)	高	高	高

衡量精度的指标

本课程后续介绍的内容一般不考虑系统误差，即认为 $E(X)=\tilde{X}$。

方差和中误差

定义中误差（即标准差）

$${\sigma }^2=D(X)=E\left\{[X-E(X){]}^2\right\}={\int }_{-\infty }^{+\infty }[x-E(X){]}^{2}f(x)\mathrm{d}x$$

考虑误差 $\Delta =E(X)-X$，则有

$${\sigma }^2=E({\Delta }^2)=\underset{n\to \infty }{\lim }\frac{1}{n}\sum {\Delta }_i^2$$

当观测值 $n$ 有限时，有中误差的估计值 $\hat{\sigma }$

$${\hat{\sigma }}^2=\frac{1}{n}\sum {\Delta }^2$$

平均误差

$$\theta =E(|\Delta |)=\underset{n\to \infty }{\lim }\frac{1}{n}\sum |{\Delta }_i|$$

当观测值 $n$ 有限时，有平均误差的估计值 $\hat{\theta }$

$$\hat{\theta }=\frac{1}{n}\sum |{\Delta }_i|$$

平均误差与中误差的关系

$$\begin{array}{rl}\theta & =E(|\Delta |)\\ & ={\int }_{-\infty }^{+\infty }|\Delta |f(\Delta )\mathrm{d}\Delta \\ & =2{\int }_0^{+\infty }\frac{\Delta }{\sqrt{2\pi }\sigma }\exp \left(-\frac{{\Delta }^2}{2{\sigma }^2}\right)\mathrm{d}\Delta \\ & =\frac{2}{\sqrt{2\pi }}{\int }_0^{+\infty }-\sigma \mathrm{d}\exp \left(-\frac{{\Delta }^2}{2{\sigma }^2}\right)\\ & =\frac{2\sigma }{\sqrt{2\pi }}{\exp \left(-\frac{{\Delta }^2}{2{\sigma }^2}\right)|}_0^{+\infty }\\ & =\sqrt{\frac{2}{\pi }}\sigma \end{array}$$

故有

$$\{\begin{array}{rl}\theta & =\sqrt{\frac{2}{\pi }}\sigma \approx 0.7979\sigma \approx \frac{4}{5}\sigma \\ \sigma & =\sqrt{\frac{\pi }{2}}\theta \approx 1.2533\theta \approx \frac{5}{4}\theta \end{array}$$

或然误差

定义或然误差 $\rho$ 为观测误差 $\Delta$ 在 $(-\rho ,+\rho )$ 内的概率为 $\frac{1}{2}$。

由于 $\Delta \sim N(0,{\sigma }^2)$，将其标准化为 $\eta =\frac{\Delta }{\sigma }\sim N(0,1)$，有 $\Phi \left(\frac{\rho }{\sigma }\right)-\Phi \left(-\frac{\rho }{\sigma }\right)=\frac{1}{2}$，得 $\frac{\rho }{\sigma }-0.6475$，故有

$$\{\begin{array}{rl}\rho & =0.6475\sigma \approx \frac{2}{3}\sigma \\ \sigma & =1.4826\rho \approx \frac{3}{2}\rho \end{array}$$

精度的衡量

$\sigma ,\theta ,\rho$ 三者都可作为衡量精度的指标。由于 $n$ 有限，只能求得估值，与理论值有差异。 如果 $n$ 很小，求得的估值都不可靠。对于同一组观测值，中误差能更灵敏地反映大误差的影响，且中误差具有明确的几何意义。

因此通常使用中误差衡量精度。

通常取 3 倍（少数取 2 倍）中误差作为偶然误差 $\Delta$ 的限差。

相对误差

$\sigma ,\theta ,\rho$ 等称为绝对误差。

观测值的中误差与观测值之比称为相对中误差。

$$\frac{{\sigma }_S}{S}=\frac{1}{S/{\sigma }_S}=\frac{1}{N}$$

通常化为 $\frac{1}{整百数}$ 的形式。

相对中误差 对应 相对极限误差。

TIP

• 观测误差的精度等于观测值的精度

  观测误差和观测值为加减常数的关系，离散程度是相同的

• 有系统误差不会引起观测值观测误差的精度变化

  系统误差为加减常数，不改变离散程度

例 1

对某量进行两组观测，它们的真误差为

• 第一组：$3,-3,2,4,-2,-1,0,-4,3,-2$
• 第二组：$0,-1,-7,2,1,-1,8,0,-3,1$

试求两组观测值的平均误差 ${\hat{\theta }}_1,{\hat{\theta }}_2$，中误差 ${\hat{\sigma }}_1,{\hat{\sigma }}_2$ 及协方差 ${\hat{\sigma }}_{12}$，并比较两组观测值的精度。

---

计算过程与结果：

$$\begin{array}{rl}{\hat{\theta }}_1& =\frac{1}{10}\sum |{\Delta }_{1i}|=2.4\\ {\hat{\theta }}_2& =\frac{1}{10}\sum |{\Delta }_{2i}|=2.4\\ {\hat{\sigma }}_1& =\sqrt{\frac{1}{10}\sum {\Delta }_{1i}^2}\approx 2.68\\ {\hat{\sigma }}_2& =\sqrt{\frac{1}{10}\sum {\Delta }_{2i}^2}\approx 3.61\\ {\hat{\sigma }}_{12}& =E({\Delta }_{1i}{\Delta }_{2i})-E({\Delta }_{1i})E({\Delta }_{2i})=-1.5\end{array}$$

第一组的中误差更小，精度更高。

例 2

已知两段距离的长度及其中误差分别为 $300.465m\pm 4.5\mathrm{cm}$ 和 $600.894m\pm 4.5\mathrm{cm}$，试说明这两个长度的真误差是否相等？它们的最大限差是否相等？它们的中误差是否相等？它们的相对精度是否相等？

---

• 真误差不相等。因为真值未知，真误差也未知。
• 中误差相等。二者的中误差均为 $4.5\mathrm{cm}$。
• 限差相等。通常限差取 3 倍中误差，中误差相等则限差相等。
• 相对精度不相等。前者相对精度为 $\frac{4.5}{30046.5}\approx \frac{1}{6700}$，后者相对精度为 $\frac{4.5}{60089.4}\approx \frac{1}{13400}$，后者相对精度更高。