• 离散型随机变量 的期望:二、期望和方差 - 图1

        若右侧级数不收敛,则期望不存在。

      • 连续性随机变量 的期望: 二、期望和方差 - 图2

        若右侧极限不收敛,则期望不存在。

    1. 定理:对于随机变量 ,设 二、期望和方差 - 图3 也为随机变量, 是连续函数。

      • 二、期望和方差 - 图4 为离散型随机变量,若 的期望存在,则:二、期望和方差 - 图5

        也记做: 。

      • 二、期望和方差 - 图6 为连续型随机变量,若 的期望存在,则 :二、期望和方差 - 图7

        也记做: 。

      该定理的意义在于:当求 二、期望和方差 - 图8 时,不必计算出 的分布,只需要利用 二、期望和方差 - 图9 的分布即可。

      该定理可以推广至两个或两个以上随机变量的情况。对于随机变量,假设 二、期望和方差 - 图10 也是随机变量, 为连续函数,则有:二、期望和方差 - 图11 。也记做: 。

    1. 期望性质:

      • 常数的期望就是常数本身。

      • 对常数 二、期望和方差 - 图12 有 : 。

      • 对两个随机变量 二、期望和方差 - 图13,有: 。

        该结论可以推广到任意有限个随机变量之和的情况。

      • 对两个相互独立的随机变量,有:二、期望和方差 - 图14

        该结论可以推广到任意有限个相互独立的随机变量之积的情况。

    1. 对随机变量 ,若 二、期望和方差 - 图15 存在,则称它为 的方差,记作 二、期望和方差 - 图16

      的标准差为方差的开平方。即:

      二、期望和方差 - 图17

    2. 根据定义可知:

    3. 对于一个期望为 二、期望和方差 - 图18, 方差为 的随机变量 二、期望和方差 - 图19,随机变量 的数学期望为0,方差为1。 称 二、期望和方差 - 图20 为 的标准化变量。

    4. 方差的性质:

      • 常数的方差恒为 0 。

      • 对常数 二、期望和方差 - 图21 ,有 。

      • 对两个随机变量 二、期望和方差 - 图22,有:

        二、期望和方差 - 图23 和 相互独立时,有 二、期望和方差 - 图24 。这可以推广至任意有限多个相互独立的随机变量之和的情况。

      • 的充要条件是 二、期望和方差 - 图25 以概率1取常数。

    1. 对于二维随机变量 ,可以讨论描述 二、期望和方差 - 图26 与 之间相互关系的数字特征。

      • 定义 二、期望和方差 - 图27 为随机变量 与 二、期望和方差 - 图28 的协方差,记作 。
      • 定义 二、期望和方差 - 图29 为随机变量 与二、期望和方差 - 图30的相关系数,它是协方差的归一化。
    2. 由定义可知:

    3. 协方差的性质:

      • 二、期望和方差 - 图31, 为常数。
      • 二、期望和方差 - 图32
      • 二、期望和方差 - 图33
    4. 协方差的物理意义:

      • 协方差如果为正,则说明两个随机变量同时趋向于取较大的值或者同时趋向于取较小的值;如果为负,则说明一个随变量趋向于取较大的值,另一个随机变量趋向于取较小的值。

      • 两个随机变量的独立性可以导出协方差为零。但是两个随机变量的协方差为零无法导出独立性。

        因为独立性也包括:没有非线性关系。有可能两个随机变量是非独立的,但是协方差为零。如:假设随机变量 。定义随机变量 二、期望和方差 - 图34 的概率分布函数为:

    5. 相关系数的物理意义:考虑以随机变量 二、期望和方差 - 图35 的线性函数 来近似表示 二、期望和方差 - 图36。以均方误差

      来衡量以 二、期望和方差 - 图37 近似表达 的好坏程度。 二、期望和方差 - 图38 越小表示近似程度越高。

      为求得最好的近似,则对 分别取偏导数,得到:

      二、期望和方差 - 图39

      因此有以下定理:

      • 二、期望和方差 - 图40 是绝对值)。
      • 的充要条件是:存在常数 二、期望和方差 - 图41 使得 。
    6. 二、期望和方差 - 图42 较大时, 较小,意味着随机变量 二、期望和方差 - 图43 和 联系较紧密。于是 二、期望和方差 - 图44 是一个表征 、二、期望和方差 - 图45 之间线性关系紧密程度的量。

    7. 当 时,称 二、期望和方差 - 图46 和 不相关。

      • 不相关是就线性关系来讲的,而相互独立是一般关系而言的。
      • 相互独立一定不相关;不相关则未必独立。
    1. 二、期望和方差 - 图47 和 是随机变量。

      • 二、期望和方差 - 图48 存在,则称它为 的 二、期望和方差 - 图49 阶原点矩,简称 阶矩。
      • 二、期望和方差 - 图50 存在,则称它为 的 二、期望和方差 - 图51 阶中心矩。
      • 若 存在,则称它为 二、期望和方差 - 图52 和 的 二、期望和方差 - 图53 阶混合矩。
      • 若 存在,则称它为 二、期望和方差 - 图54 和 的 二、期望和方差 - 图55 阶混合中心矩。

      因此:期望是一阶原点矩,方差是二阶中心矩,协方差是二阶混合中心矩。

    2. 协方差矩阵:

      • 二维随机变量 有四个二阶中心矩(假设他们都存在),记作:

        二、期望和方差 - 图56

        称矩阵

        为随机变量 二、期望和方差 - 图57 的协方差矩阵。

      • 设 维随机变量 二、期望和方差 - 图58 的二阶混合中心矩 都存在,则称矩阵

        二、期望和方差 - 图59

        为 维随机变量 二、期望和方差 - 图60 的协方差矩阵。

        由于 因此协方差矩阵是个对称阵。