随机变量的数字特征

本文内容主要参考自

1、《概率论与数理统计》第2版,徐全智、吕恕编,高等教育出版社;

2、黄庆明老师课件。


第一部分数学期望

一、随机变量的数学期望

定义设离散型随机变量

随机三个总权重为100的数 随机变量的三个数字_概率论

的分布律为

随机三个总权重为100的数 随机变量的三个数字_协方差_02


随机三个总权重为100的数 随机变量的三个数字_协方差_03

,则称

随机三个总权重为100的数 随机变量的三个数字_概率论_04

为随机变量

随机三个总权重为100的数 随机变量的三个数字_概率论

数学期望均值


定义 设连续型随机变量

随机三个总权重为100的数 随机变量的三个数字_概率论

的概率密度为

随机三个总权重为100的数 随机变量的三个数字_随机三个总权重为100的数_07

,若

随机三个总权重为100的数 随机变量的三个数字_方差_08

,则称

随机三个总权重为100的数 随机变量的三个数字_概率论_09

为随机变量

随机三个总权重为100的数 随机变量的三个数字_概率论

数学期望均值

 

二、随机变量的函数的数学期望

定理

随机三个总权重为100的数 随机变量的三个数字_期望_11

是随机变量

随机三个总权重为100的数 随机变量的三个数字_概率论

的函数

随机三个总权重为100的数 随机变量的三个数字_期望_13


随机三个总权重为100的数 随机变量的三个数字_随机三个总权重为100的数_14

是连续函数)。(1)若

随机三个总权重为100的数 随机变量的三个数字_概率论

是离散型随机变量,其分布律为

随机三个总权重为100的数 随机变量的三个数字_协方差_02

如果

随机三个总权重为100的数 随机变量的三个数字_期望_17

绝对收敛,则有

随机三个总权重为100的数 随机变量的三个数字_随机三个总权重为100的数_18

(2)若

随机三个总权重为100的数 随机变量的三个数字_概率论

是连续性随机变量,其密度函数是

随机三个总权重为100的数 随机变量的三个数字_期望_20

,如果

随机三个总权重为100的数 随机变量的三个数字_方差_21

随机三个总权重为100的数 随机变量的三个数字_协方差_22

利用定理1,我们可不必求出随机变量

随机三个总权重为100的数 随机变量的三个数字_概率论

的分布(分布律或概率密度),直接利用随机变量

随机三个总权重为100的数 随机变量的三个数字_概率论

的已知分布即可。


定理推广到多个随机变量的情况。

定理

随机三个总权重为100的数 随机变量的三个数字_期望_25

是二维随机变量,

随机三个总权重为100的数 随机变量的三个数字_期望_26

也是随机变量。(1)若

随机三个总权重为100的数 随机变量的三个数字_期望_25

是离散型随机变量,其联合分布律为

随机三个总权重为100的数 随机变量的三个数字_方差_28

则当

随机三个总权重为100的数 随机变量的三个数字_随机三个总权重为100的数_29

时,

随机三个总权重为100的数 随机变量的三个数字_随机三个总权重为100的数_30

(2)若

随机三个总权重为100的数 随机变量的三个数字_期望_25

是连续型随机变量,其联合概率密度为

随机三个总权重为100的数 随机变量的三个数字_方差_32

,则当

随机三个总权重为100的数 随机变量的三个数字_概率论_33

随机三个总权重为100的数 随机变量的三个数字_随机三个总权重为100的数_34

 

三、数学期望的性质

(1)设

随机三个总权重为100的数 随机变量的三个数字_随机三个总权重为100的数_35

是常数,则有

随机三个总权重为100的数 随机变量的三个数字_期望_36

;(2)设

随机三个总权重为100的数 随机变量的三个数字_概率论

是随机变量,

随机三个总权重为100的数 随机变量的三个数字_随机三个总权重为100的数_35

是常数,则有

随机三个总权重为100的数 随机变量的三个数字_概率论_39

;(3)设

随机三个总权重为100的数 随机变量的三个数字_概率论


随机三个总权重为100的数 随机变量的三个数字_期望_41

是两个随机变量,则有

随机三个总权重为100的数 随机变量的三个数字_概率论_42

;(4)设

随机三个总权重为100的数 随机变量的三个数字_概率论


随机三个总权重为100的数 随机变量的三个数字_期望_41

是相互独立的随机变量,则有

随机三个总权重为100的数 随机变量的三个数字_协方差_45

.


第二部分随机变量的方差

一、随机变量的方差

定义 1

随机三个总权重为100的数 随机变量的三个数字_概率论

是随机变量,若

随机三个总权重为100的数 随机变量的三个数字_协方差_47

存在,则称

随机三个总权重为100的数 随机变量的三个数字_协方差_48


随机三个总权重为100的数 随机变量的三个数字_概率论

方差,称

随机三个总权重为100的数 随机变量的三个数字_概率论_50


随机三个总权重为100的数 随机变量的三个数字_概率论

标准差(或均方差)。方差

随机三个总权重为100的数 随机变量的三个数字_方差_52

是随机变量

随机三个总权重为100的数 随机变量的三个数字_概率论

的数学期望,当

随机三个总权重为100的数 随机变量的三个数字_概率论

是离散型随机变量,则

随机三个总权重为100的数 随机变量的三个数字_方差_55


随机三个总权重为100的数 随机变量的三个数字_概率论

是连续型随机变量,则

随机三个总权重为100的数 随机变量的三个数字_随机三个总权重为100的数_57

 

方差常用计算公式:

随机三个总权重为100的数 随机变量的三个数字_协方差_58


随机三个总权重为100的数 随机变量的三个数字_协方差_59



二、方差的性质

(1)若

随机三个总权重为100的数 随机变量的三个数字_随机三个总权重为100的数_35

是常数,则

随机三个总权重为100的数 随机变量的三个数字_期望_61

;(2)设随机变量

随机三个总权重为100的数 随机变量的三个数字_概率论

的方差存在,

随机三个总权重为100的数 随机变量的三个数字_随机三个总权重为100的数_35

是常数,有

随机三个总权重为100的数 随机变量的三个数字_方差_64

;(3)设随机变量

随机三个总权重为100的数 随机变量的三个数字_概率论


随机三个总权重为100的数 随机变量的三个数字_期望_41

的方差存在,有

随机三个总权重为100的数 随机变量的三个数字_随机三个总权重为100的数_67

又若

随机三个总权重为100的数 随机变量的三个数字_概率论


随机三个总权重为100的数 随机变量的三个数字_期望_41

独立,则

随机三个总权重为100的数 随机变量的三个数字_方差_70

(4)随机变量

随机三个总权重为100的数 随机变量的三个数字_概率论

的方差为零的充分必要条件是

随机三个总权重为100的数 随机变量的三个数字_概率论

以概率为1取常数

随机三个总权重为100的数 随机变量的三个数字_方差_73

,即

随机三个总权重为100的数 随机变量的三个数字_协方差_74


三、标准化随机变量

设随机变量

随机三个总权重为100的数 随机变量的三个数字_概率论

的数学期望存在,方差

随机三个总权重为100的数 随机变量的三个数字_期望_76

,令

随机三个总权重为100的数 随机变量的三个数字_方差_77

则有

随机三个总权重为100的数 随机变量的三个数字_期望_78

其中,

随机三个总权重为100的数 随机变量的三个数字_概率论_79

称为随机变量

随机三个总权重为100的数 随机变量的三个数字_概率论

标准化随机变量



 

随机三个总权重为100的数 随机变量的三个数字_概率论_81

第三部分 协方差

一、协方差的定义

现描述两个随机变量之间关系的数字特征。

定义若关于随机变量

随机三个总权重为100的数 随机变量的三个数字_期望_25

的数学期望

随机三个总权重为100的数 随机变量的三个数字_协方差_83

存在,则称

随机三个总权重为100的数 随机变量的三个数字_概率论_84

为随机变量

随机三个总权重为100的数 随机变量的三个数字_概率论


随机三个总权重为100的数 随机变量的三个数字_期望_41

的协方差。

特别有

随机三个总权重为100的数 随机变量的三个数字_方差_87

另外,方差的性质(3),又可以写作

随机三个总权重为100的数 随机变量的三个数字_期望_88

二、协方差的性质

(1)对称性:

随机三个总权重为100的数 随机变量的三个数字_方差_89

(2)齐性:

随机三个总权重为100的数 随机变量的三个数字_协方差_90

是常数;(3)可加性:

随机三个总权重为100的数 随机变量的三个数字_方差_91

常利用下述公式

随机三个总权重为100的数 随机变量的三个数字_方差_92

三、协方差矩阵

定义设n维随机变量

随机三个总权重为100的数 随机变量的三个数字_概率论_93

的协方差存在,称矩阵

随机三个总权重为100的数 随机变量的三个数字_期望_94

为n维随机变量

随机三个总权重为100的数 随机变量的三个数字_概率论_93

协方差矩阵。协方差矩阵

随机三个总权重为100的数 随机变量的三个数字_概率论_96

满足:(1)

随机三个总权重为100的数 随机变量的三个数字_期望_97

(2)

随机三个总权重为100的数 随机变量的三个数字_方差_98

可见协方差矩阵是一个对称矩阵。

协方差矩阵说明随机向量X的各分量的分散情况,也可这样写:

随机三个总权重为100的数 随机变量的三个数字_协方差_99


其中,协方差矩阵的各分量为:


随机三个总权重为100的数 随机变量的三个数字_概率论_100



若i!=j,则λij是X的第i个分量与第j个分量的协方差;

若i = j,则λii是随机变量Xi的方差,即协方差矩阵的对角分量。

第四部分相关系数

若随机变量

随机三个总权重为100的数 随机变量的三个数字_方差_101

的协方差及方差均存在,而且

随机三个总权重为100的数 随机变量的三个数字_随机三个总权重为100的数_102

,则称

随机三个总权重为100的数 随机变量的三个数字_协方差_103

为随机变量

随机三个总权重为100的数 随机变量的三个数字_协方差_104


随机三个总权重为100的数 随机变量的三个数字_协方差_105

的相关系数。

上述公式可以写成下面的形式

随机三个总权重为100的数 随机变量的三个数字_期望_106

即相关系数

随机三个总权重为100的数 随机变量的三个数字_期望_107


随机三个总权重为100的数 随机变量的三个数字_协方差_104


随机三个总权重为100的数 随机变量的三个数字_协方差_105

相应的标准化随机变量的协方差。定义 若随机变量

随机三个总权重为100的数 随机变量的三个数字_方差_101

相关系数存在,且

随机三个总权重为100的数 随机变量的三个数字_协方差_111

,则称

随机三个总权重为100的数 随机变量的三个数字_协方差_104

随机三个总权重为100的数 随机变量的三个数字_协方差_105

不相关;若

随机三个总权重为100的数 随机变量的三个数字_随机三个总权重为100的数_114

,则称

随机三个总权重为100的数 随机变量的三个数字_协方差_104

随机三个总权重为100的数 随机变量的三个数字_协方差_105

正相关;若

随机三个总权重为100的数 随机变量的三个数字_期望_117

,则称

随机三个总权重为100的数 随机变量的三个数字_协方差_104

随机三个总权重为100的数 随机变量的三个数字_协方差_105

负相关需要特别指出:称随机变量

随机三个总权重为100的数 随机变量的三个数字_协方差_104


随机三个总权重为100的数 随机变量的三个数字_协方差_105

不相关,仅指它们不存在线性相关关系。定理  如果随机变量

随机三个总权重为100的数 随机变量的三个数字_协方差_104


随机三个总权重为100的数 随机变量的三个数字_协方差_105

相互独立,则

随机三个总权重为100的数 随机变量的三个数字_协方差_104


随机三个总权重为100的数 随机变量的三个数字_协方差_105

不相关。

此定理的逆定理不存在。


补充:


随机三个总权重为100的数 随机变量的三个数字_概率论_126

,可得到

随机三个总权重为100的数 随机变量的三个数字_方差_127


由于二维正态随机变量相互独立的充分必要条件是

随机三个总权重为100的数 随机变量的三个数字_方差_128

,亦即它们相互独立等价于它们不相关。



后续会添加一些对常见分布的总结,敬请期待!