《概率统计》多元随机变量

楔子

前两篇我们讨论的离散型和连续型随机变量都是单一变量,然而在现实当中,一个试验常常会涉及到多个随机变量。所谓多个随机变量是指在同一个试验结果之下产生的多个随机变量。这些随机变量的取值是由试验结果确定的,因此它们的取值会存在相互关联。这里我们先以离散型随机变量为例,将离散型随机变量的分布列和期望推广到多个随机变量的情况,并且进一步在此基础上讨论多元随机变量条件和独立的重要概念。

好了,此刻我们假设试验中不再只有一个随机变量,而是两个随机变量 X 和 Y,同时描述他们俩的取值概率,我们用什么方式?

联合分布列

基于之前讲过的离散型随机变量分布列的概念,这里为多元随机变量引入联合分布列,用 PX,Y 对其进行表示。设 (x,y) 是随机变量 X 和 Y 的一组可能取值。因此对应的 (x,y) 的概率质量就定义为事件 {X=x,Y=y} 的概率:

PX,Y?= P({X = x, Y = y}),也就是同时满足事件{X = x}和{Y = y}的概率。那么首先,来实际看一个联合分布列的表示。很明显,我们可以用一个二维表格来表示随机变量 X 和 Y 的联合分布列:

从这张表出发,就可以把联合分布列中所有的知识点都梳理一遍:

第一,可以从图中获得随机变量 X 和 Y 的任意一组取值的联合概率,例如:PX,Y(x3,y2) = P(X=x3,Y=y2)=3/20

第二,对于由随机变量 X 和 Y 构成的任意事件集合也是一样的,例如定义事件集合 A={(x1,y2),(x3,y2),(x4,y4)},那么很显然,我们直接就能从联合分布列中计算出事件集合的总概率:P((X,Y)∈A)=∑(x,y)∈APX,Y(x,y) = 1/20+3/20+1/20=5/20

第三,也是最朴实的一点,我们把二维表中所有的联合概率进行相加,得到的结果必然是 1,这也满足概率的归一性。

边缘分布列

如果我们把事件集合再设置的讲究一些,例如把事件集合 A 设置为表中的第一列,即 A={(x1,y1),(x1,y2),(x1,y3)},此时我们计算出来的事件集合 A 的总概率也就是概率 P(X=x1),对于这个概率,我们把它称为边缘概率:

P(X=x1) = 1/20 + 1/20 + 1/20 + 0 = 3/20

当然,更进一步,如果我们把随机变量 X 所有取值的边缘概率都计算出来,就能得到随机变量 X 的边缘分布列:

PX(x) = P(X=x) = ∑yP(X=x,Y=y) = ∑yPX,Y(x,y)

简单点,我们先求随机变量 X 每一个取值的边缘概率,就是把对应列的联合概率全部相加,然后再把 X=xi 的所有边缘概率放在一起,就是随机变量 X 的边缘分布列。

当然,随机变量 Y 的边缘分布也是类似的,这里我们就不再赘述了。

边缘概率和边缘分布列的 “边缘” 是什么含义?一句话描述就是,随机变量 X 的边缘分布列及其任意一个边缘概率的取值,都是只与自己有关,而与其他的随机变量(这里是随机变量 Y)无关了。

而对应的联合分布列和联合概率中的联合二字,意思也很明显,这里面的取值需由所有的随机变量,即由随机变量 X 和 Y 共同决定。

条件分布列

在前面我们学习了,条件可以给某些事件提供补充信息,由于随机变量的取值也是一种事件。同样的,条件也可以对随机变量取某些值提供补充信息。因此我们是不是能引入随机变量的条件分布列呢?当然是可以的。

条件可以指某个事件的发生,当然也可以包含其他随机变量的取值。还是来看一张图:

可以发现,在某个事件 A 发生的情况下,随机变量 X 发生的条件分布列很容易给出,还记得条件概率的表达式么,把它拿过来直接套用过来就可以了。

P(X = x|A)表示在事件A发生的前提下,X=x的概率,也可以写成PX|A(x),感觉是不是很熟悉?但是有些关键点我还是要再提一下,首先对于随机变量 X 不同的取值 x1,x2,x3,...,xn,{X=x}∩A 彼此之间互不相容,并且他们的并集是整个事件 A。

原文地址:https://www.cnblogs.com/traditional/p/12588733.html

时间: 2024-08-30 12:45:29

《概率统计》多元随机变量的相关文章

概率统计 - 08 随机变量及其概率分布

概率统计 - 08 随机变量及其概率分布 一.离散型随机变量及其分布律1.随机变量2.离散型随机变量3.两点分布4.二项分布5.泊松分布 二.连续型随机变量及其概率密度1.连续型随机变量2.均匀分布3.指数分布 三.分布函数与函数的分布1.分布函数2.函数的分布 四.正态分布1.正态分布的定义与性质2.正态分布的概率计算 概率统计 - 08 随机变量及其概率分布,码迷,mamicode.com 概率统计 - 08 随机变量及其概率分布,码迷,mamicode.com

概率统计

概率统计 欢迎关注我的博客:http://blog.csdn.NET/hit2015spring 条件概率 设和是任意两个事件,且,则称为事件在事件发生的条件下发生的条件概率.记作: \begin{equation} P(A|B)=\frac{P(AB)}{P(B)} \end{equation} 这里可以理解是,在事件发生的情况里面去寻找事件也在的例子,就是条件概率,有一种归一化的感觉,也有一种找出全局,再去挑局部的概念. 引入一个定理: (两个事件的积的概率)=(其中一个事件的概率)(另一个

概率统计21——指数分布和无记忆性

指数分布(Exponential distribution)是一种连续型概率分布,可以用来表示独立随机事件发生的时间间隔的概率,比如婴儿出生的时间间隔.旅客进入机场的时间间隔.打进客服中心电话的时间间隔.系统出现bug的时间间隔等等. 指数分布的由来 指数分布与泊松分布存在着联系,它实际上可以由泊松分布推导而来. 泊松分布(概率统计15)中已经介绍过泊松分布,除了作为二项分布的近似外,当独立事件发生的频率固定时,泊松分布还可以刻画算单位时间内事件发生次数的概率分布. 假设某个公司有一个带伤上线的

《概率统计》经典统计推断:寻找最大似然

统计推断的两大学派 在统计领域,有两种对立的思想学派:贝叶斯学派和经典学派(也称频率学派),它们之间最重要的区别就是如何看待被估计的未知参数.贝叶斯学派的观点是将其看成是已知分布的随机变量,而经典学派的观点是将其看成未知的待估计的常量. 贝叶斯统计推断 具体来说,贝叶斯推断方法是将未知参数看做是一个随机变量,它具备某种先验分布.在已知观测数据 x 的基础上,可以利用贝叶斯公式来推导后验概率分布,这样就同时包含人的先验知识以及观测值 x 所能提供的关于 θ 的新信息.贝叶斯统计推断的内容,我们这一

应用概率统计模板

apsart.cls 1 % !Mode:: "TeX:UTF-8" 2 %% 3 %% This is file `APSart.cls', 4 %% 5 %% Copyright 2006-2012 6 %% 7 %% ---------------------------------------------------------------------- 8 %% 9 %% It may be distributed and/or modified under the 10 %

概率统计 - 07 随机事件及其概率

概率统计 - 07 随机事件及其概率 一.随机事件 1.随机试验与样本空间 2.随机事件与集合 3.事件的关系与运算 二.事件的概率 1.古典概率 2.概率的性质 3.古典概率的计算 4.概率的统计定义 三.事件的独立性 1.条件概率 2.乘法公式 3.事件的独立性 4.全概率公式 概率统计 - 07 随机事件及其概率,码迷,mamicode.com

概率统计----协方差

????机器视觉中,常用到协方差相关的知识,特别是基于统计框架下的机器学习算法,几乎无处不在的用到它,因此了解协方差是再基础不过的了.这里推荐一个很不错的基础教程:协方差的意义和计算公式 均值和方差 引入协方差之前,先简单回顾下概率统计中的两个重要基础概念:均值和方差.均值,顾名思义就是一堆样本的平均值,方差就是样本和均值的平均偏差.对于给定的n个样本,那么样本集的均值和方差可以分别这样来定义: 名称 公式 解释 均值 样本的平均值,即样本的中心点,例如{1 2,3,4}的均值是2.5 标准差

统计思维-程序员数学之概率统计-云图

封面 简介 本书是一本全新的概率统计入门教材,重点介绍如何用统计学方法分析大型数据集.本书会介绍如何使用计算机实现各种统计方法,这有诸多优点. 学生可以通过编写程序来深化和检查自己对概念的理解. 例如, 编写计算最小二乘拟合. 残差和判定系数的函数, 编写和测试这些代码需要他们正确理解相关概念,消除各种可能的误解. 学生能够通过计算实验来验证统计学上的一些定理. 例如, 生成服从各种分布的样本来验证中心极限定理(Central Limit Theorem,CLT). 当发现服从帕累托分布的样本并

《统计思维程序员数学之概率统计第2版》中英文PDF+数据代码+《面向数据科学家的实用统计学》中英文PDF+源代码+学习总结

作为一个程序员,我认为,不需要把数学全部学完,要选择合适自己的资料. <统计思维:程序员数学之概率统计(第2版)>以程序模拟的方式而不是数学教材上毫无来由的定理解释了大多数统计上的基本概念.<统计思维:程序员数学之概率统计(第2版)>,中文PDF,带书签目录,204页,文字可以复制.<统计思维:程序员数学之概率统计(第2版)>,英文PDF,带书签目录,225页,文字可以复制. 配套python源代码+数据. 下载:https://pan.baidu.com/s/1Jju