概率论

概率论
Meng Hoo【MachoMeng:由于服务器在国外,加载可能会有些缓慢,请耐心等待】
前言:
力学如力耕,勤惰尔自知。但使书种多,会有岁稔时。
于万千的人群中,于无际涯的时光里,没有早一步,也没有晚一步,我们在此处相遇。有几许命运,也有几分注定。在下面六十四个学时里,望我们彼此尊重,互相帮助,共同努力,共同进步!
——李庆芳老师寄语
绪论:
内容太多,挑了一个有意思的:
《红楼梦》第六十二回 憨湘云醉眠芍药裀 呆香菱情解石榴裙【探春笑道:“倒有些意思,一年十二个月,月月有几个生日。人多了,便这等巧,也有三个一日、两个一日的。】
问题:生日,只论某月某日,不论某年,假定一年有365天,问366个人中至少有两个人在同一天过生日的可能性有多大?那64个人中至少有两个人在同一天过生日的可能性又有多大? (大还是小?)
结果:大
目录(默认关闭,点击展开):
展开目录找的更快
点击展开目录
第一章:基本概念
一、随机试验:
1、随机现象
- 确定性现象:在一定条件下必然发生的现象称为确定性现象.
- 随机现象:在一定条件下可能出现也可能不出现的现象称为随机现象.
2、随机试验
- 可以在相同的条件下重复地进行;
- 每次试验的可能结果不止一个,并且能事先明确试验的所有可能结果
- 进行一次试验之前不能确定哪一个结果会出现。
二、样本空间、随机事件
1、样本空间
- 随机试验
的所有可能结果组成的集合称为 的样本空间。记为
2、样本点
- 样本空间的元素,即试验
的每一个结果,称为样本点.
3、随机事件
- 随机试验
的样本空间 的子集称为 的随机事件, 简称事件。 - 每次实验中,当且仅当这一子集中的一个 样本点出现 时称这一事件发生.由一个样本点组成的单点集, 称为 基本事件.
- 样本空间
包含所有的样本点. 它是 自身的子集,在每次实验中它总是发生的, 称为 必然事件。 - 空集
不包含任何点。它也作为样本空间的子集,它在每次实验中都不发生, 称为 不可能事件。
必然事件的对立面是不可能事件,不可能事件的对立面是必然事件, 它们互称为 对立事件.
4、对立事件和互斥事件
互斥事件:事件
对立事件:其中必有一个发生的两个互斥事件叫做对立事件。非此即彼!
对立一定是互斥的,但互斥不一定是对立。即对立是互斥的特殊形式。
5、随机事件间的关系及运算
设试验
| 符号 | 解释 | 含义 |
|---|---|---|
| 事件B包含事件A(或者事件A含于事件B) | A发生必然导致B发生 | |
| 事件A和事件B相等 | A=B | |
| 当且仅当AB至少一个发生 | 和事件 | |
| 当且仅当AB同时发生 | 积事件 | |
| 当且仅当A发生B不发生 | 差事件 | |
| 事件AB不能同时发生 | AB互斥 | |
| AB对立,互为逆事件 |
6、德摩根律
口诀:长线变短线,开口变方向。
三、频率与概率
1、频率的定义
在相同条件下,进行了
2、频率的性质
设
- 若
是两两互不相容,则
频率大小表示事件A发生的频繁程度.频率大事件A发生就越频繁,这就意味着事件A在一次试验中发生的可能性就越大。
3、概率的定义
定义 :设
- 非负性:对于每一个事件
,有 ; - 规范性:对于必然事件
,有 ; - 可列可加性:设
是两两互不相容的事件,即对于 有
4、概率的性质(重要)
- 有限可加性:若
是两两互不相容事件,则有 (互斥事件和事件的概率=概率和) - 设
是两个事件,若 ,则有 ; - 性质3的推广: 一般性减法公式:
- 一般性加法公式:
- 一般性加法公式推广:加奇减偶
- 特殊性加法公式:当
和 和 互斥时:
四、等可能概型
注:此处排列组合只做简单介绍,详细相关内容请移步:
1 | https://www.cnblogs.com/1024th/p/10623541.html |
1、排列
- 排列:
- 全排列:
2、组合
- 组合:
3、加法原理
绿色
4、乘法原理
第一步
5、古典概型
- 定义
- 试验的样本空间只包含有限个元素;
- 试验中每个基本事件发生的可能性相同;
2.古典概型计算公式
包 含 的 基 本 事 件 中 基 本 事 件 的 总 数
- 抛硬币
- 摸球
- 分球入盒(生日问题)
- 抽签模型(第一个人和第n个人概率一样)
- 随机取数(最小公倍数)
- 平均分配问题
- 几何概型
五、条件概率
1、定义
设
2、性质
大部分和前面的类似,就是多加了一个条件
- 非负性
- 规范性
- 可列可加性
- 一般性:
或者 (注意条件一样即可)- 乘法定理:
- 乘法定理推广:
3、全概率公式
思想:化整为零,由因求果
4、贝叶斯公式
六、独立性
1、定义
设
注意:相互独立和互斥不能同时独立
2、定理
- 设
是两个事件且, 若 相互独立,则, ,反之亦然 - 若事件
和事件 相互独立,则 与 , 与 , 与 也相互独立。
3、三个事件独立
设A,B,C为三个事件,若满足以下:
则ABC相互独立
注意:三个事件相互独立
4、 个事件相互独立(推广 )
设
注意:
第二章:一维随机变量及其分布
一、随机变量
1、定义
设随机试验的样本空间
二、离散型随机变量及其分布律
1、定义
若随机变量X的所有可能取值是有限多个或可列无限多个, 则称
2、分布律
设离散型随机变量
3、分布律的表示方法
- 解析式法
- 列表法
- 矩阵法
- 图表法
4、 分布(两点分布)
定义:
设随机变量X只可能取
分布律:
5、伯努利试验
设试验
独立:前一次的结果,不影响后一次的概率
可重复:概率相同
5、二项分布
二项分布为两点分布的推广形式,记为
分布律:
二项式定理:可以证明二项分布的规范性
6、泊松分布
设随机变量
证明其规范性需要用到泰勒公式
泊松定理:
设
三、随机变量的分布函数
1、引入
对于随机变量
2、定义
设
3、性质
是一个不减函数 且 即 是右连续的
4、重要公式
四、连续型随机变量及其概率密度
1、概率密度
对于随机变量
2、概率密度性质
- 非负性:
- 规范性:
- 对于任意的
, 有 - 若
在点 处连续,则有
注意:对于连续型随机变量
3、均匀分布
区间长度的倒数
4、指数分布
若连续型随机变量X的概率密度为:
重要性质:无记忆性。对于任意
5、正态分布
若连续型随机变量X的概率密度为:
概率积分:
- 对称轴:
- 当
时取得最大值为 - 在
处曲线有拐点 是位置参数, 是形态参数( 越小,图像瘦高; 越大,图像胖矮)
6、标准正态分布
一般正态分布
若
五、随机变量的函数分布
1、离散型
逐点代入,有重复,便合并
2、连续型
- 分布函数求导法
用
表示待求的 将
关于y求导
- 套公式法
第三章:多维随机变量及其分布
一、二维随机变量
设
1、定义
设
2、性质
- 不减函数
对于任意固定的 有 ,对于任意固定的 有 ,- 关于
右连续,关于 右连续
3、联合分布律
定义:设随机变量
的所有可能的取值为 取相应值的概率为 称上式为二维离散型随机变量 的分布律,或称为 与 的联合分布律.
4、二维连续型随机变量
- 定义:设二维随机变量
若存在非负可积函数 ,使得对任意实数 若有 则称 为二维连续型随机变量,称 为 的概率密度函数,或称为 与 的联合概率密度。 - 性质:非负性、规范性
- 对于平面上任一区域G:二重积分的几何意义是曲顶柱体的体积。
5、 维随机变量的概念(推广)
- 定义:
设
对于任意
二、边缘分布
1、边缘分布函数
- 定义
设
2、离散型随机变量的边缘分布律
- 定义
设二维离散型随机变量
记
分别称
- 离散型随机变量关于X和Y的边缘分布函数分别为:
3、连续型随机变量的边缘分布
- 定义
对于连续型随机变量
记
称其为随机变量
同理可得:随机变量
- 二重积分
口诀:求谁不积谁,不积先定限,限内画条线,先交写下限,后交写上限。
此处涉及到二重积分的相关高数知识,详情请看【点击这里】
- 特殊的二维正态分布
二维正态分布的两个边缘分布都是一维正态分布,并且都不依赖于参数
- 注意
三、条件分布
1、离散型随机变量的条件分布
- 定义
设
同样,对于固定的
- 条件分布律的性质
- 非负性
- 规范性
2、连续型随机变量的条件分布
- 定义
设二维随机变量
则称
称
类似地,
可以定义
- 性质
- 非负性
- 规范性
四、相互独立的随机变量
1、随机变量的相互独立性
- 定义
设
两事件
- 相关性质
不论离散型还是连续型:联合
正态随机变量的独立性:二维正态随机变量相互独立的充要条件是
2、二维随机变量的推广
- 分布函数
- 概率密度函数
若存在非负函数
- 边缘分布函数
设
- 边缘概率密度函数
若
······
- 相互独立性
若对于所有的
若对于所有的
- 重要结论定理
设
则
又若
第四章:随机变量的数字特征
一、数学期望
1、随机变量数学期望的概念
1、离散型随机变量的数学期望
- 定义
设离散型随机变量
数学期望简称期望,又叫均值。是一个实数,加权平均值,体现了随机变量
2、连续型随机变量的数学期望
- 定义
设连续型随机变量
2、随机变量的函数的数学期望
- 离散型随机变量函数的数学期望
- 连续型随机变量函数的数学期望
若
上面两个公式的重要性在于: 当我们求
- 二维离散型随机变量函数的数学期望
设
- 二维连续型随机变量函数的数学期望
设
3、数学期望的性质
- 设
是常数,则有 - 设
是一个随机变量, 是常数,则有 - 设
是两个随机变量,则有 可以推广到任意有限个随机变量之和的情况。 - 设
是相互独立的随机变量,则有, 可以推广到任意有限个随机变量之和的情况。但不能说明 相互独立
4、总结
二、方差
1、随机变量方差的概念
- 定义
设
在应用上还引入量
- 意义
按定义,随机变量
- 计算
定义式:
计算式:
计算式移项也经常用于算
2、随机变量方差的性质
- 设
是常数,则 - 设
是一个随机变量, 是常数,则有 - 设
是两个随机变量,则有 - 性质
的特殊情况:当 相互独立时有: 可以推广到 个随机变量相互独立时。 充要条件是 取常数 时的概率为
3、标准化随机变量
◆ 设任意随机变量
标准化随机变量之后,期望为0,方差为1,即服从标准正态分布NO.1(南波湾)
4、重要概率分布的方差(P298)
| 符号 | 分布 | 参数 | 数学期望 | 方差 |
|---|---|---|---|---|
| 两点分布 | ||||
| 二项分布 | ||||
| 泊松分布 | ||||
| 均匀分布 | ||||
| 指数分布 | ||||
| 正态分布 |
5、切比雪夫不等式
设随机变量
也可以写为下面的形式:
主要用于证明大数定律和粗糙的估计概率。
三、协方差及相关系数
1、协方差的定义
故方差的性质3就变成:
若
2、协方差的计算式
3、协方差的基本性质
,其中 为常数- 对于任意常数
有
4、相关系数的定义
◆
5、相关系数的性质
的充要条件是:存在常数啊 , 使得
6、相关系数的含义
1°当
当
时,称 与 正相关,此时
当
时,称 与 负相关,此时
2°当
7、相互独立与不相关
相互独立与不相关的特例: 二维正态分布(P107)
四、矩、协方差矩阵
1、矩的概念
设
- 若
, 存在,称它为 的 阶原点矩,简称k阶矩,(数学期望 是一阶原点矩,即一阶矩) - 若
, ,存在,称它为 的 阶中心矩(方差 是二阶中心矩) - 若
, 存在,称它为 和 的 阶混合矩 - 若
存在,称它为 和 的 阶混合中心矩(协方差是 是 与 的二阶混合中心矩)
其中:三阶中心矩
2、协方差矩阵
设
为
第五章:大数定律和中心极限定理
一、依概率收敛
依概率收敛就是随机变量序列的极限
1、依概率收敛的定义
定义:设
注:
2、依概率收敛的性质
设
二、基本定理
1、弱大数定律(辛钦大数定律)
设
也就是当n很大时,随机变量
另外一种表述:设随机变量
2、伯努利大数定理
设
伯努利定理表明事件发生的频率
三、中心极限定理
1、独立同分布的中心极限定理
设随机变量
结论:当
即:
也就是:
从而得出:
进一步由:
得:
2、李雅普诺夫定理
没讲太多,本质是表明无论各个随机变量服从什么分布,只要满足定理的条件,它们的和
3、棣莫弗-拉普拉斯定理
设随机变量
结语:
依照高等学校教材《概率论与数理统计》浙江大学版+自己上课听课的笔记+课件
But,我们专业是没有安排学习数理统计部分的!(交通运输)Transportation





































