① 连续型,对另一个变量积分。 fX(x)fY(y)=∫−∞+∞f(x,y)dy=∫−∞+∞f(x,y)dx. 求 fX(x) 时把 y 积掉,把 x暂时看作常数;求 fY(y) 时反过来。难点全在积分限上:公式虽然写的是从 −∞ 到 +∞,但被积函数 f 只在支撑集上不为零,支撑集即 f>0 的区域,真正的积分限要由支撑集确定。
- 对每个固定的 x,在图上作一条竖直线 X=x,它与支撑集相交的那一段 y 区间才是积分限; - 这一段区间的端点往往是 x 的函数,于是当 x 落在不同范围时,积分限乃至有无交集都不相同,结果必然按 x 分段;支撑集以外的 x 给出 fX(x)=0,这一段不要漏写。
求 fY(y) 的做法完全对称:改作水平线 Y=y,把 x 积掉,结果按 y 分段。必须注意:当支撑集不是矩形,例如是三角形、圆或 0<y<2x 一类的区域时,积分限一定含有另一个变量,决不能想当然地写成常数。
② 离散型,求各行之和与各列之和。 P(XP(Y=xi)=pi⋅=j∑pij=yj)=p⋅j=i∑pij. 也就是说,边缘分布律就是联合分布表各行之和,横着相加得到 X 的分布,以及各列之和,竖着相加得到 Y 的分布,通常写在表格的最右一列与最下一行,边缘这个名称即由此而来。连续型的积分与离散型的求和其实是一回事:把联合分布沿不需要的那个变量累加掉。
证明 / 推导连续型的公式并不是硬记的,它来自对边缘分布函数求导。把 Y 的取值放开到全体,求 X 的分布函数: FX(x)=P(X≤x)=P(X≤x,Y<+∞)=∫−∞x(∫−∞+∞f(u,y)dy)du. 两边对 x 求导,按变限积分的求导法则,内层的那一份 ∫−∞+∞f(x,y)dy 恰好是被积函数在上限 x 处的值,于是 fX(x)=FX′(x)=∫−∞+∞f(x,y)dy, 这就是把 y 积掉的严格依据;fY 的情形与此对称。离散型同理:事件 {X=xi} 可以按 Y 的取值分解成互不相容的部分,由概率的可列可加性, P(X=xi)=P({X=xi}∩j⋃{Y=yj})=j∑P(X=xi,Y=yj)=j∑pij, 这就是按第 i 行求和;按列求和给出 fY,做法相同。举例说明求联合密度 f(x,y)={1,0,0<x<1,0<y<2x,其他 的两个边缘密度 fX(x)、fY(y)(2005·数三)。
最后把结论的范围说清楚。上面的构造要能进行,两个变量都必须真正取到不止一个值。因此结论应当这样叙述。设 X 与 Y 都不是取常数的随机变量,则与之相符的联合分布有无穷多个。连续型的构造已对任意一对边缘密度作出。一般的离散型也是如此。先取两个边缘的乘积分布,再取概率都不为零的两行两列,在它们交出的四个格子上按 +ε,−ε,−ε,+ε 加减。这样每行之和与每列之和都不改变,做法与上面完全一样。
退化的情形要除外。设 X 恒取常数 a,即 P(X=a)=1。这时对任何集合 B 都有 P(X=a,Y∈B)=P(Y∈B),联合分布已由边缘唯一确定。因为只有一行的概率不为零,没有第二行可供加减,上面的构造无法进行。Y 取常数时同理。
由此可见,题目若未给出联合分布、独立性或别的关于两者关系的条件,则 P((X,Y)∈D) 一般没有确定的答案。这里还须注意 D 的形状。如果 D 只由其中一个变量决定,例如 D={(x,y):x≤1},那么 P((X,Y)∈D)=P(X≤1),由边缘分布即可算出。D 同时牵涉两个变量时,答案才可能随联合分布而变。举例说明离散型的反例。 设 X,Y 各自取值为 {0,1},边缘分布都是 P(=0)=P(=1)=21。 - 联合分布表甲,两者独立:四格全为 41; - 联合分布表乙,两者完全相等:p00=p11=21,p01=p10=0。
条件期望定义为 E(X∣Y=y)=∫xfX∣Y(x∣y)dx,离散型用条件分布律作同样的定义。它是 y 的函数;把其中的 y 换成随机变量 Y,就得到随机变量 E(X∣Y)。全期望公式(重期望公式)为 E(X)=E[E(X∣Y)]. 它的含义是先分层求平均,再把各层合并:先在 Y=y 的每一层内求 X 的平均值,再按 Y 的分布对各层的平均值加权求和,就还原成总的平均值。凡是分两个阶段进行的问题,即先随机地确定条件,再取值,都可以用它把不易计算的 E(X) 化成两步易算的量。
证明 / 推导下面证明连续型的情形。按定义展开外层的期望: E[E(X∣Y)]=∫−∞+∞E(X∣Y=y)fY(y)dy=∫−∞+∞(∫−∞+∞xfY(y)f(x,y)dx)fY(y)dy. 分母中的 fY(y) 与外层的 fY(y)相消,于是 =∫−∞+∞∫−∞+∞xf(x,y)dxdy=∫−∞+∞xfX(x)dx=E(X).举例说明2014·数三解答:设 P{X=1}=P{X=2}=21,在 X=i 的条件下 Y∼U(0,i),其中 i=1,2。求 E(Y)。解 这是一个两阶段的问题:先由 X 随机地确定 Y 的分布,再求 Y 的总平均值,正好可以用全期望公式。 ① 先求各层的条件期望:Y∣X=1∼U(0,1)⇒E(Y∣X=1)=21;Y∣X=2∼U(0,2)⇒E(Y∣X=2)=1。 ② 再按 X 的分布加权求和,即用全期望公式 E(Y)=E[E(Y∣X)]=∑iE(Y∣X=i)P{X=i}: E(Y)=21⋅21+1⋅21=41+21=43. 这里的要点是:不必先求出 Y 的密度再积分,只要分层求条件期望 → 按权相加这两步,就得到 E(Y)=43。如果还要求 Y 的分布函数,可同样用全概率公式 FY(y)=21P{Y≤y∣X=1}+21P{Y≤y∣X=2},在 0≤y<1 上为 43y,在 1≤y<2 上为 4y+21。
5. 二维正态的条件分布仍是正态,条件均值就是回归直线★ 要懂
设 (X,Y)∼N(μ1,μ2;σ12,σ22;ρ),则 Y∣X=x∼N(μ2+ρσ1σ2(x−μ1),σ22(1−ρ2)). 由此可以看出两点:(1) 条件均值 E(Y∣X=x)=μ2+ρσ1σ2(x−μ1) 是 x 的线性函数,这条直线就是统计中的回归直线,它的斜率中含有 ρ;(2) 条件方差 σ22(1−ρ2)与 x 无关,并且比无条件方差 σ22 小,这说明知道了 X 以后,对 Y 的不确定程度就下降了,∣ρ∣ 越大下降得越多,当 ρ=±1 时下降为 0,此时两者完全成线性关系。在正态分布的场合,条件分布重新反映出两个变量之间关系这一点表现得最为清楚。