机器学习|随机向量函数的分布(离散、连续卷积公式)|15mins入门|概统学习笔记(七)
随机向量函数的分布背景:当随机变量X1,X2,...,XnX_1,X_2,...,X_nX1,X2,...,Xn的联合分布已知时,如何求出它们的函数Yi=gi(X1,X2,...,Xn),i=1,2,...,mY_i=g_i(X_1,X_2,...,X_n),i=1,2,...,mYi=gi(X1,X2,...,Xn),i=1,2,...,m的联合分布离散型分布的情形:...
随机向量函数的分布
-
背景:当随机变量X1,X2,...,XnX_1,X_2,...,X_nX1,X2,...,Xn的联合分布已知时,如何求出它们的函数Yi=gi(X1,X2,...,Xn),i=1,2,...,mY_i=g_i(X_1,X_2,...,X_n),i=1,2,...,mYi=gi(X1,X2,...,Xn),i=1,2,...,m的联合分布
-
离散型分布的情形:
若X、Y独立,P(X=k)=ak,k=0,1,2,..., P(Y=k)=b+k,k=0,1,...P(X=k)=a_k,k=0,1,2,..., \space P(Y=k)=b+k,k=0,1,...P(X=k)=ak,k=0,1,2,..., P(Y=k)=b+k,k=0,1,...,求Z=X+YZ=X+YZ=X+Y的概率函数
P(Z=r)=P(X+Y=r)=∑i=0rP(X=i,Y=r−i)=∑i=0rP(X=i)P(Y=r−i)=a0br+a1br−1+...+arb0P(Z=r)=P(X+Y=r)=\sum_{i=0}^rP(X=i,Y=r-i)=\sum_{i=0}^rP(X=i)P(Y=r-i) \\ =a_0b_r+a_1b_{r-1}+...+a_rb_0P(Z=r)=P(X+Y=r)=∑i=0rP(X=i,Y=r−i)=∑i=0rP(X=i)P(Y=r−i)=a0br+a1br−1+...+arb0
此即离散卷积公式
-
连续型分布的情形
设X和Y的联合密度为f(x,y)f(x,y)f(x,y),求Z=X+YZ=X+YZ=X+Y的密度
解:Z=X+YZ=X+YZ=X+Y的分布函数是:
FZ(z)=P(Z≤z)=P(X+Y≤z)=∬Df(x,y)dxdy F_Z(z)=P(Z\leq z)=P(X+Y\leq z)=\iint_Df(x,y)dxdy FZ(z)=P(Z≤z)=P(X+Y≤z)=∬Df(x,y)dxdy
这里积分区域D={(x,y):x+y≤z}D=\{(x,y):x+y\leq z\}D={(x,y):x+y≤z},是直线x+y=zx+y=zx+y=z左下方的半平面。∴\therefore∴
FZ(z)=∬x+y≤zf(x,y)dxdy F_Z(z)=\iint_{x+y\leq z}f(x, y)dxdy FZ(z)=∬x+y≤zf(x,y)dxdy
化为累次积分,得
FZ(z)=∫−∞∞[∫−∞z−yf(x,y)dx]dy F_Z(z)=\int_{-\infty}^{\infty}[\int_{-\infty}^{z-y}f(x,y)dx]dy FZ(z)=∫−∞∞[∫−∞z−yf(x,y)dx]dy
固定z和y,对方括号内的积分作变量代换,令x=u−yx=u-yx=u−y,再交换积分次序,得
FZ(z)=∫−∞∞[∫−∞zf(u−y,y)du]dy=∫−∞z[∫−∞∞f(u−y,y)dy]du F_Z(z)=\int_{-\infty}^\infty[\int_{-\infty}^zf(u-y,y)du]dy=\int_{-\infty}^z[\int_{-\infty}^\infty f(u-y,y)dy]du FZ(z)=∫−∞∞[∫−∞zf(u−y,y)du]dy=∫−∞z[∫−∞∞f(u−y,y)dy]du
由概率密度与分布密度的关系,即得Z=X+YZ=X+YZ=X+Y的概率密度为:
fZ(z)=FZ′(z)=∫−∞∞f(z−y,y)dy f_Z(z)=F'_Z(z)=\int_{-\infty}^\infty f(z-y,y)dy fZ(z)=FZ′(z)=∫−∞∞f(z−y,y)dy
由X和Y的对称性,fZ(z)f_Z(z)fZ(z)又可写成
fZ(z)=FZ′(z)=∫−∞∞f(x,z−x)dx f_Z(z)=F'_Z(z)=\int_{-\infty}^{\infty}f(x,z-x)dx fZ(z)=FZ′(z)=∫−∞∞f(x,z−x)dx
以上两式即是两个随机变量和的概率密度一般公式
特别,当X和Y独立,设(X,Y)关于X,Y的边缘密度分别为fX(x),fY(y)f_X(x),f_Y(y)fX(x),fY(y),则上述两式化为:
fZ(z)=∫−∞∞fX(z−y)fY(y)dy f_Z(z)=\int_{-\infty}^{\infty}f_X(z-y)f_Y(y)dy fZ(z)=∫−∞∞fX(z−y)fY(y)dy
fZ(z)=∫−∞∞fX(x)fY(z−x)dx f_Z(z)=\int_{-\infty}^{\infty}f_X(x)f_Y(z-x)dx fZ(z)=∫−∞∞fX(x)fY(z−x)dx
这两个公式被称为卷积公式。
-
若X和Y独立,具有相同的分布N(0,1)N(0,1)N(0,1),则Z=X+YZ=X+YZ=X+Y服从正态分布N(0,2)N(0,2)N(0,2)
及若X和Y独立,XXX$N(\mu_1,\sigma_1^2)$,$Y$N(μ,σ22)N(\mu,\sigma^2_2)N(μ,σ22),则Z=X+YZ=X+YZ=X+Y~N(μ1+μ2,σ12+σ22)N(\mu_1+\mu_2, \sigma^2_1+\sigma_2^2)N(μ1+μ2,σ12+σ22)
此结论可以推广到n个独立随机变量之和。
即有限个正态变量的线性组合任然服从正态分布。
更多推荐
所有评论(0)