随机变量的独立性

  • 两随机变量独立的定义(各种情况):

    • 两事件A,B独立的定义:若有
      P(AB)=P(A)P(B) P(AB)=P(A)P(B) P(AB)=P(A)P(B)
      则称事件A,B独立。

    • 设X,Y是两个随机变量,若对任意的x,y,有

    P(X≤x,Y≤y)=P(X≤x)P(Y≤y) P(X\leq x,Y\leq y)=P(X\leq x)P(Y\leq y) P(Xx,Yy)=P(Xx)P(Yy)

    ​ 则称X,Y相互独立

    • 用分布函数表示,即设X,Y是两个随机变量,对任意的随机变量x,y,有
      F(x,y)=FX(x)FY(y) F(x,y)=F_X(x)F_Y(y) F(x,y)=FX(x)FY(y)
      则称X,Y相互独立

      它表明,两个随机变量相互独立时,它们的联合分布函数等于两个边缘分布函数的乘积。

    • 若(X,Y)是离散型随机变量,则上述独立性的定义等价于:对(X,Y)的所有可能取值(xi,yj)(x_i,y_j)(xi,yj)
      P(X=xi,Y=yj)=P(X=xi)P(Y=yj) P(X=x_i,Y=y_j)=P(X=x_i)P(Y=y_j) P(X=xi,Y=yj)=P(X=xi)P(Y=yj)
      则称X和Y相互独立

    • 若(X,Y)是连续型随机变量,则上述独立性定义等价于:对任意的x,y,有
      f(x,y)=fX(x)fY(y) f(x,y)=f_X(x)f_Y(y) f(x,y)=fX(x)fY(y)
      几乎处处成立(在平面上除去面积为0的集合外,处处成立),则称X,Y相互独立。

      其中f(x,y)f(x,y)f(x,y)是X,Y的联合密度,fX(x),fY(y)f_X(x),f_Y(y)fX(x),fY(y)分别是X的边缘密度和Y的边缘密度

  • 推广到两个以上的随机变量的情形:

    • 定理1:若连续型随机向量(X1,...,Xn)(X_1,...,X_n)(X1,...,Xn)的概率密度函数f(x1,...,xn)f(x_1,...,x_n)f(x1,...,xn)可表示为n个函数g1,...,gng_1,...,g_ng1,...,gn之积,其中gig_igi只依赖于xix_ixi,即
      f(x1,...,xn)=g1(x1)×...×gn(xn) f(x_1,...,x_n)=g_1(x_1)\times ...\times g_n(x_n) f(x1,...,xn)=g1(x1)×...×gn(xn)
      X1,..,XnX_1,..,X_nX1,..,Xn相互独立,且XiX_iXi的边缘密度fi(xi)f_i(x_i)fi(xi)gi(xi)g_i(x_i)gi(xi)只相差一个常数因子。

    • 定理2:若X1,...,XnX_1,...,X_nX1,...,Xn相互独立,而
      Y1=g1(X1,...,Xm),Y2=g2(Xm+1,...,Xn) Y_1=g_1(X_1,...,X_m),Y_2=g_2(X_{m+1},...,X_n) Y1=g1(X1,...,Xm)Y2=g2(Xm+1,...,Xn)
      Y1Y_1Y1Y2Y_2Y2独立。

Logo

魔乐社区(Modelers.cn) 是一个中立、公益的人工智能社区,提供人工智能工具、模型、数据的托管、展示与应用协同服务,为人工智能开发及爱好者搭建开放的学习交流平台。社区通过理事会方式运作,由全产业链共同建设、共同运营、共同享有,推动国产AI生态繁荣发展。

更多推荐