WikiPrépaLivrets

On se place dans un espace probabilisé (Ω,A,P)(\Omega, \mathcal{A}, P). Soit V(Ω)V(\Omega) l'ensemble des variables aléatoires réelles sur Ω\Omega prenant un nombre fini de valeurs. Pour X∈V(Ω)X \in V(\Omega), on note E(X)E(X) son espérance et Var⁡(X)\operatorname{Var}(X) sa variance.

  1. Soit (X1,…,Xm)(X_1, \dots, X_m) une famille de variables aléatoires indépendantes de V(Ω)V(\Omega).
    1. Montrer que pour toute famille de polynômes (Q1,…,Qm)∈R[X]m(Q_1, \dots, Q_m) \in \mathbb{R}[X]^m, on a :
      E(∏i=1mQi(Xi))=∏i=1mE(Qi(Xi))E\left(\prod_{i=1}^m Q_i(X_i)\right) = \prod_{i=1}^m E\left(Q_i(X_i)\right)
    2. Démontrer que la variance de la somme est égale à la somme des variances :
      Var⁡(∑i=1mXi)=∑i=1mVar⁡(Xi)\operatorname{Var}\left(\sum_{i=1}^m X_i\right) = \sum_{i=1}^m \operatorname{Var}(X_i)

  2. Inégalité de Bienaymé-Tchebychev. Soit X∈V(Ω)X \in V(\Omega). Pour tout α>0\alpha > 0, établir l'inégalité :
    P(∣X−E(X)∣⩾α)⩽Var⁡(X)α2P(|X - E(X)| \geqslant \alpha) \leqslant \frac{\operatorname{Var}(X)}{\alpha^2}

  3. Application aux polynômes de Bernstein. Soit t∈[0,1]t \in [0, 1]. On considère une suite (Xn)n∈N∗(X_n)_{n \in \mathbb{N}^*} de variables aléatoires indépendantes et identiquement distribuées suivant une loi de Bernoulli de paramètre tt : P(Xi=1)=tP(X_i=1)=t et P(Xi=0)=1−tP(X_i=0)=1-t. On pose Sn=∑i=1nXiS_n = \sum_{i=1}^n X_i.
    1. Déterminer la loi de SnS_n.
    2. Calculer Var⁡(Sn)\operatorname{Var}(S_n). En déduire que pour tout α>0\alpha > 0 :
      P(∣Snn−t∣⩾α)⩽14nα2P\left( \left| \frac{S_n}{n} - t \right| \geqslant \alpha \right) \leqslant \frac{1}{4n\alpha^2}
    3. Pour f∈C([0,1],R)f \in \mathcal{C}([0,1], \mathbb{R}), on définit le nn-ième polynôme de Bernstein associé à ff par :
      Bn(f)(t)=∑k=0nf(kn)(nk)tk(1−t)n−kB_n(f)(t) = \sum_{k=0}^n f\left(\frac{k}{n}\right) \binom{n}{k} t^k (1-t)^{n-k}
      Montrer que la suite de fonctions (Bn(f))n∈N∗(B_n(f))_{n \in \mathbb{N}^*} converge uniformément vers ff sur [0,1][0,1].

1.

Pour la question 1, utiliser le fait que les variables aléatoires prennent un nombre fini de valeurs et appliquer la définition de l'indépendance.

2.

Pour l'inégalité de Bienaymé-Tchebychev, décomposer l'espérance définissant la variance en deux sommes selon la condition ∣k−E(X)∣⩾α|k - E(X)| \geqslant \alpha.

3.

Pour la convergence uniforme, utiliser le théorème de Heine (continuité uniforme sur un segment) et découper la somme définissant Bn(f)(t)B_n(f)(t) en deux parties via l'inégalité de la question 3(b).

Idées clés

•

Propriétés de l'espérance pour des variables indépendantes.

•

Inégalité de concentration (Bienaymé-Tchebychev).

•

Utilisation du théorème de Heine pour la convergence uniforme.

Résolution.

    1. Soient X1,…,XmX_1, \dots, X_m des variables indépendantes. Notons IjI_j l'ensemble fini des valeurs prises par XjX_j. Par définition de l'indépendance, pour tout (k1,…,km)∈I1×⋯×Im(k_1, \dots, k_m) \in I_1 \times \dots \times I_m, on a :
      P(X1=k1,…,Xm=km)=∏j=1mP(Xj=kj)P(X_1=k_1, \dots, X_m=k_m) = \prod_{j=1}^m P(X_j=k_j)

      L'espérance du produit des Qj(Xj)Q_j(X_j) s'écrit :

      E(∏j=1mQj(Xj))=∑k1,…,km(∏j=1mQj(kj))P(X1=k1,…,Xm=km)E\left(\prod_{j=1}^m Q_j(X_j)\right) = \sum_{k_1, \dots, k_m} \left( \prod_{j=1}^m Q_j(k_j) \right) P(X_1=k_1, \dots, X_m=k_m)

      En utilisant l'indépendance, cette somme se factorise :

      E(∏j=1mQj(Xj))=∑k1,…,km∏j=1m[Qj(kj)P(Xj=kj)]=∏j=1m(∑kj∈IjQj(kj)P(Xj=kj))E\left(\prod_{j=1}^m Q_j(X_j)\right) = \sum_{k_1, \dots, k_m} \prod_{j=1}^m \left[ Q_j(k_j) P(X_j=k_j) \right] = \prod_{j=1}^m \left( \sum_{k_j \in I_j} Q_j(k_j) P(X_j=k_j) \right)

      On reconnaît le produit des espérances :

      E(∏j=1mQj(Xj))=∏j=1mE(Qj(Xj))\boxed{E\left(\prod_{j=1}^m Q_j(X_j)\right) = \prod_{j=1}^m E(Q_j(X_j))}

    2. Par linéarité de l'espérance, E(∑Xi)=∑E(Xi)E\left(\sum X_i\right) = \sum E(X_i). Notons Yi=Xi−E(Xi)Y_i = X_i - E(X_i). Alors Var⁡(∑Xi)=E((∑Yi)2)\operatorname{Var}(\sum X_i) = E\left( (\sum Y_i)^2 \right). En développant :
      Var⁡(∑Xi)=∑i=1mE(Yi2)+2∑1⩽i<j⩽mE(YiYj)\operatorname{Var}\left(\sum X_i\right) = \sum_{i=1}^m E(Y_i^2) + 2 \sum_{1 \leqslant i < j \leqslant m} E(Y_i Y_j)

      Comme les XiX_i sont indépendantes, les YiY_i le sont aussi. Donc E(YiYj)=E(Yi)E(Yj)E(Y_i Y_j) = E(Y_i)E(Y_j). Or E(Yi)=0E(Y_i) = 0, donc les termes croisés s'annulent. Il reste :

      Var⁡(∑i=1mXi)=∑i=1mVar⁡(Xi)\boxed{\operatorname{Var}\left(\sum_{i=1}^m X_i\right) = \sum_{i=1}^m \operatorname{Var}(X_i)}

  1. Soit X∈V(Ω)X \in V(\Omega) et μ=E(X)\mu = E(X). Par définition de la variance :
    Var⁡(X)=∑k∈X(Ω)(k−μ)2P(X=k)\operatorname{Var}(X) = \sum_{k \in X(\Omega)} (k-\mu)^2 P(X=k)

    On restreint la somme aux valeurs de kk telles que ∣k−μ∣⩾α|k-\mu| \geqslant \alpha :

    Var⁡(X)⩾∑∣k−μ∣⩾α(k−μ)2P(X=k)⩾∑∣k−μ∣⩾αα2P(X=k)\operatorname{Var}(X) \geqslant \sum_{|k-\mu| \geqslant \alpha} (k-\mu)^2 P(X=k) \geqslant \sum_{|k-\mu| \geqslant \alpha} \alpha^2 P(X=k)

    En factorisant α2\alpha^2, on obtient Var⁡(X)⩾α2P(∣X−μ∣⩾α)\operatorname{Var}(X) \geqslant \alpha^2 P(|X-\mu| \geqslant \alpha), d'où :

    P(∣X−E(X)∣⩾α)⩽Var⁡(X)α2\boxed{P(|X - E(X)| \geqslant \alpha) \leqslant \frac{\operatorname{Var}(X)}{\alpha^2}}

    1. SnS_n est la somme de nn variables de Bernoulli indépendantes de même paramètre tt. D'après le cours, SnS_n suit une loi binomiale B(n,t)\mathcal{B}(n, t) :
      ∀k∈{0,…,n},P(Sn=k)=(nk)tk(1−t)n−k\boxed{\forall k \in \{0, \dots, n\},   P(S_n = k) = \binom{n}{k} t^k (1-t)^{n-k}}

    2. On a Var⁡(Xi)=t(1−t)\operatorname{Var}(X_i) = t(1-t). Par indépendance :
      Var⁡(Sn)=nt(1−t)\operatorname{Var}(S_n) = n t (1-t)

      On applique Bienaymé-Tchebychev à la variable Yn=SnnY_n = \frac{S_n}{n}. On a E(Yn)=tE(Y_n) = t et Var⁡(Yn)=1n2Var⁡(Sn)=t(1−t)n\operatorname{Var}(Y_n) = \frac{1}{n^2} \operatorname{Var}(S_n) = \frac{t(1-t)}{n}.

      P(∣Snn−t∣⩾α)⩽t(1−t)nα2P\left( \left| \frac{S_n}{n} - t \right| \geqslant \alpha \right) \leqslant \frac{t(1-t)}{n\alpha^2}

      La fonction t↦t(1−t)t \mapsto t(1-t) est maximale en t=1/2t=1/2 sur [0,1][0, 1], de valeur 1/41/4. Ainsi :

      P(∣Snn−t∣⩾α)⩽14nα2\boxed{P\left( \left| \frac{S_n}{n} - t \right| \geqslant \alpha \right) \leqslant \frac{1}{4n\alpha^2}}

    3. Remarquons d'abord que Bn(f)(t)=E[f(Snn)]B_n(f)(t) = E[f(\frac{S_n}{n})]. Comme ∑P(Sn=k)=1\sum P(S_n=k) = 1, on a :
      f(t)=f(t)∑k=0nP(Sn=k)=∑k=0nf(t)P(Sn=k)f(t) = f(t) \sum_{k=0}^n P(S_n=k) = \sum_{k=0}^n f(t) P(S_n=k)

      Considérons ∣Bn(f)(t)−f(t)∣⩽∑k=0n∣f(kn)−f(t)∣P(Sn=k)|B_n(f)(t) - f(t)| \leqslant \sum_{k=0}^n |f(\frac{k}{n}) - f(t)| P(S_n=k). Soit ϵ>0\epsilon > 0. ff est continue sur le segment [0,1][0, 1], donc d'après le théorème de Heine, elle est uniformément continue :

      ∃δ>0,∀(x,y)∈[0,1]2,∣x−y∣<δ  ⟹  ∣f(x)−f(y)∣<ϵ2\exists \delta > 0, \forall (x, y) \in [0, 1]^2,   |x-y| < \delta \implies |f(x)-f(y)| < \frac{\epsilon}{2}

      Découpons la somme selon que ∣kn−t∣<δ|\frac{k}{n} - t| < \delta ou non. Notons A={k∣∣kn−t∣<δ}A = \{k \mid |\frac{k}{n} - t| < \delta\}.

      ∑k∈A∣f(kn)−f(t)∣P(Sn=k)⩽ϵ2∑k∈AP(Sn=k)⩽ϵ2\sum_{k \in A} |f(\frac{k}{n}) - f(t)| P(S_n=k) \leqslant \frac{\epsilon}{2} \sum_{k \in A} P(S_n=k) \leqslant \frac{\epsilon}{2}

      Pour k∉Ak \notin A, on majore ∣f(kn)−f(t)∣|f(\frac{k}{n}) - f(t)| par 2∥f∥∞2\|f\|_\infty :

      ∑k∉A∣f(kn)−f(t)∣P(Sn=k)⩽2∥f∥∞P(∣Snn−t∣⩾δ)⩽2∥f∥∞14nδ2\sum_{k \notin A} |f(\frac{k}{n}) - f(t)| P(S_n=k) \leqslant 2\|f\|_\infty P\left( \left| \frac{S_n}{n} - t \right| \geqslant \delta \right) \leqslant 2\|f\|_\infty \frac{1}{4n\delta^2}

      Pour nn assez grand tel que ∥f∥∞2nδ2<ϵ2\frac{\|f\|_\infty}{2n\delta^2} < \frac{\epsilon}{2}, l'écart total est inférieur à ϵ\epsilon indépendamment de tt.

      La suite (Bn(f)) converge uniformeˊment vers f sur [0,1]\boxed{\text{La suite } (B_n(f)) \text{ converge uniformément vers } f \text{ sur } [0, 1]}

Oublier de diviser par n^2 lors du calcul de la variance de la moyenne d'échantillon.

Les polynômes de Bernstein permettent de démontrer de façon constructive le théorème d'approximation de Weierstrass.