Trouver la distribution stationnaire

Énoncé

Soit P = (0,5 , 0,5 ; 0,3 , 0,7) la matrice de transition d'une chaîne de Markov. Trouver la distribution stationnaire π = (π₁, π₂).

Indice : Résous le système π = π P avec π₁ + π₂ = 1.

Correction

  1. Étape 1 : Une distribution est stationnaire quand une étape de plus ne la change pas : π = π P. C'est l'équilibre vers lequel la chaîne tend. Le système à résoudre : π = π P et π₁ + π₂ = 1 La seconde condition n'est pas décorative : sans elle, π = (0 ; 0) conviendrait, et tous les multiples d'une solution aussi.
  2. Étape 2 : On écrit π = π P, composante par composante. La colonne 1 de P donne la première équation :

    π₁ = 0,5 π₁ + 0,3 π₂

  3. Étape 3 : On simplifie. En retranchant 0,5π₁ des deux côtés :

    0,5 π₁ = 0,3 π₂ ⟹ π₁ = 0,6 π₂

  4. Étape 4 : On injecte dans la condition de somme, ce qui donne une équation à une inconnue :

    0,6 π₂ + π₂ = 1 ⟹ 1,6 π₂ = 1

  5. Étape 5 : On conclut, en préférant les fractions aux décimaux pour garder des valeurs exactes :

    π₂ = 1/(1,6) = 5/8 π₁ = 0,6 × 5/8 = 3/8

  6. Étape 6 : La vérification, faite pour de bon. On calcule π P et l'on doit retrouver π :

    (3/8 ; 5/8)P = (3/8(0,5) + 5/8(0,3) ; 3/8(0,5) + 5/8(0,7))

  7. Étape 7 : En décimaux : 0,1875 + 0,1875 = 0,375 = 3/8 et 0,1875 + 0,4375 = 0,625 = 5/8. On retrouve bien π. La deuxième équation ne sert à rien : Elle donne π₂ = 0,5π₁ + 0,7π₂, soit 0,3π₂ = 0,5π₁ — exactement la même information que la première, réécrite. C'est normal : les lignes de P sommant à 1, le système π = π P est toujours redondant. Sans la condition π₁ + π₂ = 1, il n'aurait pas de solution unique. Un contrôle avant même de calculer : L'état 2 retient 70 % de ce qu'il a, l'état 1 seulement 50 % : l'équilibre doit donc pencher vers 2. On trouve 5/8 > 3/8 : cohérent. Un résultat penchant vers 1 aurait signalé une inversion de lignes.