Trouver la distribution stationnaire
Énoncé
Soit P = (0,5 , 0,5 ; 0,3 , 0,7) la matrice de transition d'une chaîne de Markov.
Trouver la distribution stationnaire π = (π₁, π₂).
Indice : Résous le système π = π P avec π₁ + π₂ = 1.
Correction
- Étape 1 : Une distribution est stationnaire quand une étape de plus ne la change pas : π = π P. C'est l'équilibre vers lequel la chaîne tend.
Le système à résoudre :
π = π P et π₁ + π₂ = 1
La seconde condition n'est pas décorative : sans elle, π = (0 ; 0) conviendrait, et tous les multiples d'une solution aussi.
- Étape 2 : On écrit π = π P, composante par composante. La colonne 1 de P donne la première équation :
π₁ = 0,5 π₁ + 0,3 π₂
- Étape 3 : On simplifie. En retranchant 0,5π₁ des deux côtés :
0,5 π₁ = 0,3 π₂ ⟹ π₁ = 0,6 π₂
- Étape 4 : On injecte dans la condition de somme, ce qui donne une équation à une inconnue :
0,6 π₂ + π₂ = 1 ⟹ 1,6 π₂ = 1
- Étape 5 : On conclut, en préférant les fractions aux décimaux pour garder des valeurs exactes :
π₂ = 1/(1,6) = 5/8 π₁ = 0,6 × 5/8 = 3/8
- Étape 6 : La vérification, faite pour de bon. On calcule π P et l'on doit retrouver π :
(3/8 ; 5/8)P = (3/8(0,5) + 5/8(0,3) ; 3/8(0,5) + 5/8(0,7))
- Étape 7 : En décimaux : 0,1875 + 0,1875 = 0,375 = 3/8 et 0,1875 + 0,4375 = 0,625 = 5/8. On retrouve bien π.
La deuxième équation ne sert à rien :
Elle donne π₂ = 0,5π₁ + 0,7π₂, soit 0,3π₂ = 0,5π₁ — exactement la même information que la première, réécrite.
C'est normal : les lignes de P sommant à 1, le système π = π P est toujours redondant. Sans la condition π₁ + π₂ = 1, il n'aurait pas de solution unique.
Un contrôle avant même de calculer :
L'état 2 retient 70 % de ce qu'il a, l'état 1 seulement 50 % : l'équilibre doit donc pencher vers 2.
On trouve 5/8 > 3/8 : cohérent. Un résultat penchant vers 1 aurait signalé une inversion de lignes.