Le cours de Chaînes de Markov et matrices de transition prépare la construction d'une matrice de transition à partir d'une chaîne de Markov et le contrôle de chaque distribution de probabilité.
Les problèmes font évoluer un état probabiliste, recherchent une distribution invariante et ramènent certains modèles à une récurrence affine dont la limite est interprétée.
Construire et faire évoluer
Contrôler que chaque ligne somme à 1.
Exercice 1 : Compléter une matrice
Depuis A, on reste en A avec 0,7 ; depuis B, on passe en A avec 0,2.
- Écrire la matrice dans l'ordre A, B.
- Contrôler les lignes.
Voir le corrigé
- .
- Chaque ligne a des coefficients positifs de somme 1.
Exercice 2 : Une étape
On prend et .
- Calculer .
- Interpréter.
Voir le corrigé
- .
- La distribution initiale est déjà invariante.
Exercice 3 : Deux étapes
Avec la même matrice P, on part de .
- Calculer .
- Calculer .
Voir le corrigé
- .
- .
Exercice 4 : Trois états
Une matrice P a pour lignes , , .
- Vérifier que P est une matrice de transition.
- Depuis le premier état, quelle est la probabilité d'être au troisième après une étape ?
Voir le corrigé
- Tous les coefficients sont positifs ou nuls et chaque ligne somme à 1.
- Le coefficient vaut 0.
Invariance et comportement à long terme
Relier matrice et suite affine.
Exercice 5 : Distribution invariante
On reprend .
- Écrire l'équation sur la première coordonnée x.
- Résoudre et donner la distribution.
- Vérifier l'invariance par un produit matriciel.
Voir le corrigé
- .
- , donc .
- .
Exercice 6 : Récurrence affine
La probabilité du premier état vérifie .
- Trouver le point fixe.
- Exprimer .
Voir le corrigé
- , donc .
- , donc .
Exercice 7 : Limite de la distribution
On suppose et la relation précédente.
- Déterminer la limite de .
- Donner la limite de la distribution.
Voir le corrigé
- Comme , .
- .
Exercice 8 : Détecter une convention incohérente
Un élève utilise des distributions lignes mais calcule .
- Expliquer l'erreur de dimensions.
- Donner un contrôle probabiliste.
- Comment valider la première étape indépendamment ?
Indication
Voir le corrigé
- Une distribution ligne se multiplie à gauche : . Le produit attendrait une colonne.
- Le résultat correct doit avoir des coefficients positifs de somme 1.
- Calculer chaque probabilité par la formule des probabilités totales sur le graphe.
Modéliser et contrôler
Traduire un contexte avant d'étudier son comportement.
Exercice 9 : Fidélité à un service
Chaque mois, 75 % des abonnés restent clients et 40 % des non-clients s'abonnent. On note la proportion de clients.
- Écrire la matrice de transition dans l'ordre client, non-client.
- Établir la récurrence vérifiée par .
- Déterminer la proportion d'équilibre.
- Expliquer pourquoi la suite converge vers cette valeur.
Indication
Voir le corrigé
- .
- .
- Le point fixe vérifie , donc , soit environ 61,5 %.
- , et tend vers 0.
Exercice 10 : Deux étapes avec trois états
On reprend la matrice dont les lignes sont , et .
- Calculer la première ligne de .
- Interpréter le dernier coefficient.
- Contrôler le résultat.
Voir le corrigé
- Elle vaut .
- En partant du premier état, la probabilité d'être au troisième après deux étapes est 0,15.
- Les trois coefficients sont positifs et leur somme vaut 1.