Doudou le hamster ne connaît que trois endroits dans sa cage : les

copeaux où il dort, la mangeoire où il mange et la roue où il fait de

l'exercice. Ses journées sont assez semblables les unes aux autres. Toutes les

minutes, il peut soit changer d'activité, soit continuer celle qu'il

était en train de faire.

• Quand il dort, il a 9 chances sur 10 de ne pas se réveiller la minute suivante.
• Quand il se réveille, il y a 1 chance sur 2 qu'il aille manger et 1 chance sur 2 qu'il parte faire de l'exercice.
• Le repas ne dure qu'une minute, après il fait autre chose.
• Après avoir mangé, il y a 3 chances sur 10 qu'il parte courir dans sa roue, mais surtout 7 chances sur 10 qu'il retourne dormir.

• Courir est fatigant pour Doudou ; il y a 8 chances sur 10 qu'il

  retourne dormir au bout d'une minute. Sinon il continue en oubliant

  qu'il est déjà un peu fatigué.

Si

• l'état 1 correspond à être en train de courir dans la roue

• l'état 2 correspond à être en train de dormir
• l'état 3 correspond à être en train de manger

Alors le processus de Markov modélisation Doudou est