1. Équations discrètes associées aux chaînes de Markov en temps et espace discrets
Ce premier paragraphe, dans le cadre simple des chaînes de Markov à espace d’états discret, nous permet de mettre en évidence le lien entre ce type de processus stochastiques et certains problèmes qui apparaissent comme des versions discrètes de problèmes aux limites, d’évolution, ou stationnaires. Ces problèmes peuvent être résolus de manière itérative, et le point de vue probabiliste consiste à exprimer la solution des problèmes considérés sous une forme explicite à l’aide de l’espérance (ou de l’espérance conditionnelle) de la chaîne de Markov associée. Ce cadre simple peut servir de guide à ce qui sera fait dans les paragraphes suivants pour des problèmes continus. Les résultats de ce paragraphe se trouvent dans le premier chapitre de
Cet article est réservé aux abonnés
Cet article est réservé aux abonnés. Il vous reste 92 % à découvrir.
Déjà abonné ?
Se connecter
Lecture en cours
Équations discrètes associées aux chaînes de Markov en temps et espace discrets