a. Attributs mathématiques des matrices de transition

Mathématiquement, il existe trois niveaux d’analyse des trajectoires sous-jacentes aux chaînes de Markov. Dans un premier temps chaque état peut être étudié séparément afin d’identifier ses caractéristiques. Nous parlerons de ’classification des états’ d’une chaîne de Markov. Dans un second temps les états peuvent être envisagés simultanément et regroupés en ’classes d’états’ homogènes. Finalement, considérant la matrice de transition dans son ensemble, il est possible sous certaines conditions de définir une ’loi limite’.