Inleiding tot eindige Markov-ketens

Het doel van dit boek is om de lezer te introduceren en zijn kennis te ontwikkelen over een specifiek type Markov-processen, genaamd Markov-ketens. Dit boek presenteert eindige Markov-ketens, waarin de toestandsruimte eindig is, te beginnen met de introductie van de eindige Markov-ketens en de berekening van hun overgangskansen, evenals de waarschijnlijkheidsmatrices voor de overgang en de grafische weergave van de overgang. De classificatie van deze Markov-ketens wordt verkregen door de toestandsruimte in dit proces te classificeren. Ook het onderwerp van het absorberen van Markov-ketens en de berekening van de absorptiekansen kwamen aan bod. Naast het onderwerp van stationariteit in Markov-ketens waarbij de stationaire verdelingen en de studie van een nieuw type werden bestudeerd, werden de zogenaamde quasi-stationaire verdelingen in absorberende Markov-ketens bestudeerd. Verder eindigt dit boek met het presenteren van enkele toepassingen die in de praktijk voorkomen. Dit boek is vertaald met Kunstmatige Intelligentie.