שרשרת מרקוב – הבדלי גרסאות

לעיתים, שרשרת מרקוב מתוארת לפי שלושתהסתברויות הפרמטריםהמעברים המוגדריםבין בסעיףהמצבים הקודםבעזרת וקטור המייצג את ההסתברויות להתחיל את המערכת בהתאם לכל מצב, ובעזרת מטריצה המתאימה את ההסתברויות לעבור מהמצב בשורה ה- i למצב בטור ה- j. למשל, בתרשים מתוארת השרשרת עם הפרמטריםוקטור המצבים ההתחלתיים ומטריצת המעברים הבאים: