תוכן עניינים:
הגדרה - מה המשמעות של תהליך החלטת מרקוב (MDP)?
תהליך החלטה של מרקוב (MDP) הוא דבר שאנשי מקצוע מתייחסים אליו כ"תהליך בקרה סטוכסטי בזמן דיסקרטי. "הוא מבוסס על מתמטיקה שבראשם אקדמי הרוסי אנדריי מרקוב בסוף המאה ה -19 ותחילת המאה העשרים.
Techopedia מסביר את תהליך ההחלטה של מרקוב (MDP)
אחת הדרכים להסביר את תהליך ההחלטה של מרקוב ואת שרשראות מרקוב הקשורות אליו היא שמדובר באלמנטים של תורת המשחקים המודרנית, שמקורה במחקר מתמטי פשוט יותר של המדען הרוסי לפני כמאה שנים. התיאור של תהליך החלטת מרקוב הוא שהוא חוקר תרחיש שבו מערכת נמצאת במערכת מסוימת של מדינות מסוימת, ועוברת קדימה למדינה אחרת על סמך החלטות של מקבל החלטות.
שרשרת Markov כמודל מראה רצף של אירועים שבהם ההסתברות לאירוע נתון תלויה במצב שהושג בעבר. אנשי מקצוע עשויים לדבר על "מרחב מצבי ניתן לספור" בתיאור תהליך ההחלטה של מרקוב - יש המקשרים בין הרעיון של מודל ההחלטה של מרקוב למודל "הליכה אקראית" או מודל סטוכסטי אחר המבוסס על הסתברויות (מודל ההליכה האקראי, המצוטט לעתים קרובות על קיר) רחוב, מדגמן את תנועת ההון למעלה או למטה בהקשר של הסתברות שוק).
באופן כללי, תהליכי ההחלטה של מרקוב מיושמים לרוב על כמה מהטכנולוגיות המתוחכמות ביותר עליה עובדים אנשי מקצוע כיום, למשל במודלים של רובוטיקה, אוטומציה ומחקר.
