एक मार्कोभ प्रक्रिया, जसलाई मार्कोभ चेन पनि भनिन्छ, एउटा गणितीय मोडेल हो जुन घटनाहरूको अनुक्रम वर्णन गर्न प्रयोग गरिन्छ जसमा प्रत्येक घटनाको सम्भाव्यता अघिल्लो घटनामा प्राप्त भएको अवस्थामा मात्र निर्भर हुन्छ। अर्को शब्दमा भन्नुपर्दा, यो एक स्टोकास्टिक प्रक्रिया हो जसमा प्रणालीको भविष्यको अवस्था केवल वर्तमान अवस्थामा निर्भर हुन्छ र अघिल्लो कुनै पनि अवस्थाहरूमा होइन। एक राज्यबाट अर्को राज्यमा सर्ने सम्भावनाहरूको सेट (संक्रमण सम्भावनाहरू भनेर चिनिन्छ), र प्रारम्भिक अवस्था। प्रक्रियालाई निर्देशित ग्राफको रूपमा ग्राफिक रूपमा प्रतिनिधित्व गर्न सकिन्छ, राज्यहरूलाई नोडको रूपमा र ट्रान्जिसन सम्भावनाहरू किनारको रूपमा।मार्कोभ प्रक्रियाहरूसँग भौतिक विज्ञान, रसायन विज्ञान, अर्थशास्त्र, वित्त, र कम्प्युटर सहित विभिन्न क्षेत्रहरूमा धेरै अनुप्रयोगहरू छन्। विज्ञान। तिनीहरू मोडेलिङ प्रणालीहरूका लागि विशेष रूपमा उपयोगी छन् जसले स्टक मूल्यहरू, मौसम ढाँचाहरू, र भौतिक प्रणालीमा कणहरूको व्यवहार जस्ता समयसँगै अनियमित व्यवहार प्रदर्शन गर्दछ।
