Rantai Markov (Markov chain) dapat didefinisikan sebagai suatu teknik matematika yang biasa digunakan untuk melakukan pembuatan model (modeling) bermacam-macam sistem dan proses bisnis. Rantai markov merupakan penerapan baru program dinamis terhadap pemecahan masalah suatu proses stochastic yang dapat dijelaskan oleh sejumlah state yang terbatas. Teknik ini dapat digunakan untuk memperkirakan perubahan-perubahan yang akan terjadi diwaktu yang akan datang dalam variable-variabel dinamis atau dasar perubahan-perubahan dari variabel-variabel dinamis tersebut dimasa lalu. Sebagai suatu alat dalam riset operasi dalam mengambil keputusan manajerial. Rantai Markov telah banyak digukan untuk menganalisa tentang perpindahan merk (Brand Swtitchin) dalam pemasaran, perhitungan rekening jasa persewaan rencana penjualan, masalah persediaan, pemasaraan (replacement) pengelolaan aliran uang (casg flow management) pengaturan kapasitas penumpang air dan sebagainya.
Markov Chain adalah sebuah Proses Markov dengan populasi yang diskrit ( dapat dihitung) yang berada pada suatu discrete state (position) dan diizinkan utk berubah state pada time discrete. Ada beberapa macam variasi dari bentuk rantai markov
2. Sisa rantai Markov homogen (rantai Markov stasioner) adalah proses di mana