Stochastic Processes and Markov Chain

Abstract

Andrey Andreyevich Markov is the founder of the Markov Chain. The Markov Chain is a stochastic process involving modeling over time and space. In sciences or randomize sciences in particular, it is usually important to predict an outcome based on the acquired or previous knowledge of a process. There exits various random processes. The Markov Chain appears as a key technique to deal and model such processes. Keywords: Stochastic Matrix, Probability Vector, Markov Chain.Öz: Bu çalışmada, öncelikle ıstokastik süreçler tanımlanarak özellikleri verilmiş, sonrasında da örneklerle ve uygulamalarla konu pekiştirilmeye çalışılmıştır. Daha sonra da, Markov Zinciri tanımlanmış ve uygulama alanları verilmiş ve örneklerle desteklenerek konu anlatılmıştır. Anahtar kelimeler: Istokastik Matris, Olasılık Vektörü, Markov Zinciri.