Andrey Andreyevich Markov is the founder of the Markov Chain. The Markov
Chain is a stochastic process involving modeling over time and space. In sciences or
randomize sciences in particular, it is usually important to predict an outcome based
on the acquired or previous knowledge of a process. There exits various random
processes. The Markov Chain appears as a key technique to deal and model such
processes.
Keywords: Stochastic Matrix, Probability Vector, Markov Chain.
Öz: Bu çalışmada, öncelikle ıstokastik süreçler tanımlanarak özellikleri verilmiş,
sonrasında da örneklerle ve uygulamalarla konu pekiştirilmeye çalışılmıştır. Daha
sonra da, Markov Zinciri tanımlanmış ve uygulama alanları verilmiş ve örneklerle
desteklenerek konu anlatılmıştır.
Anahtar kelimeler: Istokastik Matris, Olasılık Vektörü, Markov Zinciri.