Марковские процессы

Слайд 2

Слайд 3

Слайд 4

Слайд 5

Слайд 6

Слайд 7

Слайд 8

Слайд 9

Слайд 10

Слайд 11

Слайд 12

Слайд 13

Слайд 14

Слайд 15

Слайд 16

Слайд 17

Слайд 18

Слайд 19

Слайд 20

Слайд 21

Слайд 22

Слайд 23

Слайд 24

Слайд 25

Слайд 26

Слайд 27

Состояние системы – распределение вероятностей всех состояний системы Однородная марковская цепь:

Состояние системы – распределение вероятностей всех состояний системы
Однородная марковская цепь: вероятность

переходов не зависит от времени
Стационарное состояние – устойчивое, не меняющееся во времени состояние системы
Стохастическая (марковская) матрица: все элементы неотрицательны, сумма элементов каждой строки равна единице
Предельное состояние – то, к которому стремится марковская цепь с течением времени; всегда является стационарным (обратное не всегда верно: могут быть стационарные состояния, к которым система не стремится)