Imate prav: stanje absorpcije se mora ponavljati. Če smo natančni pri definicijah: dani sta prostor X in Markova veriga s prehodno matriko P, definirano na X. Stanje x∈X je absorpcijsko, če je Pxx=1; to nujno pomeni, da je Pxy=0, y≠x.
Ali so absorpcijska stanja prehodna?
vpijanje se imenuje prehodno. Zato v absorbirajočih Markovih verigah obstajajo absorpcijska stanja ali prehodna stanja.
Kaj je ponavljajoče se stanje?
Na splošno velja, da je stanje ponavljajoče se če se bomo vsakič, ko to stanje zapustimo, v prihodnosti vrnili v to stanje z verjetnostjo ena. Po drugi strani pa, če je verjetnost vrnitve manjša od ena, se stanje imenuje prehodno.
Kako dokažete, da se stanje ponavlja?
Pravimo, da je stanje i ponavljajoče se če je Pi(Xn=i za neskončno veliko n)=1. Pi(Xn=i za neskončno veliko n)=0. Tako je ponavljajoče se stanje tisto, v katerega se vedno znova vračate, in prehodno stanje, ki ga na koncu za vedno zapustite.
Kaj so absorpcijska stanja?
Vsrkajoče stanje je stanje, ki ga, ko ga enkrat vnesete, ni mogoče zapustiti. Tako kot splošne Markove verige lahko obstajajo Markove verige, ki absorbirajo neprekinjen čas z neskončnim prostorom stanj.
