U pravu ste: upijajuće stanje mora se ponavljati. Da budemo precizni sa definicijama: dat je prostor stanja X i Markovljev lanac s prijelaznom matricom P definiranom na X. Stanje x∈X je apsorbujuće ako je Pxx=1; to nužno implicira da je Pxy=0, y≠x.
Jesu li apsorbirajuća stanja prolazna?
upijanje se zove prolazno. Dakle, u Markovljevim lancima koji apsorbiraju, postoje apsorbirajuća stanja ili prolazna stanja.
Šta je ponavljajuće stanje?
Uopšteno govoreći, za stanje se kaže da se ponavlja ako, svaki put kada napustimo to stanje, vratit ćemo se u to stanje u budućnosti s vjerovatnoćom jedan. S druge strane, ako je vjerovatnoća povratka manja od jedan, stanje se naziva prolaznim.
Kako dokazati da se stanje ponavlja?
Kažemo da je stanje i rekurentno ako je Pi(Xn=i za beskonačno mnogo n)=1. Pi(Xn=i za beskonačno mnogo n)=0. Dakle, ponavljajuće stanje je ono u koje se stalno vraćate, a prolazno stanje je ono koje na kraju napuštate zauvijek.
Šta su apsorbirajuća stanja?
Upijajuće stanje je stanje koje se jednom unese, ne može se ostaviti. Poput opštih Markovljevih lanaca, mogu postojati Markovi lanci koji apsorbuju kontinuirano vreme sa beskonačnim prostorom stanja.
