сеть магазинов Harris

Type of stochastic Markov process

В математическом исследовании стохастических процессов цепь Харриса — это цепь Маркова , в которой цепь возвращается в определенную часть пространства состояний неограниченное число раз. [1] Цепи Харриса являются регенерирующими процессами и названы в честь Теодора Харриса . Теория цепей Харриса и возврата Харриса полезна для рассмотрения цепей Маркова в общих (возможно, несчетно бесконечных) пространствах состояний.

Определение

Пусть будет цепью Маркова на общем пространстве состояний со стохастическим ядром . Ядро представляет собой обобщенный одношаговый закон вероятности перехода, так что для всех состояний в и всех измеримых множеств . Цепь является цепью Харриса [2], если существует , и вероятностная мера с такой, что { X n } {\displaystyle \{X_{n}\}} Ω {\displaystyle \Omega } K {\displaystyle K} P ( X n + 1 C X n = x ) = K ( x , C ) {\displaystyle P(X_{n+1}\in C\mid X_{n}=x)=K(x,C)} x {\displaystyle x} Ω {\displaystyle \Omega } C Ω {\displaystyle C\subseteq \Omega } { X n } {\displaystyle \{X_{n}\}} A Ω , ε > 0 {\displaystyle A\subseteq \Omega ,\varepsilon >0} ρ {\displaystyle \rho } ρ ( Ω ) = 1 {\displaystyle \rho (\Omega )=1}

  1. Если , то для всех . τ A := inf { n 0 : X n A } {\displaystyle \tau _{A}:=\inf\{n\geq 0:X_{n}\in A\}} P ( τ A < X 0 = x ) = 1 {\displaystyle P(\tau _{A}<\infty \mid X_{0}=x)=1} x Ω {\displaystyle x\in \Omega }
  2. Если и (где измеримо), то . x A {\displaystyle x\in A} C Ω {\displaystyle C\subseteq \Omega } C {\displaystyle C} K ( x , C ) ε ρ ( C ) {\displaystyle K(x,C)\geq \varepsilon \rho (C)}

Первая часть определения гарантирует, что цепь возвращается в некоторое состояние в пределах с вероятностью 1, независимо от того, где она начинается. Из этого следует, что она посещает состояние бесконечно часто (с вероятностью 1). Вторая часть подразумевает, что как только цепь Маркова находится в состоянии , ее следующее состояние может быть сгенерировано с помощью независимого подбрасывания монеты Бернулли. Чтобы увидеть это, сначала отметим, что параметр должен находиться в диапазоне от 0 до 1 (это можно показать, применив вторую часть определения к множеству ). Теперь пусть будет точкой в ​​и предположим . Чтобы выбрать следующее состояние , независимо подбросьте смещенную монету с вероятностью успеха . Если подбрасывание монеты прошло успешно, выберите следующее состояние в соответствии с мерой вероятности . В противном случае (и если ), выберите следующее состояние в соответствии с мерой (определенной для всех измеримых подмножеств ). A {\displaystyle A} A {\displaystyle A} A {\displaystyle A} ε {\displaystyle \varepsilon } C = Ω {\displaystyle C=\Omega } x {\displaystyle x} A {\displaystyle A} X n = x {\displaystyle X_{n}=x} X n + 1 {\displaystyle X_{n+1}} ε {\displaystyle \varepsilon } X n + 1 Ω {\displaystyle X_{n+1}\in \Omega } ρ {\displaystyle \rho } ε < 1 {\displaystyle \varepsilon <1} X n + 1 {\displaystyle X_{n+1}} P ( X n + 1 C X n = x ) = ( K ( x , C ) ε ρ ( C ) ) / ( 1 ε ) {\displaystyle P(X_{n+1}\in C\mid X_{n}=x)=(K(x,C)-\varepsilon \rho (C))/(1-\varepsilon )} C Ω {\displaystyle C\subseteq \Omega }

Два случайных процесса и , которые имеют один и тот же закон вероятности и являются цепями Харриса согласно вышеприведенному определению, могут быть связаны следующим образом: Предположим, что и , где и являются точками в . Используя одно и то же подбрасывание монеты для определения следующего состояния обоих процессов, следует, что следующие состояния будут одинаковыми с вероятностью не менее . { X n } {\displaystyle \{X_{n}\}} { Y n } {\displaystyle \{Y_{n}\}} X n = x {\displaystyle X_{n}=x} Y n = y {\displaystyle Y_{n}=y} x {\displaystyle x} y {\displaystyle y} A {\displaystyle A} ε {\displaystyle \varepsilon }

Примеры

Пример 1: счетное пространство состояний

Пусть Ω — счетное пространство состояний. Ядро K определяется вероятностями одношагового условного перехода P[ X n +1 = y | X n  =  x ] для x , y ∈ Ω. Мера ρ — это функция массы вероятности на состояниях, так что ρ ( x ) ≥ 0 для всех x ∈ Ω, а сумма вероятностей ρ (x) равна единице. Предположим, что приведенное выше определение выполняется для заданного множества A ⊆ Ω и заданного параметра ε > 0. Тогда P[ X n +1 = c | X n = x ] ≥ ερ ( c ) для всех xA и всех c ∈ Ω.

Пример 2: Цепи с непрерывной плотностью

Пусть { X n },  X nR dцепь Маркова с ядром , которое абсолютно непрерывно относительно меры Лебега :

К ( х , dy ) = К ( х , ydy

такой, что K ( x , y ) является непрерывной функцией .

Выберем ( x 0y 0 ) так, что K ( x 0y 0 ) > 0, и пусть A и Ω будут открытыми множествами, содержащими x 0 и y 0 соответственно, которые достаточно малы, так что K ( xy ) ≥ ε > 0 на A  × Ω. Полагая ρ ( C ) = |Ω ∩  C |/|Ω|, где |Ω| — мера Лебега Ω, мы получаем, что (2) в приведенном выше определении выполняется. Если (1) выполняется, то { X n } является цепью Харриса.

Сводимость и периодичность

В дальнейшем ; ie — это первый раз после момента времени 0, когда процесс входит в область . Пусть обозначает начальное распределение цепи Маркова, ie . R := inf { n 1 : X n A } {\displaystyle R:=\inf\{n\geq 1:X_{n}\in A\}} R {\displaystyle R} A {\displaystyle A} μ {\displaystyle \mu } X 0 μ {\displaystyle X_{0}\sim \mu }

Определение: Если для всех , , то цепь Харриса называется рекуррентной. μ {\displaystyle \mu } P [ R < | X 0 A ] = 1 {\displaystyle P[R<\infty |X_{0}\in A]=1}

Определение: Рекуррентная цепь Харриса является апериодической, если , такая, что , X n {\displaystyle X_{n}} N {\displaystyle \exists N} n N {\displaystyle \forall n\geq N} μ , P [ X n A | X 0 A ] > 0 {\displaystyle \forall \mu ,P[X_{n}\in A|X_{0}\in A]>0}

Теорема: Пусть — апериодическая рекуррентная цепь Харриса со стационарным распределением . Если тогда как , где обозначает полную вариацию для знаковых мер, определенных на том же измеримом пространстве. X n {\displaystyle X_{n}} π {\displaystyle \pi } P [ R < | X 0 A ] = 1 {\displaystyle P[R<\infty |X_{0}\in A]=1} n {\displaystyle n\rightarrow \infty } | | L ( X n | X 0 ) π | | T V 0 {\displaystyle ||{\mathcal {L}}(X_{n}|X_{0})-\pi ||_{TV}\rightarrow 0} | | | | T V {\displaystyle ||\cdot ||_{TV}}

Ссылки

  1. ^ Асмуссен, Сёрен (2003). "Дополнительные темы в теории обновления и регенеративных процессах". Прикладная вероятность и очереди . Стохастическое моделирование и прикладная вероятность. Том 51. С. 186–219. doi :10.1007/0-387-21525-5_7. ISBN 978-0-387-00211-8.
  2. ^ Р. Дарретт. Вероятность: теория и примеры . Томсон, 2005. ISBN 0-534-42441-4 . 
Retrieved from "https://en.wikipedia.org/w/index.php?title=Harris_chain&oldid=1087280323"