This article needs additional citations for verification. (May 2022) |
В математическом исследовании стохастических процессов цепь Харриса — это цепь Маркова , в которой цепь возвращается в определенную часть пространства состояний неограниченное число раз. [1] Цепи Харриса являются регенерирующими процессами и названы в честь Теодора Харриса . Теория цепей Харриса и возврата Харриса полезна для рассмотрения цепей Маркова в общих (возможно, несчетно бесконечных) пространствах состояний.
Пусть будет цепью Маркова на общем пространстве состояний со стохастическим ядром . Ядро представляет собой обобщенный одношаговый закон вероятности перехода, так что для всех состояний в и всех измеримых множеств . Цепь является цепью Харриса [2], если существует , и вероятностная мера с такой, что
Первая часть определения гарантирует, что цепь возвращается в некоторое состояние в пределах с вероятностью 1, независимо от того, где она начинается. Из этого следует, что она посещает состояние бесконечно часто (с вероятностью 1). Вторая часть подразумевает, что как только цепь Маркова находится в состоянии , ее следующее состояние может быть сгенерировано с помощью независимого подбрасывания монеты Бернулли. Чтобы увидеть это, сначала отметим, что параметр должен находиться в диапазоне от 0 до 1 (это можно показать, применив вторую часть определения к множеству ). Теперь пусть будет точкой в и предположим . Чтобы выбрать следующее состояние , независимо подбросьте смещенную монету с вероятностью успеха . Если подбрасывание монеты прошло успешно, выберите следующее состояние в соответствии с мерой вероятности . В противном случае (и если ), выберите следующее состояние в соответствии с мерой (определенной для всех измеримых подмножеств ).
Два случайных процесса и , которые имеют один и тот же закон вероятности и являются цепями Харриса согласно вышеприведенному определению, могут быть связаны следующим образом: Предположим, что и , где и являются точками в . Используя одно и то же подбрасывание монеты для определения следующего состояния обоих процессов, следует, что следующие состояния будут одинаковыми с вероятностью не менее .
Пусть Ω — счетное пространство состояний. Ядро K определяется вероятностями одношагового условного перехода P[ X n +1 = y | X n = x ] для x , y ∈ Ω. Мера ρ — это функция массы вероятности на состояниях, так что ρ ( x ) ≥ 0 для всех x ∈ Ω, а сумма вероятностей ρ (x) равна единице. Предположим, что приведенное выше определение выполняется для заданного множества A ⊆ Ω и заданного параметра ε > 0. Тогда P[ X n +1 = c | X n = x ] ≥ ερ ( c ) для всех x ∈ A и всех c ∈ Ω.
Пусть { X n }, X n ∈ R d — цепь Маркова с ядром , которое абсолютно непрерывно относительно меры Лебега :
такой, что K ( x , y ) является непрерывной функцией .
Выберем ( x 0 , y 0 ) так, что K ( x 0 , y 0 ) > 0, и пусть A и Ω будут открытыми множествами, содержащими x 0 и y 0 соответственно, которые достаточно малы, так что K ( x , y ) ≥ ε > 0 на A × Ω. Полагая ρ ( C ) = |Ω ∩ C |/|Ω|, где |Ω| — мера Лебега Ω, мы получаем, что (2) в приведенном выше определении выполняется. Если (1) выполняется, то { X n } является цепью Харриса.
В дальнейшем ; ie — это первый раз после момента времени 0, когда процесс входит в область . Пусть обозначает начальное распределение цепи Маркова, ie .
Определение: Если для всех , , то цепь Харриса называется рекуррентной.
Определение: Рекуррентная цепь Харриса является апериодической, если , такая, что ,
Теорема: Пусть — апериодическая рекуррентная цепь Харриса со стационарным распределением . Если тогда как , где обозначает полную вариацию для знаковых мер, определенных на том же измеримом пространстве.