Зсув Бернуллі

У математиці схема Бернуллі або зсув Бернуллі є узагальненням процесу Бернуллі для більш ніж двох можливих результатів. Схеми Бернуллі природно проявляються в символьній динаміці, і тому важливі при досліджені динамічних систем. Багато важливих динамічних систем (такі як аксіома А в теорії динамічних систем) мають атрактор, який є добутком множини Кантора і гладкого многовиду, а динаміка на множині Кантора ізоморфна динаміці зсуву Бернуллі.  По суті, це розбиття Маркова. Термін «зсув» відноситься до оператора зсуву, який може бути використаний для вивчення схем Бернуллі. Теорема про ізоморфізм Орнштейна показує, що зсуви Бернуллі є ізоморфними, якщо їх ентропія однакова.

Означення

Схема Бернуллі — це дискретний часовий стохастичний процес, де кожна незалежна випадкова величина може приймати одне з $N$ різних можливих значень, причому $i$-й результат відбувається з імовірністю $p_{i}$, при $i=1,\dots ,N$, і

$\sum _{i=1}^{N}p_{i}=1.$

Простір елементарних подій як правило позначається

$X=\{1,\ldots ,N\}^{\mathbb {Z} }$

як скорочення для

$X=\{x=(\ldots ,x_{-1},x_{0},x_{1},\ldots ):x_{k}\in \{1,\ldots ,N\}\;\forall k\in \mathbb {Z} \}.$

Пов'язана міра називається мірою Бернуллі

σ-algebra ${\mathcal {A}}$ на $X$ є добутком $\sigma$-алгебр, тобто це (скінченний) прямий добуток $\sigma$-алгебр скінченної множини $\{1,\dots ,N\}$. Таким чином, трійка

$(X,{\mathcal {A}},\mu )$

є простором з мірою. Базис ${\mathcal {A}}$ є циліндричною множиною. Нехай задано циліндричну множину $[x_{0},x_{1},\ldots ,x_{n}]$, її мірою є

$\mu \left([x_{0},x_{1},\ldots ,x_{n}]\right)=\prod _{i=0}^{n}p_{x_{i}}.$

Еквівалентний вираз з використанням позначень теорії ймовірностей має вигляд

$\mu \left([x_{0},x_{1},\ldots ,x_{n}]\right)=\mathrm {Pr} (X_{0}=x_{0},X_{1}=x_{1},\ldots ,X_{n}=x_{n})$

для випадкових величин $\{X_{k}\}$.

Схему Бернуллі, як і будь-який стохастичний процес, можна розглядати як динамічну систему з оператором зсуву $T$, де

$T(x_{k})=x_{k+1}.$

Оскільки результати незалежні, то зсув зберігає міру, і, отже, $T$ є перетворенням, що зберігає міру. Четвірка

$(X,{\mathcal {A}},\mu ,T)$

є динамічною системою, що зберігає міру, і називається схемою Бернуллі або зсувом Бернуллі. Її часто позначають як

$BS(p)=BS(p_{1},\ldots ,p_{N}).$

При $N$ = 2 схема Бурнуллі називається ппроцесом Бернуллі. Зсув Бернуллі можна розуміти як окремий випадок , зсуву Маркова, де всі елементи матриці сумжності одиниці. Таким чином, відповідний граф є клікою.

Відповідності та метрика

Відстань геммінга забезпечує природну метрику для схеми Бернуллі. Інша важлива метрика, так звана ${\overline {f}}$-метрика, визначається через супремум над відповідностями рядків

Нехай $A=a_{1}a_{2}\cdots a_{m}$ і $B=b_{1}b_{2}\cdots b_{n}$ — два набори символів. Відповідність є послідовністю $M$ пар $(i_{k},j_{k})$ набору. Тобто пари для яких $a_{i_{k}}=b_{j_{k}}$, вважаються повністю впорядкованими. Кожна окрема підпослідовність $i_{k}$ і $j_{k}$ впорядковується: $1\leq i_{1}<i_{2}<\cdots <i_{r}$, і у такий же спосіб $1\leq j_{1}<j_{2}<\cdots <j_{r}\leq n$.

${\overline {f}}$-відстанню між $A$ і $B$ є

${\overline {f}}(A,B)=1-{\frac {2\sup |M|}{m+n}},$

де супремум беремо за усіма відповідностями $M$ між $A$ і $B$. Так означена відстань задовольняє нерівність трикутника лише при умові, що $m=n,$ і тому це не зовсім справжня метрика. Незважаючи на це, в літературі загальновживаним є термін „відстань“.

Узагальнення

Більшість властивостей схеми Бернуллі випливають із зліченного прямого добутку, ніж з скінченного базового простору. Таким чином, можна прийняти за базовий простір стандартний простір ймовірностей $(Y,{\mathcal {B}},\nu )$ і визначити схему Бернуллі як

$(X,{\mathcal {A}},\mu )=(Y,{\mathcal {B}},\nu )^{\mathbb {Z} }.$

Такий підхід є конструктивним, оскільки зліченний прямий добуток стандартного простору ймовірностей знову є стандартним простором ймовірностей.

Для іншого узагальнення можна замінити цілі числа $\mathbb {Z}$ на зліченну дискретну групу $G$. Таким чином,

$(X,{\mathcal {A}},\mu )=(Y,{\mathcal {B}},\nu )^{G}.$

У цьому випадку оператор зсуву замінюється на дію групи

$gx(f)=x(g^{-1}f)$

для елементів групи, $f,g\in G$ і $x\in Y^{G}$ розуміється як функція $x\colon G\to Y$ (будь-який прямий добуток $Y^{G}$ розуміємо як множину функції $[G\to Y]$, оскільки це є експоненційний об'єкт . Мiра $\mu$ вибирається як міра Хаара, яка iнварiантна пiд дiєю групи:

$\mu (gx)=\mu (x).\,$

Цi узагальнення також загальнопринято називати схемами Бернуллi, оскiльки вони все ще зберiгають бiльшiсть властивостей скiнченного випадку.

Властивості

Яків Синай показав, що ентропія Колмогорова схеми Бернулi визначається як

$H=-\sum _{i=1}^{N}p_{i}\log p_{i}.$

Ця формула для ентропiї випливає iз загального означення ентропiї прямого декартового добутку ймовiрносних просторiв, яке випливає з властивості асимптотичного розподілу. У випадку загального базового простору $(Y,{\mathcal {B}},\nu )$ (тобто базовий простiр, який не є злiченним) зазвичай розглядається відносна ентропія. Так, наприклад, якщо маємо злiченне розбиття

$H_{Y'}=-\sum _{y'\in Y'}\nu (y')\log \nu (y').$

У загальному випадку ця ентропiя залежить вiд розбиття. Однак для багатьох динамічних систем, коли символьна динаміка не залежить вiд розбиття (скорiше iснують iзоморфiзми, якi пов’язують символьну ди намiку рiзних розбиттiв i залишають мiру iнварiантною), i тому такi системи можуть мати добре визначену ентропiю, яка не залежить вiд розбиття.

Теорема про iзоморфiзм Орнштейна

Теорема про iзоморфiзм Орнштейна стверджує, що двi схеми Бернуллi з однаковою ентропiєю ізоморфні. Результат є дуже особливим, оскiльки для несхематичних систем таких як автоморфiзми Колмогорова не має подiбної властивостi. Теорема про iзоморфiзм насправдi набагато глибша: вона забезпечує простий критерiй, за допомогою якого багато рiзних динамічних систем, що зберігають міру, можна вважати iзоморфними схемам Бернуллi. Результат виявився неочiкуваним, оскiльки багато систем, якi ранiше вважалися непов’язаними, виявились iзоморфними. До них вiдносяться скiнченнi стацiонарнi стохастичнi процеси, пiдзсуви скiнченного типу, скiнченнi ланцюги Маркова, дифероморфiзми Аносова і бiльярди Сiная: всi вони iзоморфнi до схем Бернуллi.

У узагальненого випадку теорема про iзоморфiзм Орнштейна залишається справедливою, якщо група $G$ є злiченною нескiнченною аменабельною групою.

Автоморфiзм Бернуллi

Оборотне перетворення, що зберігає міру стандартного простору ймовiрностей (простiр Лебега) називають автоморфiзмами Бернуллi , якщо воно ізоморфне зсуву Бернуллі.

Див. також

• Зсув скiнченного типу
• Ланцюги Маркова
• Прихована модель Бернуллi