本文へ移動
ISEGORIABenjamin Haire
English

ISEGORIA / 数学百科事典

マルコフ連鎖:遷移・定常性・吸収

遷移行列を反復し、定常分布を見つけ、ギャンブラーの破産モデルを解きます。

前提知識: 確率と線形代数

予想してから操作し、計算例と問いで理解を確かめてください。グラフは数式の図示であり、証明ではありません。

1. 遷移ダイナミクス

二状態の遷移行列を反復し、確率質量が平衡へ移る様子を見ます。

計算例. Pの各行の和は1なので、状態確率の総和は保たれます。

注意点. 遷移行列はモデルの仮定であり、すべてのデータの因果法則ではありません。

行列の1回の積は何を表しますか?

条件付き確率を1段階更新することです。

参考文献: MIT OpenCourseWare · Stochastic Processes

2. 定常分布

遷移確率を変え、初期分布と定常解を比較します。

計算例. 二つの遷移確率が正なら、連鎖は定常分布へ収束します。

注意点. 可約性や周期性があると、すべての初期分布からの収束が妨げられます。

ここで定常とは何を意味しますか?

Pを適用しても分布が変わらないことです。

参考文献: MIT OpenCourseWare · Stochastic Processes

3. ギャンブラーの破産

各回で確率 α で1単位勝ち、それ以外は1単位負けます。α、初期資産、目標を変え、試行が破産か成功で終わる様子を見て、勝った割合を 0 より先に N に達する正確な確率 hᵢ と比べます。

計算例. 公平な歩行では、0より先にNへ到達する確率は i/N です。

注意点. 有限状態モデルは独立で一定確率の歩みを仮定します。

歩行が公平ならどうなりますか?

吸収確率は初期資産に対して線形に変化します。

参考文献: MIT OpenCourseWare · Stochastic Processes

次に読む

線形代数:変換の幾何フーリエ解析:波で関数を作る力学系:安定性とカオス最適化:最良の選択の幾何確率:不確実性から学ぶ群論:対称性を代数にする代数的位相幾何:穴を見つける数値解析:計算が誤解を招くとき数論:整数のパターングラフ理論:経路・木・ネットワーク偏微分方程式:動く場情報理論:不確実性と符号変分法:経路と原理古典力学:運動と力電磁気学:場と誘導光学:光線・波・色熱力学:エネルギー・仕事・エントロピー量子力学:振幅とスピン複素解析:写像・留数・調和場流体力学:流れ・圧力・渦度統計と推測:データの中の信号特殊相対性理論:空間・時間・光微分幾何:曲率と形統計力学:ミクロ状態と温度測度論:大きさ・近似・収束微分形式:循環・カール・引き戻し一般相対性理論:曲率・時計・光関数解析:ノルム・射影・作用素プラズマ物理:遮蔽・軌道・波リー群とリー代数:連続的な対称性ハミルトン力学:相空間とその幾何確率過程:ブラウン運動とノイズ固体物理:結晶の中の波制御理論:フィードバック・極・安定性論理と計算可能性:何が計算できるか双曲幾何:平行線が増える世界剛体力学:回転・転倒・歳差楕円曲線:足し算ができる幾何原子物理:軌道とスペクトル四元数:掛け算としての回転押し出しと引き戻し:写像を通した積分結び目理論:絡まりを見分けるフラクタル幾何:整数の間の次元量子情報:もつれとその限界宇宙論:膨張する宇宙セル・オートマトン:局所規則から生まれる計算複雑系:単純な多数の部品から生まれる秩序ガロア理論:方程式の対称性磁性とイジング模型:整列から生まれる秩序振動子と脱進機:時計はどうやって時を刻むか歯車と機構:運動を正確に伝える水晶振動子:時を刻む結晶スピーカー:ムービングコイル型ドライバーフィルターとクロスオーバー:音をドライバーに振り分ける室内音響:部屋はスピーカーの一部ウェーブレット:信号を拡大して見るレーザー物理:自らを複製する光表現論:行列として作用する群半導体物理:バンド・ドーピング・接合

数学百科事典に戻る