• ベストアンサー

定常なマルコフ連鎖の意味

定常なマルコフ連鎖の意味 定常なマルコフ連鎖とは定常分布を持つ、非周期的・再帰的・既約なマルコフ連鎖という意味でしょうか? つまり、初期状態に依存しない極限があると判断しても良いのでしょうか?

質問者が選んだベストアンサー

  • ベストアンサー
  • stomachman
  • ベストアンサー率57% (1014/1775)
回答No.1

「定常なマルコフ連鎖」と言ったとき、 (a)「定常分布を持つマルコフ連鎖」のことなのか (b)「時間的に一様なマルコフ連鎖」のことなのか、はたまた (c)「定常状態に達したマルコフ連鎖」のことなのか、 ってご質問でしょう。たしかに曖昧ですねー。(しかし、曖昧だぞと文句言おうものなら、「極限分布」のことを「極限」って言う奴に揚げ足取られたくねー、と言い返されます。)  ちなみに、検索してみたところ、「"定常マルコフ過程"」ならば大抵(b)の意味で言うみたいですね。  考えてみると、(a)かどうかはモデルの振るまいを調べなきゃ分からない。(c)を言う場合は限られる。なので、どっちも大概、文脈が付く。文脈から意味が推測できるでしょう。  それに対して、現象のモデルを作る際に(b)であるかないかは自明なので、アマクダリ的に「これは定常なマルコフ連鎖である」と言いたくなる。逆に言えば、脈絡なくいきなり「定常なマルコフ連鎖」と言われたら多分(b)の意味かと。

izayoi168
質問者

お礼

有難うございます。 やはり、モデルに依存するんですね。

関連するQ&A

  • マルコフ連鎖の質問です

    至急解答をお願いいたします!!! マルコフ連鎖に関する問題です 下のマルコフ連鎖について 1、定常分布 2、既約になるための必要十分条件 3、p1=p2=1/2、q1=0、q2=1のとき(1)、(3)の再帰性を調べよ という3問がわからず困ってます。 <マルコフ連鎖> r:(1)から(1)に戻る確率 (r=1-p1-q1) p1:(1)から(2)へ移る確率 p2:(2)から(3)へ移る確率 q1:(1)から(3)へ移る確率 q2:(3)から(2) 1-p2:(2)から(1) 1ーq2:(3)から(1) 説明がわかりにくくて申し訳ありません。 かなり困っているので、よろしくお願い致します。

  • マルコフ連鎖(確率過程)に関する問題です!

    マルコフ連鎖に関する質問です。 下のマルコフ連鎖について 1、定常分布 2、既約になるための必要十分条件 3、p1=p2=1/2、q1=0、q2=1のとき(1)、(3)の再帰性を調べよ という3問がわからず困ってます。 <マルコフ連鎖> r:(1)から(1)に戻る確率 (r=1-p1-q1) p1:(1)から(2)へ移る確率 p2:(2)から(3)へ移る確率 q1:(1)から(3)へ移る確率 q2:(3)から(2) 1-p2:(2)から(1) 1ーq2:(3)から(1) 説明がわかりにくくて申し訳ありません。 かなり困っているので、よろしくお願い致します

  • マルコフ連鎖について

    状態空間S={0,1,2,3}上のマルコフ連鎖の推移確率行列P=(0 1/2 0 1/2) (0 2/3 1/3 0) (0 0 0 1 ) (0 0 1/2 1/2)で与えられている (1)状態の再帰性と一時性について調べよ (2)状態の周期について調べよ この問題がわかる方いらっしゃいますか?

  • マルコフ連鎖モンテカルロ

    マルコフ連鎖モンテカルロ法で、既約で非周期性を満たすマルコフ連鎖の持つ不変分布を、推定パラメータの目標分布となるように推移核を構成する際に、ギブス・サンプラーアルゴリズムを用いることを考えた場合、大きな流れとして何故、推移核をギブスサンプラーで与えられる式を導入することによって、推定したいパラメータの目標分布が不変分布に収束していくのかその原理がよくわかりません。 参考書として、「東洋経済」から出版されている「ベイズ計量経済分析」を用いています。 誰か教えていただけないでしょうか?

  • マルコフ過程(確率過程)に関する質問です!

    マルコフ連鎖に関する質問です。 下のマルコフ連鎖について 1、定常分布 2、既約になるための必要十分条件 3、p1=p2=1/2、q1=0、q2=1のとき(1)、(3)の再帰性を調べよ という3問がわからず困ってます。 <マルコフ連鎖> r:(1)から(1)に戻る確率 (r=1-p1-q1) p1:(1)から(2)へ移る確率 p2:(2)から(3)へ移る確率 q1:(1)から(3)へ移る確率 q2:(3)から(2) 1-p2:(2)から(1) 1ーq2:(3)から(1) 説明がわかりにくくて申し訳ありません。 かなり困っているので、よろしくお願い致します。

  • マルコフ連鎖の問題

    マルコフ連鎖に関する問題が分からなく困っています。 状態空間 S={1,2,3} で推移確率行列      |1/4 1/2 1/4| P=|2/5 1/5 2/5|   |1/3 1/3 1/3| をもつ定常なマルコフ連鎖{Xn}に対して次の問いに答えよ。 (1)確率P( X2=2,X3=1 | X0=3,X1=2 )を求めよ (2)確率P( X2=1 | X0=1 )を求めよ。 (3)lim【n→∞】P( Xn=2 | X=1 )を求めよ。 (1)のみ解答の目処が立っています。 まず(2)がよく分からないので、苦し紛れに状態遷移図を書いて考えてみたところ、(1/4)*(1/4)+(1/2)*(2/5)+(1/4)*(1/3)となるかなと考えてみたのですがどうでしょうか? (3)についてはどう解いていったらいいのか分かりません。 よろしくお願いします。

  • 確率のscilabプログラミングの質問

    この2問を考えているのですが、scilabが全然わからないので苦戦しています。どなたか教えてください。 (1)適当なモデルを作り、対数の法則、中心極限定理をシュミレートし、histplotを活用して、視覚的に中心極限定理が成り立つことを証明せよ。 (2)有限集合上のマルコフ連鎖をシュミレートし、遷移確率(stochastic matrix)や初期分布を各自定めて、マルコフ連鎖の定常分布を求めよ。この連鎖のサンプルを多数生成し、histplotを用いて大きなステップ数の下で連鎖の分布が定常分布に近づくことを確かめよ。

  • マルコフ連鎖

    参考書にこのような例がありました: コインを投げ続けた時、2回連続して裏が出るまでに必要とした(ランダムな)回数をNとする。ここでNの期待値をもとめるために、続けて裏の出た回数を状態空間0,1,2とするマルコフ連鎖を導入しよう。簡単のために「表」をH,「裏」をTと表記する。Tがでると、Tの数は1増加するが、Hがでると0にもどる。このとき推移確率行列は、   0  1  2 0 1/2 1/2   0 1 1/2   0  1/2 2 0   0   1 となる。ここで、状態2にたどり着いた後は、この問題に関係がないので、状態2を吸収状態にしよう。1ステップ後を考えると以下の式が得られる。 h(0)=1+0.5h(9)+0.5h(1) h(1)=1+0.5h(0) 私の分からない部分は、上記の二つの式の中で、なぜ1というのが加えられてるのでしょうか?この理由がどうしても分かりません。ご教授いただければと思います。

  • マルコフ過程の時間平均?

    「マルコフ過程の時間平均は、固有値=1の 固有ベクトルと一致する」 と言ってしまってよいのでしょうか? マルコフ過程を勉強する必要が出てきたのですが、 とりあえず、   x(t+1) = x(t) P (x は確率ベクトル、Pは行列) で、   定常分布が存在したら、その確率ベクトルは、   固有値が1のときの固有ベクトルになる というのは、理解できました。 ところで、2つ質問があります。 (1) この定常分布にx(t)が収束するかどうか、は   何か知る方法があるのでしょうか? また、(特にこちらが知りたいのですが) 収束しない場合でも (2) x(0), X(1), ..., x(∞) と無限の時間の平均は、   この固有ベクトルに一致する、と言っていいのでしょうか?  (シミュレーションをしていると、なんとなくそんな   感じがするのですが・・) よろしくおねがいします。

  • 定在波、定常波、定常状態について教えてください。

    定在波、定常波の違いと意味を教えてください。 (わかりやすく教えて頂けると助かります) また、少し話題が外れるかもしれないのですが、 波が定常状態に達する、というのは、 波の形状と存在する場所がある時間までは変化していたのに、 ある時間以降は波の形状と存在する場所ともに常に一定になる、 という解釈でよろしいでしょうか? (こちらもわかりやすく教えて頂けると助かります。 波に限らなくても構いませんので、定常状態に達するという意味を教えて頂きたいです。)