Problemas Resueltos - Cadenas de Markov

c

c

Ê
ÊÊ    Ê   Ê            
‘ c
                                                                                      

          c                             c     !       "     #    $%&%'(%   & % ) c    !      "    #    $%‘‘'(%   ‘‘)  `

Ê
 
   |        * +$,-'   .     ,.   -.   # !   /%+$&%%' 0              /‘+$‘‘%'
      /&+$‘%‘'
      /1+$%‘‘'
  /2+$%&%'     /3+$%%&'      a     

    /%     /‘+ # # (#      4‘    (45  /&+ # #     (45  /‘   + /1+      ( 45    (45  /2+      (45    (45  /&+      ( 45  (  4‘#        /&   + /1+      ( 45    (45  /3+      ( 45    (45 

c


c /‘+      ( 45  (  4‘#        /1   + /2+   (45     ( 4‘#     /3+   (45     ( 4‘#     /2    /1#   ( 4‘    (4‘  /3    /1#   (4‘    (4‘  

 ? `

` `
/%†/‘ ‘6545 /%†/& ‘6545 /‘†/& 56‘45 /‘†/1 56547 /‘†/2 56547 /&†/‘ 56‘45 /&†/1 56547 /&†/3 56547 /1†/2 56‘45 /1†/3 56‘45 /2†/1 ‘6‘4‘ /3†/1 ‘6‘4‘    

˜ 
     

   %

‘

&

‘8 & ‘8 &

1

2

3

%

%

%

%

%

‘

%

%

 & 1

%

ù8 &

%

‘8 2

%

%

%

%

2

%

%

%

‘

%

%

3

%

%

%

‘

%

%

‘8 & ‘8 2 ‘8 2

%

%

‘8 2  ‘8 & ‘8 &

 
                (/%            #     $%&%'(/2         (     /     a%2(& 

c

c /   a  +



    



!

"



#

$

%

!

Dc

D
c D
c D
c D
cD
c

"  # $ %

Dc Dc Dc Dc Dc

D
c Dc D cD
c D
c Dc D
c D c D
c D
c Dc Dc c Dc Dc Dc Dc Dc D c D c Dc Dc Dc D c D c

   #aD


D


 -       /%                    $%‘‘'(/1    !      (     /     a%1(1   /   a # +  

               



!

"



#

$

%

!

Dc

D
cD
c D c D cD c

"  # $ %

Dc Dc Dc Dc Dc

Dc D D
c Dc Dc Dc


cD
c D
c D c Dc D
cD c D
c Dc Dc D c D c Dc c Dc Dc Dc c Dc Dc

   #aD


D

c


c

& c 9 :;     #!         .    :     1%%  
  #     . :     ‘%?          :         !          .  :        1?  *          :   :  "@  #    A+    /%+-!      .    : $--' (C‘%%  /‘+D         .  : $' (C2%% /&+D        .  : $-'$-' (C1%%   a    

     :+   ‘ & 1   +  - - -

c

c

 

G      .    :   /%$--'      : (1     ( 4 % %1           #   :      #. :      ;+

 >:+   ‘ & 1   +  - -   G      .    :  /&$-'  

  

/    # /%   + /%4% EF /&4% %1  //‘       + >:+   ‘ &    +       :(1   ( 4% E      # :

    #. :      ;+  >:+   ‘ & 1   +    -

  

G      .    :   /&$-'      : (1     ( 4 % ‘           #   :      #. :      ;+

 >:+   ‘ & 1   +      G      .    :  /‘$'  

  

/    # /‘   + /&4% E /‘4% ‘  //&           +      >:+   ‘ &    +   -

c



  

c      >:+   ‘   +  -

& 



G    #       % 3  ` 


`

 
`

>:+   ‘ &    +   -

   :(1   ( 4% EF      # :

    #. :      ;+  >:+   ‘ & 1   +   - -   

G      .    :   /%$--'      : (1     ( 4 % %1           #   :      #. :      ;+

 >:+   ‘ & 1   +   -   G      .    :  /&$-'  ` 


`

 
`

>:+   ‘ &    +  -     :(1   ( 4% E      # :

    #. :      ;+  >:+   ‘ & 1   +  -  -   

G      .    :   /&$-'      : (1     ( 4 % ‘           #   :      #. :      ;+

 >:+   ‘ & 1   +  -    G      .    :  /‘$' 

c      

 

  

c /    # /&   +  @     ‘   /%4% EF6% 34% 2H3 /&4% %16% 34% %‘3  @     &   /& 4% E6% 34% 23   /‘4% ‘6% 34% %3 

      

       
   
       

  



 
 
            # /&   +  /%4% 2H3 /&4% %‘3I% 234% 2J3 (#           ‘
  &  /‘4% %3

˜ 
    

    % ‘ &  % % EF % % %1   ‘ % %‘ %E  & % 2H3 % %3 % 2J3   @ #         #           !               /      !            ! #  *  

   !     +    Ka4  ‰     % % %1   % EF   %‘ % E
‰    ‰     %
% 2H3 % %3 % 2J3
  % EF   % 2H3  % ‘   % %3 

 

% %1   % E   % 2J3 









   ‘  9.   #                  ‘ 

c  

c ,   

    # +   4% E1HF%EJFF †/%  4% %%1&&3H%J †/‘  4% %3H%J23‘J †/&  B,A/B>A+  /%+-!      .    : $--' (C‘%% /‘+D         .  : $' (C2%% /&+B       .  : $-' (C1%% /1+B        .  : $-' (C1%% a    

   /

  #     /%   + /%4% EF $--'†$--' /14% %1 $--'†$-'  /‘   +  /&4% E $'†$-'  /‘4% ‘ $'†$'  /&   +  /%4% EF $-'†$--'  /14% %1 $-'†$-' (     ‘       /1   +  /&4% E $-'†$-'  /‘4% ‘ $-'†$' (     &      ˜ 
    

  

%  ‘ & 1

 % ‘  & 1 % EF % % %1 % %‘ %E %  % EF % % % %1 % %‘ %E %

 /               +

c

c   



 Ka4

‰









‰





 

% % %1 % EF %  % %‘ %E %

  ‰ % EF % % % %1

%‘ %E %   %





 

 % EF   % EF   % ‘  % ‘ 

   

% E  % E   % %1  % %1       ‘   ,   

    # +  4% E1HF%EJFF †/%   4% %%1&&3H%J †/‘  4% %&E%1&&3H †/&  4% %&E%1&&3H †/1