A Neural Reinforcement Learning Approach for Behaviors Acquisition in Intelligent Autonomous Systems

(1)

! "

# "

"

$ "

"

% "

&

"

" "

'

$ "

"

$ $ ' ( ) " (* ! "

(2)

(3)

) *

(4)

(5)

, & - - . / 0 #' * & 0 0 & -* 1 * 2 +3 0 -* & & -* 4 - 1 * , & -* & - 0 * 5 & & * & - -1 * '3 0 0 & * 0 6 . * - /) /4 7 & 0 8 0 & /) /4 9:;* 2 -- 0 & -*

& - 0 & & < *

2 0 *

, & - * 2 &

= * 2 & - & 0 0 &

* 9:;2 & - 0 . / . ) ) / * $> $!?>!% +* / / / 8 / 0 #' # 8 2 +3 , 9 @ < ; & ' !$$(

(6)

(7)

& - & 0 0 0 * / 9 0 0 ; & - 9 & 0 ;* 2 0 & - * - & 0 9 A ;* / 0 - 0 * 2& 9 0 B -; & = 9 ; * & 8 0 0 0 9 B ; 0 0 0 -* < 9& ; 9& 0B ;*

(8)

(9)

!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!! %*% 72 C/2 74******************************************************************************************************************************************************* % %*! 742 D2************************************************************************************************************************************************************* ! %*" 7 ' 2 C /41+ )2 ********************************************************************************************************************************* > " # $% !!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!& !*% 42+71 2 74*************************************************************************************************************************************************** ? !*! 4 +/)4 25 7+E ******************************************************************************************************************************************* ? !*" ) /+4 4F /41 741 2 74 4F************************************************************************************************************************** !*> 4 +74/)F+7 . ) 2 74************************************************************************************************************************** G ' ( ) * % )+) ,( !!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!! "*% 42+71 2 74*************************************************************************************************************************************************%% "*! +7 72 71 )**************************************************************************************************************************************************%% "*" /+ 2 2 + *************************************************************************************************************************************************%! "*> + / 74 4F*******************************************************************************************************************************************************%> "*H ) /+4 4F*********************************************************************************************************************************************************%( "*( 74, F +/2 74 7, )/2 74 D. + 42********************************************************************************************%G "*? )/2 74 /41 ++ 42) 2/2 74 ****************************************************************************************************%G - ., % #+ / )0( , !!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!"' >*% 42+71 2 74*************************************************************************************************************************************************!" >*! 747274I1 2 2 74***********************************************************************************************************************************!" >*" .+7D 2I 1 42 , +9. ;+ . +27 + ********************************************************************************************************!> >*> + . ) 74+ . +27 + **********************************************************************************************************************************!( >*H 44/2 + ,) D ********************************************************************************************************************************************!? >*( . 4 427,4 +74 *******************************************************************************************************************************!? >*? )/2 74+ )2 **************************************************************************************************************************************!G 1 ) # . 2 3 ( #, 3 .. ) )!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!'' H*% 42+71 2 74*************************************************************************************************************************************************"" H*! .+7D 2I 1 42 , ++ / 74 4F 742+7)+ . +27 + *************************************************************************"" H*" )/2 74+ )2 **************************************************************************************************************************************"H 4 3 0, .+) ) 3 0, ( ) * % )+) ,( !!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!! -(*% 42+71 2 74*************************************************************************************************************************************************>% (*! / .) D. + 42************************************************************************************************************************************>% (*" F 4 +/) J/2 74 /./ ) 2 *********************************************************************************************************************>! (*> / 7 .) D 4C +74 42*****************************************************************************************************************************>> (*H 1I4/ 4C +74 42 *******************************************************************************************************************************>? (*( )2 .) +7 72 4 /4 4C +74 42********************************************************************************************************>G & . ) !!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!1' ?*% 42+71 2 74*************************************************************************************************************************************************H" ?*! 1 74 /41, 2 + 5 7+E*********************************************************************************************************************H>

(10)

(11)

% ! ( 2 - & & 0 *2 0 0 -* 0 0 * 0 0 -0 & K%L* 0 & - & * 0 0 0 0 0 B - 9 ; & 0 *2 - 0 8 0 & & 0 * 0 0 0 8 9 -0 *; ** * + 0 0 & 0 -K% %%L*/ 0 0 0 * 0 B - & & * & 90 & ;K%L* 2 < 0 * 0 0 9& ; *1 0 9 ; 0 = -* - 9 0 ; & 9 - & ; * 2 = = - & * 2 0 0 9 0 ; 0 0 */ K!$L & 0 9 ; 0 - & # 0 * 0 9** & - ; 0 0 & K! > H ?L*4 & -# 0 0 * 0 0 & 9 ; - & * 0 * K"HL 9 ; 8 #

(12)

! * 0 * & -8 - & M & 9 ; & M 0 0 9 0 ; K% L K!GL*2 & 0 9 0 K!%L K%$L;*, & - * !" 5 2 0 0 & & * - 0 0 0 4 %G(GK!!L & -& 0B * 0 * 7 0 & 0 0 8 %G?? ) 0 / = / N O , K!"L K!>L + K!HL* 0 0 & & < 0 9, %*%;* 8 = 9 ; 0 0 * 2 & *7 & & * - & 0 - & 0 *2 - & 0 * + - & 0 0 %G (K%"L 0 / *2 & 0 -# 0 < * 0 9, %*!;*

(13)

" 8) 0 0 0 * - 0 0 * *1 & 0 * 2 0 - 0 9 & - & & ; 0 9 0 0 0 ;* 0 #0 - 0 0 & * = 0 & 0 #0 * K!(L 0 *7 / - K%%L 0 #0 * 2 0 - *7 & 0 9 ; - 0 * . & - 0 K! (L*2 & & -0 * . K>L KHL 0 #0 & 9 ; *2& 0 -0 90 0 ;*/ & -0 ** 0 0 & 0 */ 0 * - & 0 * / 0 * 0 * & K?L 0 #0 0 *2 *2 0 - 0 & * & 0 K!?L*, & , 2 9 .,); & 9 # ; 9 0 K""L;* & 0 0 9** 0 ;# & K!? ">L* 0 0 = & 0

(14)

> 0 - 0 * 2 0 0 K! L & 8 ; 0B & & M0; 0B & 0B 0 0 * 2 & -& * 0 0 0B 9 0 0B ;* , -0 0B 9 ;* !' 6 2 0B & - & = 0 0 0 * / K! L & -* 2 0 0 * , 0 0 9& ; 0 9* * 0 ;* 2 8 0 0 0 0 B & 0 9 ;* 0 0 < 0 & 0 * + - 0 9 0 ; & 0 * / 90 K!GL; 0 0 B * 2 & & 0 & 0B 9 0 ; 9 0 0 B ;* & 0 9 0 ; B 8 0 0 9 ; * - & * 2 -B & * 2 & 0 & * 2 B 0

& & = - 8 0 &

*

7 * 9&

0 0 & ! ; & & &

0 0 0B 90 ;

(15)

H 8 = 9 B ;* / < 9& H ; * 0 9* * ; 0 H * 1 9& 0B ; & -* , 0 0 B & 0 0 * , & 0 8

& 0 & - &

0 *

2 & &

& 0 & 0

(16)

(17)

-?

" #

"! 0 0 *2 = 0 0 0 9& - & 0 ; 0 & & * = 0 & -*2 0 0 **8 0 0 * & 0 = 9 ; = & 0 *, # * 2 & - 0 = 0 0 %*/ & - 9 0# ; 0 0 */ !*! / /* 8 *2 0 !*" !*>* "!" + & - 0 0 & & * 0 & 0 0 & 0 */ 0 & - / /* 2 1 00 0 9 ; K%HL* / 00 & M & 0 0 & * & / 0 9 ; & 0 9 ;*2 00 0 8 ; 9 ; 9 ; 9 & 9 # ; 9 # ;*2 = < # 00 *

(18)

"!' . 2 * 2 & 0 * 0 K%!L* 2 0 9* * < 0 - ;*, * / 0 0 * * * 9* * ;* / -* 2 & 8 & 0 0 * 2 & * 2& 0 - & 9 ; * . & -K% L - & < 0 0 & * ,

0 & & & 0 0

& - 0 * 2 0

0 0 0 - *

K!%L 0 0 &

* 0

& = P & Q*

2 & 0 & M &

& - & * 2 & 0 #

& 0 & & *

- K!GL - & 0 *5 0 9 ; 0 9* * 0 ; 0 9 ; 0 = A 9 ; 9* * & 0 - ;* 2 0 - * , - 0 0 - 0 # 9 ; * 5 9 & ; 0 0 * 7 & 0 9 0 0 ; * 0 0 K%!L8 8 *

(19)

-G "!- % ) 2 0 F* 0 K%$L* 2 0 1 & * 0 < *2 < 8 0 0 * 2 0 0 0 0 *2 & 9 0 ; 0 & * & < & - *2 9 ; 0 & & * 9 ; */ 0 *

(20)

(21)

/ 4 %%

'

)7

'! 9 ; 9** - M ; 0 = & K GL* 0 0 -0 *2 0 & 0 * 0 9 # ; 0 = K%$L* *2 0 K! L*2 0 "*!* "*" "*> "*H 0 * "*(* '!" ( + 0B * 0B & 9 0B 0 0 ;*70 0 * 2 0 & , *"*%*2 0 & 0 M 0 *2 < (? 0 9 0 AG$R SG$R;*2 (? * 0B 0 9 , *"*%;*/ 0 & 0 0B K$ %L* K$%LA 0 < P Q C 9 C ;* 0 & 0B * 2 - 0 0B 0 B & 0 *5 0 0B 9 0 ; 0B 9 0 ;* 2 0 9$*! ;*/ 0 0 B %HR*

(22)

%! #G$R # 1 # # 70B + 0 $R G$R + 0 * '!' 8 2 & - 9, * "*!;*/ & 8 . 9. ; 9 ;* *. & *2 & 8 / 9/+; + 9++;* 0 & 0 &

-& & *2 & - /+ ++

B * . + 1 + + 9++; / + 9/+; + / 4 & -+ 8 / * ! " 2 & -, *"* # *2 * 0 & 0 0 0 9, *"*";*

(23)

/ 4 %" #$ $$ $ "8 / = /+ ++ & - *2 < & - 0 . & - * . & -9, *"*>;* )-4 8 . * # . + 4 /+ ++ + / ) / + 1 # +

%8 / & & . & /+ ++

*

# & 8 2 & & -*

B * +/ ++ & - = 9, *"*H;* $ 8 2 9 & , *"*% ; /+ ++ & - *2 8 9 ; & 0 0B M & -& *

(24)

%> 29*; / 4 & -/ + 9/+; + + 9++; , "*H8 / 4 & -* '!-1 * 2 & & - * $ " ! 8 2 . 9%;8 ;; 9 9 ;; 9 9 $ ; 9 ; 9 5 5 9%; & 8 ;; 9 95 & M ' L *** K ; 9 _% _! 5 9 0B ;M ; 9 9 ( ) ;M T% ! **** 9*8 0 ;* 2 & 95 9 ;; 0 8 *** ! % ; 9 ; 9 ;; 9 95 5 _9!; & 8 ; 9 & M 0 *

(25)

/ 4 %H ; 9 0 8 9 ; 9 ; 8 & ; 9 ; 9 ;; 9 9 ; 9 ; 9 ; % 9 5 9"; & 8 M * = 9>; 8 & ;; 9 9 $ % ; 9 5 9>; & 95 9 ;; 9!;* #$ $$$ "82 0 /+ ++ 0 8 ; % 9 ; % 9 % ; 9 $ ; 9 " " " " 9H; & 8 ; 9 ; 9 " 5 _{0 &} _& M M T% ! **** 9*8 < & -;* # & 82 & -0 8 ; 9 ! % * 9(; & 9*; 0 *

(26)

%( 70 !* !* /+ ++ & - * 2 & - & 8 % % U %H9! ;U _9?; & 0 * 2 & = K#%H %HLM 0 B * '!1 . 2 0 * 2 0 0 KGL*7 & 0B 0 9 ; * 2

& & B &

0 * ! $ "8 90 & 0 0B ; 9 ; * 2 = . & - 9 ;* 2 B & 9 0 & & . & - ;* 2 & B . 8 %# 0 8 & 9 ; 0 8

*

***

!

%

;

9 ;

9

5

_{9 ;} !# / B 8 ; / B & 0 9G;8

;;

9 ;

9 ;9

;

9

9 ;

%

9

5

9G; & 8 M ! 0 *

(27)

/ 4 %? ; / B & %!*** 8

"

U

;

9 ;;

9 %

;9

;

9

9 ;

%

9

M

*

%

;

%

9

9%$; 4 9 ; 9 ; B 9 ! $ " ;* 2 0 8 %# 0 8 & 9 ; 0 8 * ; 9 ; 9 *** ! % U ; 9 ; 9 ; 9 5 5 9%%; & * !# / B 8 / B & 8 ;; 9 ; 9 9 ; 9 ; % 9 ₉ _; ₉ _; ; 9 5 ; 9 ; 9 9 ; 59 ; 9%!; & * #$ $$ $ "8 2 & 9/+ ++; . 9 ;* 1 & & B 0 * B & * 2 /+ & -0 * 7 & ++ * 2 & B 0 9%";8 ;; 9 % ;9 9 ; 9 ; % 9 5 _9%"; & *

(28)

% # & 7 & & - B * 2 0 9 ; & 0 & 0 0B * 2 9 & -; 0 * 2 0 & = 8 ; 9 ; 9 & 8 ; 9 M T% ! V M & & -M 9 ; & -* 2 0 & 8 8

"

*

U

M 8 & ! U % U ! U U * ! U U * " " " * & 8 " 9 K$ L;M 0 M 0 & -M 2 9 ; 0 9 U ;8H ;; ! U9 ; 9 9 ; 9 ! ! 2 B & & -9%>;8 ;; 9 % ;9 9 ; 9 ; % 9 9%>; & 8 ; 9 M

;

9

M *

(29)

/ 4 %G '!4 ) ,5 & - & 0 < 9 / ;* , 9 ; & 0 & 9 ; 0 B 9 0 - ;*2 0 0 9 ; *+ 0B 0 -90 ; 9 &; 9 0 0 0 0B ;*+ 9 ; - & 9 ; * / - & 0 - 9 ; * , & 0B 0B 0 *, H 0B 0 9 ; 0B 90 ;*2 0B & 0B *2 & 0 & > 0B 9 0 ;* & 0 & * , & - 0 9F # < 0 ;* K! L *2 0 0 * . & - !H & %! M ; 9 K$ !LM T$*$! M T$*$%"M ; $ 9 T%M 9$;T$*$(M 9$;TH$* + ++ /+ & - 8 +%*" T%*%* B !"#" 5 . < & * /+ ++ & - 9 ; & K$ $*$?L*2 0 9(; !*H*2 K! L* '!& ) . K! L & 0 0 0B 9 0 0 ; 0B 9 0 ;* & 8 0 *2 -& 9 ** 0 ;* * , & 0 &

(30)

!$ 0 0 *2 0 - K! L* , *"*( 0 0 & 0 0 0 0 *2 9** & 0 0 ; = * & 0B *, " 9 "$*$$$ ; 0 9 , *"*?;

& & 0 & 0 0 0B

* / 0 9 0 & 0 ;* ,8 / B & 0 * ; 0; ; -8 2 0 P Q*

(31)

/ 4 !% , *"* & & 0B * B 0 *, 0B 9 0 0 ; 0 & *2 0 * .82& 0 & 0 * 9& %H$*$$$ ;& , "*

9 & 0 ;*2 & & , *"*G 9;8

& 0 *2 9 & 9 ; 0 ; & , *"*G 9;*2 0 0 9 ; & 0 9 0 ;* 0 0 & 0 *2 0 & , *"*G 90;* 9, *"*G 9;; & 0

& & 9 & & ;

0 0 < 90 ;*/ 0

*7 & &

(32)

!! ; 0; ; ; /8 M9; 5 8 0 M90; 8 0 - 0B 0 0 M9; ) & 0 9 & ; 90 ; 9;M9; ) 90;* 9 K! L; * , 0 = 9 ; 0 * , B & - 9, * "*(; 0 * 0 0 < 9 0 - ;* 7 & , "*G9; 9;8 90 ; 0 < *

(33)

) 0 . !"

-

.

7/

8

-! 2 0 * / & "*? " & 8 0 * 1 & 0 9 * * 0B 0 0 ; 0 B - 0 0 * 2 0 & 0 K!GL 0 8 B * 2 0 0 & 0 0 0 0 0 0 * 2 0 & 0 K>L* -!" ( 7 2 & 0 B B * 2 0 & & * 2 9 0 & - K"%L; 9 * * ; * 2 0 0 & & 0 * & & -* B * 0 * , 9 0 &; 8 ; 9 ! * $ ; 9 ; % 9

$

_* 2 * / 0 K"!L* 2 9 ; B 0

&0 - & * , 0 &

9 ; 0B 0 0

B & * 2

B & =

(34)

!> 2 & , * "*!* . ++ 9 * * . ++ ;* -!' / 5 7 9/ : 2 . , * "*" , * "*>* 7 . * $ $ " 8 2 . 9%H;8 ; ; 9 9 ; ; 9 9 $ ; 9 ; 9 ; 9 % % 5 5

&

9%H; & 8 ; ; 9 95 % & M ' L *** K ; 9 % ! 5 9 0B ;M ; 9 9 9!$;;M ; 9& 9F ; M & M T% ! **** 9*8 0 ;* 2 9& ; 8

&

;

9 $

9 ;

;

U

9

5

! 9%(; 2 9 %; & 9 ; & * 4 0 0 & & * 2 & 95 9 ; %; 0 8 * ; 9 ; 9 U & WX U ; 9 ; 9 ; ; 9 9 % ' % 0 0 5 5 5 9%?;

(35)

) 0 . !H & 8 ; 9 & M 0 0 & M % 0 * 2 . 0 & * 7 & 0 * 2 9 ; "* $ ) 8 2 . 9 ; & " & 0 . 9 . ;* 2 0 0 9 0 ; = 0 0 * 2 & B . 8 %# 0 8 & 9 ; 0 8 * ; 9 ; 9 U & WX U ; 9 ; 9 ; 9 ( ' ( 0 0 5 5 9% ; & 8 ( 0 M 0 9%?;M !# / B 8 ; / B & & 0 9%G;8 ;; 9 ; 9 ;9 9 ; 9 ; % 9 5 _9%G; & 8 9 ; & 0 9 ; $*( 9 %;M

(36)

!( ; / B & & 8 ;; 9 ( * $ 9 Y ; 9 ; % 9 9!$; & 8 Y * 4 9 ; * 5 & . 0 * 2 0 8 & M & B * 2 8 * / 0 & 9 * * & ; . 9 0 ;* 0 < 0 9 - ; 0 . * -!-2 ++ " , * "*" , "*>* ++ 9 0 9H; 9%"; ; & 9 ; B 9 * * ;* 2 8 & ; 9 ; 9 M ; 9 ; 9 ; % 9 ) 9!%; & 8 M M ) & 9 * * < ; * 2 0 0 >*(*

(37)

) 0 . !? -!1 5 5 0 0B 90 ; 9 ;*

, & 0 & 0 9 &

0 ; * - 8 9 & ; * 2 & - & 0 * 2 B %H* , & * 2 B 0 H$ 9 ;* 0 0 * / 0 & 9 0 ;* -!4 / 8 / . ++ 9 0 ; 0 0 * 2 0 9 K!GL; & 9 ; 9 ; & 0 9 ; 90 ; 0 0 * 0 0 B 9 0 A >*!1 2 ;* B 0 0 ++ & -* , 0 0 0 0 & 0B 9 0 ;* 2 0 - 0 8 0 & . 0 A , * "*"* 7 0 & - * & 0 9 - 0B 9& ;8 0 < - 0 ;* 7 - & ++ 0 0 & 0 0 B * / ++ 9 9!%;;*

2 - 0 - & & & 0

= & 0 0 *

2 9 ;

(38)

! % A / B . 8 ;; 9 $ ;9 H ; 9 9 ; 9 ; % 9 X *** ! % U W * * %!*** 9!!; & 8 . M ; 9 ++ M * < ++ & -M

*

B * ! A 5 B ++ 8 ; $ ;9 H ; 9 9 X *** ! % U W * * 9!"; & 8 B 0 & - ++ & - 9 ;M 9!!;* "# . / B ++ 8 % ; 9 * 2 0 B ++ 9 9H;;* 2 % 0 9& 0 0 & ;* & ; 9 _$8 $ ; 9 ; 9 & *

(39)

) 0 . !G -!& ) 0B 8 -0 0 0 9 * * -; &-; 0 0 B * , & , * "*? 0 9 & ; & * 2 0 & " A "*? , * "*(8 0 0 B * "*( ! 3 4 " * T$*>HM * T$*%M $T%*$%M %T!*HM T$*$$!M 9 >*( " & "; $$% * $ ) M T$*$!M T$*$$$HM ; $ 9 T%M 9 ; K$*% HLM 9 >*>$ " $ ; M (" * $ % ( $*!(M Y T$*?M &T$*HM 9$; $*?M 9$;T$*$(M 9 >*" $ ; !"$$ ; $ 9 $ M $9 ;

+

!"$$ $$$

,

M 9 >*!1 2 ; ; $ 9 TH$M 9! $ ; . & - !! 9*; & %! 9 ; M + ++ /+ & - 8 +%*" & 9$; T %*%* B /+ ++ & - 6 T$* 66 + $*(H B

& - 9 0 9%!;; & - 9%G; &

G * $ ; $ 9 * 5 . < & * /+ ++ & -9 ; & K$ $*$?L* 2 0 9(; !*H*

2 & 9 & %H$*$$$ ;* , * >*% 0 & 8

& 9 0 ; %H

& 0 0 9

%H*$$$ 0

(40)

"$

; 0;

% 8 8 & & 9 ;M &

0 - 9 ;M9; M90; * / & , *>*!8 0 9 ;*/ 0 0 0 B 9 0 8 0 0 & - & ;* ; 0; % 8 1 8 M9; M90; 9 0 ; 2 & & 9, *>*";8 0 0 < & */ 0 * 0 0 & 9, *>*" 9;;8 9 9 ; ; 0 * & & , >*" 9& ;*

(41)

) 0 . "% ; 0; % 8 5 8 9 ;* 9; *90; * + "$ < 2 0 >*%8 0 0 0 * - %H$*$$$ *, 0 0 H ( *2 H 0 = 0 0 0 9 & 0 ;* 2 0 >*%8 "$ 9 %H$*$$$ ;# 0 & * ! ! ! ( ( ?!%( >? H (( ) >$ %> %?G " G ( 5 %( ?> %> ( %H ( $ , 0 & & 8 & 0 B *2 0 0 0 & 0 * 2 & 8 & , *>*! 90;8 0 0 < 9** & ; & 9** ;*

(42)

(43)

0 < 4 0 ""

1 )

;

1! 2 & & 0B 0 0B 9 0 ;* , 9 & , H*%; & 0 0B 0 & 0 0B * 1 9 & & 0 ; -* 2 0 0 0B -0 * ( + - 8 0 0 * ) 8 * + 8 # * / 0 9* * & 0 ; & , * H*% & 0 0 * / 0 B 9* * 0 B 0 A >) 5 " ;* -- & , * H*%* 2 0 & . & * & 0 - * & 0 0 & - 0 . * 1!" / 5 7 2 . 0 # & -* / 9 & ; 0 * 0 &

(44)

">

. 8 9 % ;

9&;* 2

9 0 9%?;;* 2 9& ;

9%(;*

% & 9 & ;* & 0

. * 0 & & . * / & 9 ; . + + . 9, * H*!;* 2 0 B %9 ; &9 ;* 2 . & -* . + . 7 + ( 8 0 & . 9 0# & -; . + + 9 ;* 2 . 0 B . * , . + . + + * 2 & B 9!! !H; . + + 8 %# / B &9 ;8 & M ; 9 M ; 9 ;; 9 Y 9 ; 9 ;; 9 Y 9 ; 9 ;; 9 Z 9 ; 9 ; % 9 " ! % 6 6 7 7 & & & & & & & & & & 9!!; & 8 ; 9 7 0 & . & -9 ; 9 9!";;M ; 9

6 0 & . & - &

9 9!>;;M

7 6 M

(45)

0 < 4 0

"H

&Z & 9 0 &9 ;;M

&Y _& _{% 9} _&₉ _;_;*

7 % & M $ % ; 9 9!"; 5 6 % & M $ % ; 9 9!>; & 8 & . & -M 5 M 0 . & -* !# / B %9 ;8 & M ; 9 M ; 9 Y ;; 9 Y 9 ; 9 Z ; % 9 % 6 6 7 7 % % % % % % 9!H; & 8 % %9 ;M %Z & 9 & %9 ;;M %Y & % 9 &9 ;;M ; 9 7 69 ; 7 6 & 9!!;* 1!' ) 2 & . + + 9 ; - *2 , *"* 8 0B 0 *4 & 0 0B & -0 *2 & . + + - *

(46)

"( 2 >*( 3 $ " " >* . + + 8 &ZT$*$$?M &Y T$*>M %T$*GM !T$*$"M "T$*>M %Z T$*!M %Y T$*("M %T$*$ M T$*HHM ₅T$*G" M ; $ 9 % T %Y M&9$;T&Y * & 0 . * & 0 & * , & . + + * %H$*$$$ * %# & . + + 2 0 & , * H*%8 9 0 0 ;M 0

& 9 * * & ; &

0 9 * * 0 < ;* , & !$$ & 0 * ; 0; ( 8 8 0 * 9 ; * 90; 9 0 & M & 9 ; 0 0 ;*

+ & & & * , , * H*! 90; 0

& 9 ;

, * H*% 90; 9 0 ; & 0 9 ;

0 0 * 2

(47)

0 < 4 0 "? 90 0 9 ; ; & 0 & 0 9 !!$;* ; 0; ( 8 5 8 0 0 * 9; * 90; * + !! < & 0 * / 0 8 >>H* / 0 9"%?;* / 0 & 9 %; 9* * 0 ;* 2 0 H*%8 < 9& . + + ;* 4 0 8 !!* - %H$*$$$ * ! ! < ! ( ( >>>*G$ "%?*(" $*"( ) %GH*%? ?(* ( $*(( ( 5 ?H$ >?$ ! ( %%( %GH $ 89 5 ": !# & . + + 4 & 0 8 & 9 H$;8 0 B 9 & 0 ; 0 0 * , * H*"90; 0 0 & & 0 0 * 2 0 8 %H % *

(48)

" ; 0; ( 8 8 0 * 2 0 B * 9 ; * 90; * 2 & & , H*>8 B 9 0 - # , H*>90;;M 0 * 0 0 & 9 "!$; 0 9H%!;* 2 & & 0 < 0 9 0 0 ;* ; 0; (%85 8 0 9 ; & 0 < * 2 & & 9 %H[;* 9 ; * 90; * 0 0 . + + -9 * * & ;8 H[ 0 < * / < 9 & ; 0 0 < & 9 * * 0 9, * H*%; & 9, * H*>;;*

(49)

0 < 4 0 "G 2 < & 2 0 H*!* 2 0 9?%; & & >>H92 0 H*%;* , & - 0 & 0 * 0 & ! " 92 0 H*!; 92 0 H*%;* 2 0 H*!8 < 9& . + + ;* 4 0 8% * - %H$*$$$ * ! ! < ! ( ( ?%*(( " >*!! %*! ) "H*H? G(*$( !*!> ( 5 %(? H%! ? ( "H !$" $ 89 5 ": 2 0B & . + + & -9 ;* 5 & 9 ; 0 9 & 0 ; 0 & 9 ; 0 * 2 & & & 0 8 0 9 ; - & 9 & 0 ; < *

(50)

(51)

, / / 4 >%

4

3

8

7

8 )7

4! 2 & 0 9 0 >; . + + 9 H;M & * 2 * "*( ! 3 4 " "* 9 < ; * 1 9& 0B 0 ; * , < 0 8 -0 = * 0 & * 4!" ) ,5 2 & & 0 & & 0B * , 9 %H$*$$$ ;*4 9* * = #- & 0 ;* / . + + * 2 0 0 , * (*%8 0 & ! * 2 0 # B 9& ;* / 0 & 92 0 (*%; 0 0 0 0 9* * & ;* ; 0; , 8 80 0 ! & 0 * 9; * 90; *

(52)

>!

4 & & 8!> " &

* 1 0 & 0 B = 8 & 9 ;* ; 0; , 85 8!> & 0 0 B * 9; * 90; * 2 %H < 0 * 2 0 !> & 0 !(H* 2 0 * 2 0 (*%8 < & * 4 0 8%H* - %H$*$$$ * ! ! ! ( ( *"" %((* $*?" ) H*(( > *H! $* ( 5 !> !(H " ( ! %$( $ 4!' % ; 2 & < 0 * , 0 9 & , * "* & 0 ;8 0 9 & ;* / %H$*$$$ 0 & , (*" 9 & ;* 2 0 & , * (*"* 2 0 9 , * (*" 90;;* , % & 8 - 0 >$M %! 9(?[; & 8 0

(53)

, / / 4 >" 9 0 ; 9 ; & - 9 0 ;* ; 0; , 8 8 < = - & 8 - & * , = 8 * 9; * 90; * 2 & 0 * 2 B * M 0 0 * 2 * 2 0 0 & 0 * 4 < * ( % & < 9 0 0 ;* ; 0; , %85 8 0 & & * *, = 8 9% ;9; * 90; *

(54)

>> 2 & & 0 * 2 0 "H H! & 0 &8! * 2 0 &8"* 2 0 (*!8 < < 0 * 4 0 8% * - %H$*$$$ * ! ! ! ( ( ! *"G "H*H "*"G ) ""*G %>*"> "*> ( 5 %!$ H! G ( $ $ $ 4!- 5, 2 & * 2

& , * "* 9 & 0 & &

;* 2 9& %H$*$$$ ; & 2 0 H*!* 2 - & 9, * (*H 9 ;;8 < * 2 M 9 ; 9 0 A "*( ! 3 4 " ";* 0 * ,

$

9$; $$$ ₉ - 0 ;* 2 0 & 8 0 B < 0 0 * 0 0 H * 7 M 9& 0 ; *

(55)

, / / 4 >H ; 0; ,(8 8 0 H *9; *90; *

2 & & & 8 0

0 # *7 0 0 9 ; H9 , *(*( 90;;* * , (*( 9; 90 - 0 B ;8 0 0 & 0B 0 * 2 < 2 0 (*"*2 0 %" *2 & * 0 0 0 0 9 >H; 0 & 0 9?$; 0 9%G;*C & 0 & 0 *

(56)

>(

" % 0 *2 & ! &

# & % & & *

; 0; , ,85 8 0 9 0 0 ;*9; *90; * 2 0 (*"8 < & < 9 ;*4 0 8% * - %H$*$$$ * ! ! ! ( ( ?$*! %"*>> (*"G ) ! *%? ?*>G "*%H ( 5 %!! "> %" ( %G H %

(57)

, / / 4 >? & K! L& - 0 & 9 ; * / & 2 0 (*>* 2 9 %H$*$$$ ; & 9 0 ;* 0 %>9 & ;80 * / 0 - & 0 9 - 0 ;* 2 & > %$ * H 0 0 9 & 0 ;8 0 B & 0 * 2 0 (*>8 < & < 9 ;* 4 0 8%$* - %H$*$$$ * ! ! ( %!!%*( "* ) %H> *!! "*?G ( 5 "$?? %" ( $ % & K! L* 5 & B 9& ; 0 * 4!1 7 , 2 & 8 * 2 - & , * "* * 2 2 0 H*!* - %H$*$$$ * 2 & 9, * (*" 9 ;;* 0 - 0 0 * 2 0 * 7 0 & 0 9 * * $*%> ;* 2 0 & 0 0 9 & 0B ;* / 0B 0 - 9 & 0 ;* , $$$ ; $ 9

$

₉ _- ₀ ;*

2 0 & & * 7 & 9& 0 ;

* 2 0 B 9, * (*?9 ;;

9 & 9 ;

A , * (*?90;;* >[

(58)

> 9* * 0 & & 0 , * (*? 90;;* ; 0; ,-8 8 0 & B * 2 * = * 9; * 90; *

2 & & & 8 0 B 9

;M 0 & * 2 0 & 0 0 * %([ * ; 0; ,.85 8 ? * = * 9; * 90; * 2 & 0 & * 2 0 %& 0 G$* 2 0 %(G*

(59)

, / / 4 >G 2 0 (*H8 < & * 4 0 8 % * - %H$*$$$ * ! ! ! ( ( "G*! G*G> $*(? ) "G*"% "H*$! %*( ( 5 %>! %(G ? ( % "$ $ & 0 8 >[ 0 & 0 0 9 & ;& * 7 0 0 &* 4!4 ( 0 * , 0 0 * 0 & * & , * (*G* 2 ? * , ! 9 %H$ ; ! 0 9, * (*G;* 0 0 9 & , * "* ; %H$*$$$ * ; 0; , /8 2& 0 8 ! 0 * 9; * 90; 0 0 *

(60)

H$ 2 B , * (*G# 90; 90 - ; 0 * 0 9, * (*G# 90;; 0 0 * & 0 9 ; & 0 & 0 9 ;* 7 0 0 & - -9 0 ;* & 0 &

-& - 0 * 2 0 (*( & 0 & 0 0

& * 0 9 0 0 ; %!%& %%H* 0 & 0 & 0 * 2 0 (*(82 0 0 & ! 0 * ! ! %!% %%H (? G> >9 ; 0 ! 9, * (*%$;* + & * 0 B ! 0 0 * 2 0 & 0 9* * A , * (*%$90; 9; 9; 9;;* 2 & * 7 9 ; 90 & 0 ; 0 * 7 0 0 0 ! 0 * 2 0 0 0 & 0 * 2 * , & 0 0 0 0 & M 0 0 0 9 ;M 0 0 0 & 0 0 * 2 & 0 & ! * 1 0 0 0 * 2 0 & 0 0 < & 0 & 0 * 2 0 (*?82 0 0 & > 0 ** ! ! !H? !>( !!$ ! $

(61)

, / / 4 H% ; 0; ; ; ; , ;8 , 0 8 > 0 9; *90; 0 0 * & 0 0 & 0 *, 0 9& ; & 0 & - 9 ;*

(62)

(63)

H"

&

&! 2 & -0 K! L & & * 2 0B & & * 2 0 0B 9 ; 0B 0 9 0B ; 0 9 0B ;* # * * 9 ; 9 0 ; * 2 K! L & -& * 2 & 0B 9 0 ;* 2 & < 0 * -0 0B 9 ;* 0 0 & * , 0 & 9* * 0 ; & ;* & 0 9 0 ; 0 0 B & 0 9 0 0 ;* + - 0 9* * # , H*%; & * 2

& 0 & 0 &

0 * 2 & K! L 0 > ) 5 " H 3 5 < & 5 ! " "* 2 0 0 B * 9 & B ; & 0 0 & 0 * 2 0 K!GL* 8 - 0 = 0 9 ; * 2 0 & . 9. ; + 8 . + + * 2 0 0 = 0 9* * -0 ;* / & -8 0 = * 2 . *

(64)

H> - 9 0 ; . & 0 & -* 9& & ;8 0 9& 0 & - ;* ( <

* 2 & & &

* F < 0 9 ; 8 0 9 ;* / < 9 H ; 8 0 H %H$*$$$ 9 0 ;* & & & 0 9 0 & 0 0 ;* , & 9 ; 0 8 0 0 0 ! 0 0 9 0 ;* 0 0 9& 0 ; 8 - -* &!" 3 & 0 *

0 0 & & &

* , 9 0 < ; - * = 9 ; -* 0 & & 0 * & & 9 ; 0

& & 0 9* * & =

- ;* 2 9 0 & ; & 9 ; 0 * & 0 < 0 0 * 2 * 2 & 0 & - 0 * 2 0 B & . 9 0 ;8 9 0 & ; 9 ;* 0 & . & -* 2

(65)

HH * 2 0 9 ; B 0 9 0 0 ;* / 9 ; & 0 B . & - * 0 9 0 0 & 0 0 ; = 0 * 2 0 - 0 0 * & & & 9 = & ;* 7 - 0 0 9 ; & * / 0 B * 2 0 * , 0 0 * 2 0 0 & 0 0 B * 2 9 - ; *

& & &

- & 0 & 0

0 9 & 0 M

& = 0 B

0 & 0 ;* 7 0 &

(66)

(67)

/ / A 4 4 & -H?

5 =

2 0 * - & < & - 9* * ; * 0 %$%% 0 * 4 * 2 9, /*%;* 2 0 & * 0 & = 0 & * / 0 * , 0

0 & & - 0 0 & K%HL*

# 8 *

. %G>"K"$L* &

-0 & - * 2 0

0 & &

& 0 * 2 & &

-& 0 & 0 0 K%HL* , /*! & 0 . & ' L *** K % ! ' L *** K % ! & * 2 0 8 % & 8 9 & M & &;*

(68)

H

-% &% ! &! & & # 8, * 2 0 & - * & 9 0 ;8 # # 9, /*";* <# % <# % <# % <#% ; 0; ; # 84 & - 8 ; # M0; # M ; * & -B & - * 7 # & - # K%GL* B 9- & 0 - ; & -* / - & * 0 K%(L& 0 * 2 & - & * * & -& 0 & -= 0 K%HL* 2 & B * # < 97 ;K%?L 0 * 2 0 * 2 # * 2 & 0 & & *

(69)

/ A / + 0 4 HG

5 # = )

#! / & 0 *2 0 & 9 0 ; *

2& & & 8 4/+ &

M 74/+ 9 4/+; 9 4/+;* & 0 0 9 74/+; 4/+*2 0 & 0 & 8 = 8 0 & 4/+ 74/+* 2 2 .U. - *2 & - 9 0 & -;* 9 ; & ) M

& & \ 0 K"(L & & \&

0 K"?L*2 SS * 4 0 4/+ 74/+* #!") 9) : 4/+ 0 * 0 9, * *!;* 2 0 -*70B < 0

(70)

($ * / 0B 0 0 0 * 2 0B 0 9 0B ;* 0 0 0 * 9 74/+; 0 4/+ & * 2 0 90 ; 8 * 1 0 & 9, * *";* 2 0 9 0 0 0 ; 0 & * = 8 4/+ * 2 & 8 * & * , 0B *

(71)

/ A / + 0 4 (% = 8 < * 9 ; 0 SS * 2 = 9 ; 0 0 = * 8 B 0 9 0 ;M .4F 9 ; * 2 9 & - ; & 74/+ & * #!' 9 : 74/+ 0 0 4/+ * / 9 ; 0 4/+ 9 B B ; 0 * 2 - * 2 74/+ & & * . 0 B 0 M 0 0 - 0 8 4/+ & - * , & - 0 0 9 9< ;;8. ++ /+ & - *

(72)

(! = %8 74/+ * & - 0 & 9, * *H , * *( , * *?;* & 0 * 0 -* , * *H & . * / = 0 & * , *( & /+ ++ * 2 9 ; /+ ++ 0 - * , * *? & & . 9 & 8 ;*

(73)

("

= (8F . & -*

= ,8F ++ /+ & - *

(74)

(75)

+ (H K%L , *# " $ 5 & . C 4 0 %GGG9 ;* K!L +*, */ */*4 << " " " . ( + 0 / 9 +/ !$$H; - , !$$H* K"L C .* C 2*# 5 " * " "" " * " " 5 > " 5 4 4 & - C *%% *%H"%A %H>G %GG * K>L .*+*, * C J 0 ,*# > << " . !$$! ' 4 4 & -9 # ; / !$$!* KHL +* , *$ " 5 . !$$" ' 4 4 & - A ' 44 7 / !$$"* K(L '*$ ?" ? " "M 2 0 C *!( " *>$ #>!$ %GG(* K?L < +* , *3 " 5 " 5 " " " " . !$$! 9 # ; / !$$!* K L E *M & < '* ' 2* " " 4 & I -%GG%* KGL 1 '*5 *] . 1* *) 5 / 4 / %GG>* K%$L F*& " " 0 -4 & I - / %G ?* K%%L / - +* *= >= " $ 5 " 2 2. %GG * K%!L 5 * * 8 *4 & I -8 %GG>* K%"L - +*/*# 5 " " " 5 5 ' + 0 / C *+/#! 4 *% *%>A !" %G (*

(76)

((

K%>L 0 *1 * = # " " ' @ # 1

= 4 2 0 .

0 *!( R" *"(H#" $ B %GG(*

K%HL - *& & " " . 4 & I

-/ %GG>* K%(L E 2*3 >A < "" C 0 "^ %G G* K%?L E 2*3 >A " 1 " #C %GGH* K% L . *.*! $ " 7 . ) %G!?* K%GL + 1* * F* * 5 +*'?) " " 5 > " 4 C *"!" H""#H"( %G (* K!$L )*0 $ 5 " # " # "B + 0 / *%H *"#G %GGH* K!%L 2 - *)*# 1 2 %G%%* K!!L 4 4*'*3 5 + / * "!" / *%G >* K!"L F*F +* *C # " " " " " 5 5 " + 0 + % . * 0 /8 **2*%G " %G%#!%>* K!>L *' " " 5" . , ' / 0 / *H > / %G??* K!HL *' 3 ! !1C $ . C *?% ? * ?!A > %G "* K!(L *'*) 5 >5 " > 5 " " " "? "? " ' + C *! * %A G"* K!?L , 1* ,*. <# 0 /* + 1*4 4 5 * ,* +*. )* I*E 9 *; 0 / )4 C *"%"G 8 C !$$>* K! L / */*, * /* * # " & 1 5 $ 5 " 3 ! # * " A5 2 " . ( + 0 / 9 +/ !$$H; - , !$$H* K!GL - *,*3 5 4 & I - %GH"*

(77)

+ (? K"$L 5 *] . 5 * # " " " * * *H *%%H #%""* K"%L '*'*& & " 3 " " 4 ! ! #5 "D?. *4 */ * * *?G / *!HH>#!HH %G !* K"!L < +*+*C J 0 ,*'*, *,*# " & 3 " # ! $ 5 " # > " ! *. !$$H F 9F 7 !$$H;5 1* * / *% *%!%# %! !$$H* K""L ,*, < * .*1 5 $ 5 1 < # ' " ! # "* I - & 2* < - ,9 *;. 2 + 0 2 - 8 C H$%#H%" %GG"* K">L 4 * , 1*& 3 " " # A " " 4 * 2 ( "%#"? !$$!* K"HL )*' # ) $ " # / ) ' C * %%* 2 . 0 * *?H#%%$ %GG>* K"(L \ 0 * 8UU&&&* * U*1 81 0 !" !$$H* K"?L \& 0 * 8UU=& * * U*1 81 0 !" !$$H*