some inequalities for information divergence and related

 !
"#
$
% ! " # $ # $ % # $ &' % % % # ( % ) # ( $ * ( ! % ( % % ( % + ,
% -./ ,
% , " -./ ,
0
# * 1 2 3 1 4.15 6
# #
$
% ) (*
# $ # $ 7 ((
% # $ ! ,
% # $ (8
7 # * . (( % # % % 79 : * : * : $ # * # $ (;
# $ (<
# ( # 9 3 3 (=
3 # 9 3 3
,
(>
# 3
. ) 7 .
?
. @(;A (B
# &1' (B 9 3
(C
$ 3 # 3 $ 3
,
(*:
&
' ) D , % !" # # $%&
'
? (**
%
,
% , 1 $ 1 1 " =;
E # ( (* * % 9
, * 6
# $ # # 9 # : # : # + * # $ : * * 6
# $ # $ * $ * $ * *
8*
*
*
$ * $ * * *
#
# (* * ? 8*
! 6
"
! 8(
% ( % ,
8* + % 8* *
( ( * % # ( % Ê
& ½ ' $
(
& ) *' $
+ +& ' ( * &
,
&--' Ê '
(
:
<: % :
>:
F (*: (** 6
% ( % ( ! 1 #
# $ # ( $ * ( D :
,
6
% # ( % . ;*
;(
#
+ % #
$ ( * $ % "
;8
# ( % ( % ( # 9 # : : 8( ;*
( % # ;( ;8 + 7 (C 3 # # #
# $ ( :
;;
# ( $ (
! : ( # ( $ * $ ( ( # :
8(
9
;( ;; ;8 !" # # $%&
-./ ,
, , (** ;8 % ;<
( # 2 1
9 # # 9 $
( $ * $ ;=
( $ - # * $ # $ (*:
(
# $ $ 8( (** ;=
-./ ,
,
9 F % <*
# ( ( (* * D *
&" '()* # (
' $ (
<(
"
*
$ ' %*
,
F"G @=A F"G
4H @BA 7 5 # # 0
(1 # + 6 #
# $ )
7 * *
#
( ( * % # ( ( * $ * $ $ * (
( ( *
+ ,
Æ $ 1
( ( # # * ?
,
<* F 1
,
. <* 6 7 * 9 ,
<* # # * <( 6 5
* # 0
<* ,
,
<* : *
¼
¼
¼
¼
¼
¼
: *
$ :
# 0
<* , <*
# * $ * $ $ * * <8
# ( # * $ # $ # * # 0
;( <;
! *
! # (
<<
( * ( ( * D *
¼
¼
¼
¼
¼
¼
¼
¼
F
" 7 (< IJ
/ " # $ F"G 4H @BA
- 8*= " " 8 =*
" # $ !" # # $%&
7 9 .
2 @**A - * ,
,
1
?
. K @(<A ) * 8
" @(BA L
5F @*CA 9 ;>;B % &, . ' 5F
) ) . . % H E
M @((A 7 # 1 H " @*8A 4.
E
7
EH @*(A % % 9 % , 5F @*CA N , *8 . 5F @*CA 0G @(A 0G O @8A P 0 @(CA . ) ,
-./ ,
! @*A F"G 4H @BA 4.
@*BA -. @(8A 7 -./ ,
F"G @CA O @(: (*A ?
. K @(<A K @(=A J ,
-. @(8A F"G @=A F"G 4H @BA
- 8*> + J -./
,
. ,
;8 ;; ;( ,
< , (8 <; . 1 ,
$ 4J @*<A $ . (8 5 L
4J @*<A
# # ! 9 4 4" @*;A *
#
=(
( ( * $ $ =8
$ # $ ( $ ( * $ : $ + $ # $ # $ # $ ( ( ,
. # # 7 M @(>A 4J " @*=A # ) # , <* (8 8* ;( , 6
( ( %
=;
% % ½
¾
)*
1 % # $ $ ½
¾
½
¾
" .
# % # + =; ,
# * : # : *
, =; <* ( % =<
( ( *
Æ ,
=< <
E (8 % ,
% 5 7 ;8 (** -./
,
* :
B:88 :
BC=* ,
, % # * # % * % % % ;
;B 2 &' % % 6
# ( ==
% # ( % 8* ;( 6
*
# #
=>
( ( * % , 8( 6 0
# * : #
: * ( ,
. % ! ,
-./ ,
# # & # % # # $ # : # # : # &: # & : # : # : # ( & : # ; ) % : # ,
% 7 ,
;8 % -./ ,
;<
! F"G
# 1 ? F"G @< = >A 9 # 6 @: @ Ê F"G
# 1 =B
# # # : D " # : # * # # ' # ' * ' $ * ( # *
% ( # ( % ( # ( ! . # ' # ' * ' $ ( * Ý % # ( $ * ( (
. /01 (
!" # # $%&
)
! # ' # ' * +
) 6
) #
,1 ) # ) % ) 6 % (** () % ;) # 1 5F
@*CA 2F @*:A ) Æ # * : # : *
# $ # 4 @*>A ) * ) F
"/ ,
, ) % 5F @*CA
2F @*:A ,
(* ) I/
,
() ,
) % # * # % * % (
% ) % ) % J ) Q" , % ) ) " ;( # $ * D : * * # :
=C
- * # ! * # * # $ + $ # * * + # * $ * *
*
#
* $ * *
F
* : F + # # : : # # * $ * 1 * $ ( ( + : : 7
& & * & * *
: ! $ + $ : : =C !
0 ?
. 1
* ?
. I . & ' F?O O *CCB . !
0 5 0G ! 2 4 O E R =C E R
)
"
@*A ? ! , F6 *CB> Q *C>C
@(A 5 0G - ."
/
R 1
. Q =< *B*(8> *CB8
@8A 5 0G - O - ? 7 C> **8*<: *CC8
@;A - 0 0 0 O - F - - **( *;**;= *CC(
@<A F"G - 1
/
" O ) * *B<*BB *C==
@=A F"G 2 3 O ) ( (CC8*B *C=>
@>A F"G 0 # O ) ( 8(C88C *C=>
@BA F"G I 4H 2 $ ! $
+ P.6 ! *CB*
@CA F"G , 4 5 ! -
*( >=B>C8 *CB;
@*:A 2 21F & /& , 226)788 0 )
+ P.6 *C>B
@**A ! 2 2 "
! - (< C(>
C8C *CC>
@*(A 2 7 7 EH - # O ) (;
*C*(:: *CBC
@*8A - 4. 7 EH " 0 %
# 9 O ) (= ;*<;(( *CC*
@*;A + 4 4" 0 ! O *B (>>(B> *C==
@*<A E 4J - ! O (* (*C((: *C=C
@*=A E 4J + " - +/
" I ! ! =; C:>C*( *C=C
@*>A F 4 , N
F - * *(<*;( *C<<
@*BA 4. 2 $ ,
+ P.6 *C<C
@*CA 5 5F -
:
,
; $ + P.6 *CB=
@(:A 4 O < - ! - (; B<>B== *C==
@(*A 4 O - % SSS 8( ;;<;;= *CB=
@((A 7 EH M ,
SSS 8C *:8=*:8C *CC8
@(8A O -. 2 76 )12
*C=; ? *C=:
@(;A 0P ?
. !
=- 9 > SSS
(> >B:>B* *CB* S/ +
@(<A 0P ?
. 7 K 0 @(=A 7 K 2 4 "
4
. *< B(> *C>C
!" # # $%&
)
@(>A M SSS *= >>*>>8 *C>:
@(BA " 0 F
I Q 4 ? (:>(*; + P.6 ! *CB*
@(CA P P ! 0 2