Alternatives to the k-means algorithm that find better clusterings We

Alternatives to the k-means algorithm
that find better clusterings
Greg Hamerly
Charles Elkan
Department of Computer Science and
Engineering
University of California, San Diego
La Jolla, CA 92093
Department of Computer Science and
Engineering
University of California, San Diego
La Jolla, CA 92093
[email protected]
[email protected]
ABSTRACT
!"#$
%&#%&('*),+$#
#
0
+
1
&
2
%
34567'*)
-./ +$ +$. 8 #+9& 3. ;. :<#;
& =
.
/
! />>? '*)@+$
=AB / 2
2CDFE - %F)@+GDF+$ > G- H=.. &I/ @JK
#JLGM*
N!H'),G+$# - +$#
ONP / Q+R
NTS& J" - 2E U!V#
2C 4+$
2 IWS&F#W*& )
#- =<
TEE
2. &8 - - / . JX)@Y / . 4 ?8. - .-./ E#)
+ / +7OZ[[&F
- ( - \ . #+]\ / 4S&^!_%+$)
J`aK*2& /#- K
2E%G -./ X+$+b
2E$&6&%
J`*U! / - #
ONI8
2JcG"d . 4+$
T&#b)
e ? &#4f<* .4? !M+c - C#gd
2+$E . . JX)@&#+$#
2 .
* &G%
2
B&h+b
2+$*%i%
2aF
=j&7G
?#7'*),- +$ - +$
W+$&(
$
/ EOlkB33
2!_
+$+W
2#EU! C
j
2
2* !mgS&##KF)@Y 4 )
#
=n / d/ F- #7o#F) - %. * &%JKC! / / . - ?T-./ / 2! /#. . 2#O
Categories
k O pFO p q rsgt@uvwiand
xyz_us[Subject
{j|H}y~#w}Descriptors
€5j‚F!m+GbƒFG
C&d„U)
2 .†… O ‡O pdq ˆ u<w3‰VŠgyzmsg‹Œ~FyŽgujgu_u‹z_~F},5n‘n2- d„U - )
#4
General
’ bTerms
Y 4 a*),+$
ea*)@+$
./
/ . ?
-. 2
24S - G - +$#
/ # / E
2&
1.
“B% INTRODUCTION
##=#J" h
"B%
2ao!nS&F
% E#)
#
B3-./ &%=<
di+$- E2%*U%
2ah”+ - . / #. o/ &
E27 - 4HOI• ? E# - ..4? -./ $ T#
E2!m - e
2 ./ W"QE# . +7= / e . 4+$
n
2aBT+$4)
+$ > " - 2%+G+G - .F- 4h–mJ"# - e@JK
4#+$
%—O”˜8+$ h
Mh
aF#J"7$™B‘n)
. %&”!md#W% . > EF . /#+š- -!KE24#8›)@&F+$
2 .
&#%1L'^
2
[q œ€Ož . 4+$
. a'),+$
o
2a . - .
%#eb` . . +$#+ / +
2 ./ = / - e
/- a
`E*X
2 #
OQ@
2 2
KJK #
2&#K` 2 J" - h2./T+$+$ > XC- +#+- - .H- 1–m!m./ T
+$d / +W`! - *
%—QWCW22)@Y / . 4 ?-./ FO
[ / 26+ Ÿ - *2),
2& -./ #¡”i!_”
!†+$ .? !# . 4+$
H
/- C
H'),+$
H&BAB / 2
2bDFE - %F)
+DF+$ H=#
2 d 2C +WK!CŸ *
2¡WEF)
2*T> &¢GTE2- 4o?6/ dE / U/ &G%FO`£Q - - - *T&#S
KJ"47 *2% EX&EE
K G B+)
24-D<./ O ’ *2),
2- & -./ . #$ . 4+$
"- 8J"4hb- / 2
/ TC
2 ./ H=H&87SCCE
24#
B! - * 3 EF+ +7Oh•K
26+$&F
[JKa
JK/ .. =. / `- ?- 7. - . 2. - / I$ . - . +$#+ / - +¤G"
!†GQ!M+¤` . . +$+ / +7=G†O O# -./ #BN
n
QY 4 %&#BU 2O ’ C& . -/ . . ?E#+-- d
Q . G&C- 2#
244 ? /C4 . > GH=
&o
TWE#+ ? EF . +¥!N&G% -./ #O
•K$ !`
BJKa3
d &#
%&3&3D& 2)
2& -./ . $ . 4+$
X/ WS&6*&F)@Y / . ?6-./ -
¤
2EGM . &#%FO¦„T - * .? =C+ ? JX%EE3+$#&#
”
§E#E
2&^;+$EF -./ ;
2 ./ #
O¨¨JX%EF)
Eb+$&3
b#6 2%
!_+$
CE bb / E / b!
-./ 7 . #+7=e&¢G / 2
C#$ / . 4+©
+ )
E . +$
OoPI# - +$+$ .4?”/ 2&iJX%E#E +$&”
C
2+$/#E . .4?
/ #" -./ #B . 4+¤
2% . +$
g!_+¤&#4f<
%2#BE*
"–†!_ - .. &b%&F+ª
%G2—=*& %aF#I
n
2 ./ jOe . 4+$
g
/#- / 2&dq4«¬FE / 2d
H - F)
Y 84
dD2+$=HGd ! +$E %HOWT
JX%/ E#EQ+$&W
N
2 - #B-!mQX- N/ 4 . > G
XE
)
2 T
T *a&3GB(q4«œ=N«­=jpG,OB•K
I
I!M 42!
2.G… - j=*
n+ ?d-./ . #B . 4+$
eGK
2#
2QT/ /# .
4 OoPTB
2G lq4«‡=`«®GN
d *a#7G
S&#. h> #8EE#E#o / +W- b! -./ =X&1. .4?F> C&F4f< - d‚J`8# -./ T
2 ./ h&oC&#%
2O
•K
N
2! J""E#E#E#" +be! Q
#)
aJ"H=#/ "/##. d . 4+¯
U
/#- a6GIb/ / #),E#+- . 2 ./ /HO
•K
2BE#E# `IS = ` T2+$E#B
SD8WEF . - +$
B! -./ - 8. . / 4+$? dD ..4? =%
37+$EFb -./ 7 . #+$
d+$
2 . O[
N*
&BC+$E#G#` T #+$
V&F C+aK#+ . 2
`
2#
24Ud-.4/ . > G. "&U-2.4? 2 ./ O¥PT! - / 2=d ?;-./ L . 4+°&# . E&
- /. &8#SX!M+±JX%E#EU+$&F
O
Ê ?
„I&F+±E24
²"z_‹ŠgvG~c³´iµbŽg~(uvzM‹zmsgx8¶ŽgxsVV·cz†w3x#‹~¸ŠV}~Ft,uv3}~F‹#¹
wi~#s<yx#yz_usQºBµbŽH~$z†w3x#‹~6}z_»~zm}C¼½#¾V¿#À8‰nz_¾j~#_}IxsVzm}Bt‚Šgm
Á u_uv*º
U„ - .4? =:#bÂÃVÄÅÆ*2& /#- &C"J -./ T . 4+
&c'),G+$# +$
”–†Çdkd˜h—W8
2
o!M+È^E#)
- +$.. > G - 4- ¸
2&1(G+$ - +$^q ­­=K­«,O
•K#
X . 4+±
2#GJ"
XEF+$
2U$S&## *& -./ b
2)
.
2/ [
dDFEY / %- Ga .4? =#),+&7DF / +$E 2!m¸+$
B–,AB'*£Q)@+$˜h—I
+–†Ç ˜h —"
&i
O$AB •K/ #
)
ÇdkB˜9 . -#+° . 2¸>
6[G . !_ / ”6? o+$
FÉ / - i&%”E*
b8#bJK .. ),+$&# . &( ? #
b
2 j= X
aJ"J^+$E2%*K
`!_)
-/./ d
OKP / X.JK/ ao
Ub/ S
U/ J`Tb
"Y / jO
@$
KEE=JKTE#
2*K / 4S&!M%+$J`a!m . *aG
K@JKd#J
- *42),#+$
2
B& -./ G#C
2 . &”#EF+$
E=2&b
d!K$Ç &#˜¦
.•K#C 4+$
T +$E&8 &o+$E&”4 Çd kd˜3O O
.
.4? - ..4?
- ..4?
2.
K+$IMAGE
`#KSEGMENTATION
&C!_Q*&)‚Y 4
#d 4+$
J"43”+b
2+$*%iD#/ +$E. . ? OI-@./+b
2+$. *%
I#b%
2a7!` / E E4DF . B!K3+ -- %&Fo
-!X. +=$DF 2/ +$=*%& G. - HO•Kj#O ’ $./ G
‚JKdoE
NG2b
C+$oE+2%*WeE
2G2)
+$%GHOnÊV
=*J`I&FS#UC
2`! / 2! /#. !mG / Q+
E#4D# . o–†
/- 1
bE
24H= - . =K&D / G—dW / 2&
C”E / Io -./ 8 . 4+7ObƒF - &j=JK !m&”#
&#%8*7 #h . 4+7=n& -./ C4C8EF& /- #d
2+$%G-./ HO
/ 2B#d+hŸ@&#¡7–†
2bÊV / «G—K!_+ - +$E / "4)
2 . 4% / 7q Ë€O„T#B / 2 - +$E . - G&i!_ / /#- 3
TD / - . C
%+$
=jJKb
2+$E .4?h- F2I#
+h1(&G%
26J"4§‡&#+$#
2
Oª•KhS
‚J`1&#4)
+$
2#
XI#TE#4D# .j- *%&#
d–†ÌgÍΗ=F& . X#
&F+$
2#
"I# - . U ./ d–€Ï@Í2ÐHÍ2ÑF—`7ÒHÓTÔ - . U
2E - O
ÒjÓIԞ
o
%&G%&; - +$E / %E - !moE#
2*
$E E# ) 4!m+ . OBPTT+WG22 / U+ ?
8+$-7/ EEF..4?/E#G(–†- O #Ol
D 8
2+$ G4 6
)
%+©J"&#J"
/ &i - [E4/ DF . —=V / B. J`? $- *. &
7# 4#+7=&8"dE XC )
4#+7Ob-PT./ d+. W
2+$*%+$#&#
W/ q ËF=Q«ÕQ . 2 . / 2
2+$ . 4 ? +$2 - B!mW
2E . –†Ì1&3Î#—= - . =N&3D / F!m+GHO
+ . > 6 - 1&#+$
2[ > ),+$(& / # 4)
- =V&7 -./ Bb&G% / 2#6@JKo . #+$
$–†Ç ˜
&ÇdkB˜h—=‚J`C&#4f<*N4 . > d–€Ê ? &W„T&#+
‘nG24H=<&F
- & . GUodEE—=&8'$Öc‡ -./ O
²"z_‹ŠgvG~×j´Wrw3x#‹~}~‹<wi~#s<yx#yz_uslvG~F}ŠV_y}º$²gvGu<wÈyu‰cyu
Ø u yyuw¸´ Ù7ŒÛÚVÙ7Ü7ŒÛºgݪ~ Á Žgu}~h'Ö§‡ Á _ŠV}y~v}usLyŽH~
gx#yx;–†ÌgÍÎ<Í2Ï@Í2ÐgÍ2ÑF—IutTyŽH~iuvzM‹zmsgxUz_sg‰nŠgy6z†w3x#‹~L¶ŽgxsgV·Vº
ÞTx Á ŽL}~‹<w3~Fsjybzm} Á u_uvG~F Ø |1yŽH~hxFß~vGx‹~ Á uMuvoutTyŽH~
}~‹<w3~Fs<yº(àd_~x}~L}~~[xLt‚ŠgmM¹ u_uv[ß~v}z_us\utbyŽgzm}7‰Vx#¹
‰e~v$t@uvyŽH~ Á uvGvG~ Á y$ßgzM~Fáoºdâ8uÁ y~hyŽgxyWÙ7Ü7ŒãŽgx}$wiuvG~
_~x#vM|±}~‹<w3~Fs<y~FÛyŽg~§ŽgxsV±t,vuwãyŽg~ Ø x ‹vGuŠVsVNÚ
xÁ sgLz_y}}~‹<w3~Fsjyxyz_usLzm}byŽg~h}xw3~8t,uv Ø uyŽ;Ázmä sVz_yzMxmz_»x#¹
yz_usV}ºBµ Žg~ Ù7Œ9}~‹<w3~Fs<yxyz_us8ßFxvz_~F}"g~‰e~#sgVzmsg‹ushz_y}
zmsVzMyz_x_z_»xyz_usQÚexsV[z_y}d}~‹<wi~#s<yx#yz_usV}TxvG~‰Nu<uvG~v*ºCâ8u¹
yz Á ~7yŽgx#y yŽg~7ŽgxsV1zm}W}‰Vmz_ybzmsjyu3y%ábu”}~‹<wi~#s<y} Ø |[Ù7Œ
á$z_yŽ(²guvG‹|izmsVz_yz_xmzM»xyzMusQÚexsgyŽg~6VzMåQ~vG~#s Á ~F}BxvGuŠVsV
yŽg~”yzM‰lutUyŽg~”zmsVH~F¾1æesg‹~Fv*º
[ !m / &”GCÇdkd˜çJK
. boS&i
2)‚Y / . 4 ?”-./ 2)
+$EG&$J"oÇ ˜3=# %&#bbIÇ ˜¨Y 4 +$2)
- OQ•V- . W«d
2J"
K#BÇ ˜¨-Y - / . 4 ? +$2 - !m"/ 8. Ç ?˜¨&
Çdkd˜¨– JK`
Q2—On 2F=Çdkd˜è!m & X
+$X
2+$F)
%[!m. b[ ? E
d!U. 4 . > / =NJ" . 6Ç ˜éG&
? &Ff<* .? &FE&FW8I#4M . > jO
ÊV U­T
2J"
nK E g!_N`+X
2+$*% %
2a=
J"4(/ 'iÖè‡ -./ O6/ £N / - [
2+$Bi / E / C+
-6 !. ) &8 ? I
2%!` - d. EUJ"E4d#!_6dT 2+$2 * ONF‘ . JdOW
2d•K
2
2/+$.. *- %. 6 ? Ç ˜š&#*
XE* .4? - / 2B- 4X
2E - . 4
KT&
*[‚JK(
2+$*
$J"4cÊ ? 4 . > H=d&;4o
8
E*6
2+$*%;!B#7&#D¸S$J"4;„T&F+é‘nG2)
4l4 . > GHO\kIJK="Çdkd˜ê&F*
832Cël!
-. KG C.? 2
+$*d
2
U*K
2&$+$JX* %? !M6+Û #"
2
X -a4 / G&
& O
•K / $JK”/ 2..4h?$- h22)‚Y / . 4 ?¸-.-/ #§–€ . -> - %&#
W#BÇ ˜ìY / . 4 ? +$2 - —`
XhW22)@Y / . ? +
2+$*%[– / EoF
/ . #
2E - —O
ƒF% *” 4+$
h§+3
2+$*%GÛq4«ÕF=$«pG
o
2. &(- 1. - - +$E / %
W¸&#
% - o+G24)
-E#
On•K
2
2
2 Ÿ‚
2EE - 2B%S. ¡C&W . "4 +$ e
2 ..+$/ 2"*%'*G),+$H= #
e
N IE
2 )
- / .
/ / ..4?
.
JKh2)@&#+$##
2&h. 2EG - 6X*W&F)@Y X 4 . #E / #3OV•K / e4#+$
/ . ?(-./
.
.D#aEi'*)@
2+$B O¤
2I= &&F4
#6 .í.4? –†=XîHïG#—`
2”+$
2BE - 2%
2 . = J". #î3+$
8
UG#
/ +WW!d/ E / -&#%iE*
O^T## / -. 2
! -./ #
*+$
=# +$%G #W 4#+$
= U햆îHð—
. +$ - +$EG. &F
%- .- / ‚JK. 1 .. E4
C- !"E*
O
Ê# G+
=<T )€+$b&#6
2+$*%H=<
2E&h
2
2*. M . O8[G*. & . G2),+$$햆îH— -./ #
. 4#+$
=J" - 7
XJ""J` - #
2M&FU8
"EEO
µKx Ø _~ª³´cñŠgxmzMy|Ûut6}umŠgyzMusV}(t@uvLzmw3x‹~c}~‹<wi~#s<yxF¹
yz_usQº1â8Šnw Ø ~v}8xvG~1t,uvhyŽg~¸'*¹%w3~xsV}8òHŠgxmz_y%|w3~yvz Á#ó
Mu#á ~vß#xmŠg~F}CxvG~ Ø ~yy~v*º µbŽg~oÙ7Ü7ŒôxM‹uvz_yŽnwõt@uŠgsV
Ø ~yy~v¹òjŠgx_z_y| Á mŠV}y~vzmsg‹}iyŽHxs¤Ù7ŒÛÚKxsV\t,uŠVsgªyŽg~
}xw3~ Á mŠg}y~vz_sg‹1v~‹x#vV_~F}}utUzmsVz_yz_xmzM»xyzMusQº
Ê ? „T&#+±‘n24
Ç ˜ «¬pÕö «¬­ËË
Çdkd˜ «¬F«p® «¬F«p®
3.
•K#` CENTER-BASED
4#+$
g'*),+$#
=AB CLUSTERING
2
2 D#E %F),+DF+$
j=
! />>? . '),+$
=H&3'*),+$/ - +$#
d- b” !†+$ > .4? !
•K# l7#4
-J"*2),ë 2& U-! ./ #H1=*J" .# 6&##+$S
Oª
Q#GJ;? *- & -./ #
/
2 ./ ¸
O[•K#o . !U - ¸ . #+÷
b”+$+$ > $4
Fë‚ - 6! / - jO[ƒ - $
2oFë‚ - ! / - #
- o+$+$ &1&#4 =NJK 284%G / E<&#o . 4+$
J"# - - > d - . .4-? . +$/ +FO
™IJ1JK - $&FS#XI% . +$&# . !4%= - *2),
2&
-./ ##OQ•Kd
E
U5
« OK‚4 . > dB . #+¥J"8 / 2
2& - *
TÿbO
­OXÊH - C&G%XE*gÌ= - +$E / n
j+$+b
2E+3– Ì@—
o - - , &o4
"JK- & –†Ì —O
pFOXÊn - - . *= - +$E / N
. - Gb!M+¤ .. &#%
E*
QÌH -- %&## B#4`+$+b
2E#
Q&bJ`*
5
ý
Ö / ý/ û û – – Ì Ì #— ,& #— & –†Ì –†Ì —‚€Ì — –«G—
Ë#OK„TE"
E#
I­b&8p / * .<- - O
™IJ¸JK - - +$E" . 4+$
N
2&b4Q+$+W
2#E
&¸J`*$! / - #
OcTL . 7# . > GcE# - )
& T
Nb 2
`4 EG2H=F&$
%G2KT )
4/ +¨!M+ì/ E(pOo•K . - +$E / %G .e- +$E . D#4 ? !X. - . 4+¯8
"EEU
T햆îj'›F—X!_U - / E<&Gd%
–€£NY [«—OT•K 4+$
I %T!† - T / T/ B
+$d%&# . - +$E . DF4 ? O ? ?83.2
•K3'*)@K-means
+$
o 4+
–†Ç ˜h—hq4««bE24#
7&G%(*¸'
2
OC•K#W
2 ./ . i
Ti$
2d!K' - =H - i!`J"# - . - G&c6 - *2M&L!C”&#%!m8J"# - ^48
-. 2#
K- * 4
XOVÊGH
e+$*+W=!_
2+$EI! / b - ÔNH= - E&2G%4"Eo !
7. &%O^•K#7ë - - 8! / - ¸G$8Ç ˜ê . 4#+
EF+$ > "
3.1
ý
- LGeneral
!m+ /#. G7iterative
i#% . clustering
+$&# . !_$o!†+$ .4? ! -./ )
2
0
R
1
†
–
7
ø
Í
d
ÿ
9
—
Ö
+$ : Ì <;
: ð
–,­—
#7 . 4+$
T / 2W4%GWE#+$ > j=<!m .. J"
5476 û 8 8 8 9
3 û
q öG,=Q& / 2$#
C!_%+$JKah+a - +$E
2#
W@JK
. 4#+$
Ož“IS#[1›)‚&F+$
2 . 2h!WîR&%¸E*
•K
XFë‚ - B! / - o
"8 . #+±J" - o+$+$ > øù
Ö0úÌgûÍüüüÍ2Ìýþ[
o#”&G%(( -./ &jOR“IS#”
oJ"##) -./ - [–m#7
Y / G&L&F
% - h‚J`
›)@&F+$
2 . 2I!`' - *
IÿªÖªú û ÍüüüÍþ$
U# -./ )
- - *U&84
T
2
2&h&%bE*
%—O
#
2 ./ 7GU74%GC . #+¥S#
O
•Kd+$+W
2#Eo&6J`*"! / - #
"!_TÇ ˜¨5
Û+$+W
2#Ei! / - –
Ì,—d&#S
d#E#E2(!
&#%¸E*”Ì Gh . #
h - J"4 - 2%*
%=?>i– @ Ì ,—9Ö A ¬« …… 4!eÏjÖ^2J"
2Q +$ : Ì ;B C 𠖀p—
3– Ì@—ç¬1& û 3–
Ì,—”ÖÈ«O±ƒF+$” . 4+$
2U#ÄX+$+b
2E ! j=+$3– Ì@—”ú¬FÍ«Gþ*=
&-=?>”–†
Ì €—9Ö «
–†Ë*—
J"/ # . $
/ 2 !#"Ãe+$/ +W- 2Eh! / - j=g+$o¬%$
Ç ˜±
`B%&W+$+b
2EC! / - j=& - %*eJK*
3– Ì@—$§«ONÇdG
U& IB
&oC&F4!_)
!_ - g‚JKC%&I&B
2- !_.g. +$/+W
2#ET!_+\.4?#> d#!m+F) !
d/ - ? [ / &#
%
W &”.. &G&i%8+$EE . *+$
bY =/ + . a+$E62d%6 - EO7E /Ç . ˜G
# - %&#E6q Õ€OhPI$!X#
2
b'*),+$#
. 4+¥!m -./ FO
QUE*e
2 ./ e
n& / QU4
n%&C+$+b
2E
-! - HO§
kTGJ`=`7%&L+$+W
2#E1! l+a
E/ 2-
2 . W+ ?o- +$E / %G . E#+$ > #
T/ - I&#$BG!_)
3.3
!_ - I --/ % -? !Vd . 4#+7=
/- 7
/ 2$'›)€2
Cq4«Ë,O
•K6ABGaussian
/ 2
2DFE expectation-maximization
%#),+DF+$ ¸–,AB£Q˜h—C 4#+
!m -./ # / 2
7- . G - +W#> !›)@&#+$. #
2 .
¥JK*! '
&b–†Ì —W&#S
WJ¥+ (FÉ 8&%
AB 2
23&#
2 T
I# - *
O"@T+$+$ > "CF)
EÌ I/ - ¸ - +$E / 7# - *W/#E- G%+$/ W- (#
ë - / B! / - /
#Di%j=bJ"4 - 2%*(&b–†Ì —*)°¬FO÷¦& ? +$ - =
ý
- ##=eJK ! / - 1JK
b*2& /- &3cq ­«€O[AI*)
2
2
DFE 1¤–†ø7Í%ÿd—9Ö
;
. % G û H –†Ì I — H – #— J –,‡—
#6 . CFÉ / - d&#%$ -./ T . B
/ û
*
1^
/ E
2& . Gcq ®G€O £N - ^E#E# - ^
+$WJK*d7&G%oE*
B W”Ÿ,JK ) G&F¡7
J" –†Ì I —N
`#IE# . ? !gÌ g6X4`
X2)
# -/ 2*
2 ./ jO(ÓI . a6*
##=N
$.E#. E#- - L&F*? &8 H # AB 2
2Mi&#
2 8J"4 *- =& – —
# - GC7
2+b . B!V
2 ./ #
O
T#d?E#IE#/# . 4 ? ! - */ , OX[ - / 2b . 4#H +Z
+a`#X+ 2I–mJ" X #BK
2 —=*&
J`$# ./ $
28.dJK - - [+$+$ > ./ $Y / * ?
–€
KJKd&F J"46IX #+$
KJKB
G—O`ƒFWq ­=
E
‡Õ KF®pGQ!_C+$W . / I
d . 4+7Ob•Kb+$+W2)
2#Eh&6JK*U! / - "!QAB£`˜ì
–†Ì — – —
LNM > – Ì —êÖ
–€œ—
H
–†Ì H —
& LOM >”–†
Ì ,—êÖ « H
–,®—
P` ? R
QQ /#. 7
/ 2&( - +$E / oo
2!Mo+$+W
2#Ej=Q&
%LOM > oEF . 4 ? 2 - W#W!† - [£NY / [œ8G
EF . 4
OìAB£Q˜ ” - #
%*7JK*7! / - cG
Q .. &#%IE*
eY / ..? +$E2% - = . aXÇ ˜3O™TKG
& LNM >”–†
Ì €—K
U#"I
+$d
–†Ì €—O
H
3.4
•K#i! Fuzzy
'*)@+$k-means
o 4+ –€ÊVÇ
˜ 2 &l! )
+$
%/—d>>q4«? e
Bi&E#%. G”!eCÇ ˜ … . . - 4#.. +ž/#G> >/? 2
b
2!_U+$+b
2E! / - jOeÓI . aIÇ ˜žJ" - 7
2
2#
T - &#%6E*I84
-. 2
- *=<bÊVÇ ˜÷ . 4+© .. J"
W&%bE*UW . WE2 .4? $ ..H- *
= . a AB£`˜3O
ý 2
2
S0 1R–†ø7Íÿd—°Ö
Ð U : Ì O;(: ð
–€ö—
/ û T û
•K#bE%+$TÐ $&F
T# EFE2”!`&%EIÌ b
2
2&( - *V =N&[
/ &FC - 2%*
Ð 8Ö¨«$!_W &[Ð è¬Oh•K#6E%+$ X8
# T - û#
2%*? XVc«.ON?.  W . GK ./ X!m XB+a
N#"+$&
Ÿ@+$B! />>? O ¡
PQ > &#a;&L
h
2EG% / E<&#8! / - !m6Ð &Y*Oe•KUÐ E<&G"Y o&FE&#
N oÿ&ø=
2iJKo - E%/ 74
/ E<&/ G6! / - L*”.4? / E<&G6!_
OU•K#8JK - 7E#
2IÊVÇ ˜ì7#B!m+ž!N#C#% .
4%G E<&#K!<£QY 8«Oe•KX+$+W
2#E & J`*
! / - X/ !_IÊVÇ ˜©G/ 5
_û ^
%ZO=?>h– Ì ,—êÖ : Ì : ;Ì O;(: [ ð:\R ] U [ _û ^ –€Õ—
[ ð \] U [
û
&-ZN=?>h–†
Ì ,—êÖ «
–«¬—
ÊVÇ ˜è
nU
2!Me+$+W
2#EB! j=& %*VJ`*
! / - HO[TV
X7&F
bJXG%&^/ «6- !_+÷G-=N6 . 4+
U+$ aC
%&#%&h'*),+$#
=&8 - *
U
2G
#C&G%WE*.
. 2
O
3.5
•K# '),K-harmonic
G+$# +$
Umeans
4+疆Çdkd˜h—K
B+$#&8
2+)
. 3Ç ˜õG- 2
$!_. +03&F4f<*$ë - 7! / - q ­*«€O"•KCÇdkB˜ìFë‚ d! 2
"d+$# +$
!nd&F
% - B!_+¯- - 8&/ G%W- E*/ "$ ..j- *
O ý
' û
2
0` 1R–†ø7Í%ÿd—9Ö
–««G—
û a a bc
/ û
[ed#f a a g
kT 6LE / EG%+$=K&¸ ? E# - ..4? ¨­O§•K#
+$H +$
K *&3– JT—Q
T!mK H 8&#%CE*
J"#3- &#%oEC
-. 2. 8 - ? # - *- O•K
C
C
EFE2 ? !T6+$ - +$ … W
2+$ . $”o+$4)
+ +¤! 2& Ç ˜3= / Q`
KC
2+$*&#4f< . ! / / - / HO - / ?
•Kd+$+W
2#Eo&6J`*"! / - #
"!_TÇdkd˜¨G5
%=?h?>h– Ì ‚—°Ö : ÌO: ;(Ì ;B: [
iC[ [ð ij[ ð
–«G­—
T û
û : Ì ;( : [ij[ ð
&-=?h?>i–†Ì@—°Ö
–«p—
k
T û : Ì N;(
: [
ijl ð
™ITXÇdkB˜Z
" 2!_"+$+b
2E! / - H=F&6 . 2
JK*B! HO •K#
BJK*B! i
B#
JK?*UbE*
K/ - G"B!mUJX ? !_+è/ - ?- =#J"# - &F
"# - *
X7
2EF&F#W - GU#d&G%FO
•Ko+$E +$*%¸!BÇdkB˜È&#
W3&# . J"1 - 2
J"KÌ H. m
Ö Og‚C
- 2QJK`!_ .. GJl:# / 2I+GD<I– : Ì ;
:4oÍ n%—V& / 2XT
2+ .. E
2X ./ K<
! nOH[X 2CEE #
- #MY / T!mTÊVÇ ˜¨&I . #+$
U&#
-/ 2
2. &ohƒ. ? - pFOnIGIX - / &o ? / +$ - . E# . +$
K8 ?
!e / X
O
4.
[”GNEW
hCLUSTERING
&l;8E#E2ALGORITHMS
o!dhJš 4#+
dÇ kd˜3OU,”
i;
2!_i+$+b
2Ec! / - \&;. ? JK*7! / - j=BJ" - +a
o / Y / i+$1 . )
4+$
dJK$$ - / *&jOoÇdkd˜¦
(
2J"h
. 2
U
2
24B4 . > G”8
? * - &%oq ­*«€O
kIIJKd T‚JKW
2E U!nÇdkd˜ç–mI+$+W
2#E6&
XJ`*K! / .?F > - %—Q&$- &FS#"@JKCJ^ . 4+$
NJK - ..
k FM&[«&”k FM&i­*O•K# +$&7!_C !† d
? ? K ? #&C ? . 4+$
VG? - +be!m / N!Ç - ˜±&
Çdkd˜3O•KWE / E
2 !_ - 2W . 4+$
I
IS&
/ J"6f< - $h+$+b
2EL&1JK! / - 6!
Çdkd˜šB ? +$
2 . O
4.1 Hybrid 1: hard membership,
k FM&(varying
«h–†k «G— 2weights
d%&3+$+W
2#Eh!
!XÇ ˜3O
e£ ? ? E*" . /#
" .? 4
-. 2
- */ Oe- kIJK=#kb«
! / - H=J"# - 7
U+$BJK*T
/E
2*
U
I#dÇdCkdG˜šWJK!†Gd!_U+š
*Od[bDFE BI#
. 4+0
2 /. & - h+$?h- hY / - a .4? lÇ- ˜ê& / 8
UJK
=# / `J" .. .. UE# . +$
` . &6b#I%&
+$+b
2EW! HONU
Q!†G"
QJKIa#GJd=F&&F#dJK*
X
"+#`/ Ç - ˜¨
UW#J§&#O
•KC&FS#4
X!VT+$+W
2#E8&$JK*"! / - X!m
kb«d5
h
û– @ Ì 9
— Ö
& h
ûG–†Ì 9
— Ö
A
« !NÏ<Ö^G`+$ : Ì
¬ …… 2J"
2
T û : ÌN;(
: [
i[ ð
k
û : Ì ; : [
i l ð
4.2 Hybrid 2: soft membership,
k FM&7constant
­h–†kB­— 2weights
Ud
2!_d+$+b
2E6!
;B :
𠖫˗
–«G‡—
h!`ÇdkB˜3=
? &o - #
%*/ "JK*"! / - 7!eÇ ˜3O•K/ C- &FS#
"!
#d+$+W
2E6&JKU! / - X!mTkB­W5
C Ì ; : [
i[ ð
%h – –«œ—
ð Ì ,—9Ö û : ÌO;(: [ij[ ð
&-h –†
–«®—
ð Ì ,—9Ö «
™TdGIkB­b
2+b . TÊVÇ ˜3O‚8!m - =!m - 2%” ./ T!
XI&
"+G+G Y Og@N
Q*
#
bH =##? H=*X#I+$+b- ..4? 2E$/ ! / . - o!nÇdkB˜ –m!_+
J"# - J` kd­—d&ÊVÇ ˜0G6 . 2h ? 2+$ . GO8#)
Tkd­d&$ÊVÇ ˜ž
`
2E%T*4
QCaE K#
!m - bGbJ`8G6
”$+$+b
2E&-. J`*
! / - "!eÇdkd˜š
2E% .? O
5.
[EEXPERIMENTAL
2!_+ê‚J`l
2
”!DFESETUP
+$*
8l&F+$#
2%#
EFE2
d!`#W 4+$
C&F
&”[ƒ #
dp8&hË#O
JK*Io#
JKB. 2% . Y / - #
5"JR&#- 6&Ff<*B4)
. > G
6Gf< - $ - L . 4+7=NJ"G$
W6#É / - o!
2!_U
/ KG%&o+$+b
2Ej=&J""
XIS#X! / )
#G ? #
/ - #
%*"JK
O
•K# W 4+R+$+$ eI&F4f<*eë K! )
H/=<JKb+$- / . bbY / . 4 ? > !` - -./ 6
2- ./ / - ?
#b
Y / )€*I!e '*),+$#
TFë‚ - C! / - ””£QY / )
^­Ol@$
6i
2 . h+$2 - ? J"# - L6ë / &# -./ )
6Y / . 4 ? =`&¸ ?(/ 2#[i
2# . h+$2 - J` - - +$EG
&F4f<* 4+$
O¸[ 28#o
Y 8*$ 28#
Y / &(&F. % - + - (/ D#%G/ 6#$
24 -? /!"E*
2 ./ #
ON - #
2&#&W / ##BÇ ˜¥W#U / E / e!j - 4#+7=
2W"BÇ ˜¨Fë‚ d! &oB2)
. Q+$#+$ > &jOj[`!_ / & n- N&#& / - e# . EW- 2/#.#4S - .4? =
2J`C&#bT&FW
XO
P 6DFE+$*
2h‚JK1&#%
2
7 & 2&Ll *
+$/ E4 - . J`a$ / -./ . 4#+$. Bq ­pF?;=<«/ Ë€=&CE- )
%E!HB&W!M+Zq Ë€ON•KT . #+$
QJ`"
X"Ç ˜3=
ÇdkB˜3=FÊVÇ ˜3=Fkb«=kB­=#&6AB£`˜3O•K - &#U!m" - o!g
2
. 4#+$
U
X / XJ"–mJX42oh˜7 . —=FD - EFX!mTAB£Q˜
–€Ê
˜84D &FTEF&#&W q4«öG_—ON"&Wd
EE .? X#
ÇdkB˜3=k «- =#&okB­CJ"48? IE%+$ =#&8/ ÊVÇ ˜ž
J"4% XO
"
2 Ö^pü ‡I!_X .. =
QGQJK
NHX
Q ./ X!m / &
? :#H #OVX
2p XdÖ\«ü p=F
ee
eX
N ./ KJ`K!m / &
2&o7 / "E# . +$G ? O
•K#$‚JK”4 . > G
WJ` / 26$6Ê ? &„T&#+
‘nG24+$#&#
q4«œ€O•K#$Ê +$#& *
2
C'i&%
E
!M+¦#h&G%
2o$%&F? +é& / 2- +é
#
# .V- *
O`•Kd„T&#+¯‘nG24h+$&o
2
2#
I - &#%iE*$”%&F+ - *=`# - +$E / b#74 .
.•K #- G Ê6 !j+$ - #- &o*`&#
e
X 2-E#2& &*!j4
"
` 2
2To&$CE&G*%F
O=
J"# . TU? „I&#+è‘nG24o+$&W- &#
Q / E . - T# - #)
`d
2+ .. GdG`"+$&& . X!<U&G%
2Oe„T&#+
‘nG24oJK
`!_ & TCE#!_% T4 8+$&
!_I
U
2+$E . - 4 ? / &7Y / . 4 ? (q4«œF=g. «G­G€OUÊd. > AB£Q˜3=J` . 2
# – —eÖ\«5q'b&C4 K GGM - NI`¬Fü ­sr=
J"# . > r$H U#B&#*4 ? +G2D<O . > PQ!m
F= &G%
2
2&67oDFE+$*
XG
2#4!_&7-./ &),
- . &o.. Wd / - 8&#+$
2 > W+$8&
/•K#4B
[ -$7OB•K*
B&
I&##7b
%!_&G%
2& #> h),
- 42%+$
!_+
2G&H O
/
.
K−means:1 iterations. Quality:412.3576
K−means:1 iterations. Quality:13784.0551
2
2
1.5
1.5
1
1
0.5
0.5
0
0
−0.5
−0.5
−1
−1
−1.5
−1.5
−2
−2
−1.5
−1
−0.5
0
0.5
1
1.5
2
−2
−2
−1.5
−1
−0.5
0
0.5
1
1.5
2
²"z_‹ŠgvG~utj´õÞU¾H‰e~vz†w3~Fsjy ³´õ²guvG‹|wvM~Ft,ysxxsVzy$xsH¹
gu<wÈàTxvGyzMyz_u{
s v‚vz_‹Ž<sy xzmsVzMyz_x_z_»xyz_usV}8t,uv6yŽg~B|WrTyˆbÜ
gx#yx}~yº”ˆ ~Fsjy~v}xvG~(}ŽguFá$sczmscyŽg~(gx#v ä^Á u_uv*Ú"Hxyx
‰euzms<y}8z_scyŽg~_z_‹Ž<y Á u_uv*º6µbŽgzm}oHxyx}~FyŽHx}x[‹vzm^ut
³½¾e³½[sHxyŠgvGx Á mŠV}y~v}º
&#
% +$2 =V
4C
Bb
+$#É / - bo - [&F4)
+$#
2- HO 5.1
•KdE Experiment
E
2B!n XS#
1:"DFBIRCH
E+$*X
K
2%B F)
/ - IE#E2/ X!HT&#4f<*" . 4#..+$/ =&$b
2- #J
#&3h+$E#G -./ ” . 4+$
Oh / 268%F)
&#+ #%&¸
* &G%
2J` PQ‚„ ’ kb=N
$&#)
S#&(.4? ? q ­p€Ol•K?
&G%
2- $
'LÖ÷«¬- ¬”.. 2 / -./ G2)
%#&3[«¬D<«¬7&[›iÖ¥­7&#+$#
2
Oo£N - -./ %G
6«¬¬h&#%7E*
d!_+ç4
CJ"¸AB 2
2M1&#
2 )
j=n!m7% . !Uîc֚«¬Í%¬¬¬3&#%7E*
/ Oi•K6&F
% /- @JKo‚JK&ë - -./ U+$#
X
"7Ë } ­ J"4 -./ "%G)
&# ,! } ­–†+$6 [&#+$
2[
«—O
[/ / [ - 1 . 4+©‚J" - =Q- - $J"4[- Ê# ? 4 . )
> H=j&8 - dJ"47C„I&F+¯‘n24”4 . > GHO
ÊV / "pB
2J"
n`@JKd4 . > Oe[ / 2KK
+$K%F)
&#+ .4?7- 234 . > G
d!mC .. . 4+$
O P / I
/#. d
2+$ . U!mT"%&#+¥4 . > #
O
5.2
•Ko
2 Experiment
&LD#E+$2: Pelleg
2
i
*and
Moore
&%
2$data
2&¸
JKal - ? q4«Ë€OèkThJKh/ / ^+? ? - ¸&#+$#7
%) 2oFW!U# 4+$
O7
&#%
2
!Q&F+$- 2#
B­*=<Ë#=<&hœ$
2. J\I .. 2b . 4#+$
JKaoJ` .. . Jª&#+$
2
OX£N - ”&G%
2I
I'֍‡¬2 / G / % .g-./ "J"# - h%GCîhÖ§­‡¬¬% . &G%WE*
O
•KN2 *
n #
2bg%&F+C #g )
E -/ / =*-./ 7­‡- ¬¬b&G%bE- *
XGI%G&o ?$- */ 2#? -AB./ 2
2n%6&#&F
2+ .4 ? =& J"46%
%I&#I%&&G&F%UEMGn ~T-- Öl%F›&#€ T¬ü ¬I«G­
&6/ +$oK#T/ 2 / -./ - *On[T#%d&#%C
K+$U
2E%&i– -./ K . 2
KG . E—e$"JKa
? ‘V .. W&6˜8*–mJ" / 2&~UÖl›€¬Fü ¬­‡—=# - / 2U#
E#
2*
bo+$$&F: ‚ -/. d%
2a”8# -./ #” . #+$
O
•K
V
H 2`4V
V%&FH!_ *
HU+$GV!_ F TJ" . - &/ G%
2T& / IE#
T- @JK8G / % .H-../ ? O /
ÊK Y› iú­ÍË#Í2œ*þIJKU#%C«¬¬b&#%
2
=&W@JK #4)
. > - C–†„I&F+ ‘n24o&6Ê# ? —n!mK - 8&#%
2O
•K3JK
b ( 4+ì!_+ì!K
2$#4M )
#
O$ÊC - [- . . 4+¨J`$ .. Jè4d6 / ”!m$«¬¬84. >%G)
#
=J" - 8
UE . * ? !_Ud . 4+$
X - O
Kµ x Ø _~i×j´BÞT¾j‰e~Fvz†wi~#s<yo³´bñŠgxmzMy|¸utT}umŠgyzMusV}t,uvusg~
vŠVs¤us¤yŽH~*|WrTyˆbÜ9gx#yx}~yÚBŠV}zmsg‹§²guv‹|\xsgƒy$xsH¹
Hu<w àTx#vyz_yz_usÛzmsVz_yz_xmzM»xyzMusV}º{„Nu#á ~v3òjŠgxmz_y%|¤} uvG~F}
x#vG~ Ø ~yy~Fv*º ¶ˆbmŠV}y~Fv}èt,uŠVsgV·ézm}ÛyŽg~©sHŠVw Ø ~Á v±ut
yvŠH~ Á mŠV}y~v…} vw3x¾Hz†w”Šnw÷³½<½ x"zms3á$Žgz Á Ž”yŽg~Wx_‹uvzMyŽnw
‰V_x Á ~F;x#y$_~x}yWusg~ Á ~Fs<y~vº
} 0 1
òjŠgxmz_y%| ˆ mŠV}y~v}t@uŠVsV
Ê# ? „I‘ Ê# ? „I‘
AB£Q˜ «G‡O ‡p¬ ­ËFO pÕÕ ®®
ËÕ
Ç ˜ «G­O ®®« «öO p՜ öp
œ¬
kb« «G­O«‡Õ «G‡*O ­Ë*­ öœ
®­
ÊVÇ ˜ ««O œ«G­ «¬O ËË#« öÕ
Õp
kd­
«¬FO œ®¬ ÕFO Õ¬ö Õ­
Շ
Çdkd˜ «¬FO ­‡‡ ÕFO ÕÕÕ ÕË
Շ
6. EXPERIMENTAL RESULTS
6.1
„ #Experiment
6 ( 4#1:
+ìBIRCH
3#YP`@„ ’ k±&G%
2
”/ * / ”- !_d. #Jª - ”G
OBÊV / p$
2#GJ"
T- d‚J`
# G
NJK 2On•K#K
n!Ç ˜3=*AB£Q˜3=& Çdkd˜(Q / I.> W
2#J"3i/ ÊV / bË8/&7. -./ CY / . 4
B!mC ..
Gb
2#J"hi•V . b­OTÊVÇ ˜3=kB­=<&7ÇdkB˜ç .. !m / &7*&
-
2./ !_T
+$+W
"!_
2UE6 ? E#
`+$
!nO 4 . > G
=& ? Gd ..
.
•K#N@JK"G%&d+$+W
2#Ed 4+$
=Ç ˜Û&Bkb«=N&#
)
- .4? &#4f<*dFB!m. db@JK64 . > #
Oƒ*%22)
#8!_+©Ê # G[
2‚JK8 4+$
CE2!m+
2 .? JK ? .. =I / 6. > %2#1!M+0h„T. &#+õ‘nG2
#
2 . 4+$
- J"4[+ ?”- C+8
#b+$&#& . C!`# &%
2=j¡2%EE&F¡6#b ? %&”
2
2#)
+$Oo•K#
b - / 2$G%&+$+b
2E”! / - [EF)
*
- *
V!_+R+$U4! ? &FI#eJ"# / WE*
O
@•V . T­UJKX
2#J¸#X / +WV!2 / -./ N!_ / &j=J" - dW / +WI!X2 / -./ –† / C!I«¬¬—Id - &3
- *U ? #C . 4+7O
 ªAB£`˜ ”L
2!_i+$+W
2E^! j=Ci&F*
E*. .4? / 
”&G%
2& / l
2+$ - */ ”- #;4)
dU
U* W&o%a#GU
2% O"•K#
/ - E / X!NAB£`˜¨. 4 . > &7 ? „T&#+±‘n24.g-h./ EEG
"
K+$ *
*2%G&bW#K+$&& Q!#X&G%
2=
J"#b# -- *
I- - jOd•K#
I
T
2+$ . GB$. CG%&”+$+)
2E(
/. O3•K6Ê
˜8D[+$E . +$*%3JK / 2&!_
AB£Q˜õ
%G2&3J"4l«¬¬ *
&+$G
*
CJ"
2
EFb - +$b*h
2+ .. O7- ÊC
d
2H=n4b- &F&iJ"4(Õö
–€Ê# —W&¸öF«–†„I&#+¦‘nG2— *
&#E&#i
#b#? . > GHOdÊ
˜84Dh
T# - . 4 ? 2G - ”!mI#
/ +W`! - / 2W&##
2 ? +jOn[I2&6
%22)
#bÊ
˜84DJ"4 / `CEF)@&#S& / +We! - *
=F&4
!_ / &h­pFO
6.2
P $
2 Experiment
&1DFE+$*2:W
2#Pelleg
J"
oand
G%Moore
7E2!mdata
+
8!
#/ ( . - 4+$
- +$E&G”+ ? %&F+ .4? #%- &
&#%I
2
QW
2% &#+$#
2
OeÊ#N $&#%
2QøV†s‡ J"#
› (ú­*ÍË#͜þ&[ˆ« . $ W $¤«¬¬JK - +$E - / C E#+ . Ç ˜
E24i,í †5‡ ? / #WÇ ˜¨ - - C
%G2#$J"
Ê ?
„T&#+¯‘nG24
K−means:100 iterations. Quality:163.1047
K−means:100 iterations. Quality:338.435
2
2
1.5
1.5
1
1
0.5
0.5
0
0
−0.5
−0.5
−1
−1
−1.5
−1.5
−2
−2
−1.5
−1
−0.5
0
0.5
1
1.5
2
−2
−2
−1.5
K−harmonic means (p=3.5):100 iterations. Quality:105.1674
2
1.5
1.5
1
1
0.5
0.5
0
0
−0.5
−0.5
−1
−1
−1.5
−1.5
−2
−2
−1.5
−1
−0.5
0
0.5
1
1.5
2
−2
−2
−1.5
fuzzy km (r=1.3,P=2):100 iterations. Quality:134.8514
2
1.5
1.5
1
1
0.5
0.5
0
0
−0.5
−0.5
−1
−1
−1.5
−1.5
−1.5
−1
−0.5
0
0.5
1
−1
1.5
2
−2
−2
−1.5
−1
hybrid 1 (p=3.5):100 iterations. Quality:147.8599
2
1.5
1.5
1
1
0.5
0.5
0
0
−0.5
−0.5
−1
−1
−1.5
−1.5
−1.5
−1
−0.5
0
0.5
1
1.5
2
−2
−2
−1.5
−1
hybrid 2 (p=3.5):100 iterations. Quality:113.8546
2
1.5
1.5
1
1
0.5
0.5
0
0
−0.5
−0.5
−1
−1
−1.5
−1.5
−1.5
−1
−0.5
0
0.5
0.5
1
1.5
2
−0.5
0
0.5
1.5
2
1
1.5
2
1
1.5
2
1
1.5
2
1
−0.5
0
0.5
−0.5
0
0.5
hybrid 2 (p=3.5):100 iterations. Quality:98.168
2
−2
−2
0
hybrid 1 (p=3.5):100 iterations. Quality:232.34
2
−2
−2
−0.5
fuzzy km (r=1.3,P=2):100 iterations. Quality:109.022
2
−2
−2
−1
K−harmonic means (p=3.5):100 iterations. Quality:99.98
2
1
1.5
2
−2
−2
−1.5
−1
−0.5
0
0.5
²"z_‹ŠgvG~õÀg´ ÞT¾j‰e~Fvz†wi~#s<y¦³´ ˆ us<ß~vG‹~Fs Á ~éus yŽH~
|WTr yˆbÜȏgxyx}~yº3²gvGu<w]yu‰\yu Ø uyyu<w1´(‰oÞIŒ ÚXÙ7ŒÛÚ
Ù7Ü7Œ Ú$²"Ù7ŒÛÚÜ3³Ú8Üh×jºŠ‰oÞIŒ xsVžÙ7Œ Ø uyŽ usH¹
ß~vG‹~3yuLß~vG|l_uFáW¹òjŠgxmz_y%|^u‰Vyz†wixHÚKáŽVzm_~Ù7Ü7Œ gÁ u<~F}
sguyºB²gx}yŒªz_¾7}ut@y%á xvG~W‹~Fsg~vGxy~#”yŽg~W‰n_uy}Ut@uvV‰oÞIŒÛÚ
}ŽguFá$zmsg‹yŽg~(³¹}z_‹w3x Á usjyuŠgv}º
3
2.8
2.6
2.4
2.2
2
1.8
KM
KHMp(p=3.5)
FKM(r=1.3)
H1(p=3.5)
H2(p=3.5)
GEM (final result)
1.6
1.6
1.4
1.4
1.2
1
0
average performance times optimal
average performance times optimal
3
2.8
2.6
2.4
2.2
2
1.8
1.2
10
20
iteration #
30
40
1
0
10
20
iteration #
30
40
²"z_‹ŠgvG~Œ‹<´^ÞT¾j‰e~vzmw3~Fsjy[×j´cˆCusjß~vG‹~Fs Á ~ Á ŠgvGß~F}[}yxvGyz_sg‹ªt,vuw ²guvG‹|v‚yu‰px3xsgŽy$xsVHu<wãàUxvGyz_yzMusv Ø uyyuwx
z_sVz_yz_xmz_»x#yz_usg}us¤×F¹2ª}|gs<yŽg~yz Á gxyxHº(µ Žg~[¾<¹2x#¾gzm}h}ŽHu#á$}oyŽg~1sjŠnw Ø ~vhut z_y~vGxyz_usV}ÚTxsVyŽg~(|<¹2x¾Hzm}vMu‹c} Á xM~x
}ŽHu#á$}7xß~vGx‹~ Á mŠV}y~vzmsg‹§òjŠgxmzMy|} Á uvG~ÚIáŽg~v~¸_uFá ~Fv”ßFxmŠH~#}7x#vG~ Ø ~yy~v*º*‘sV_|\yŽg~(æesgxBvG~F}ŠV_y}”t,uv‰oÞIŒ x#vG~
}ŽHu#á$sNºCâ8uy~”yŽHxy$Ù7ŒùxsVm
 ‰oÞIŒ ‰e~vGt@uvwõábuv}~hyŽHxs;~ß~vG|(uyŽg~v6x_‹uvzMyŽnw¸º
# - *
X"%G&oB&%b
2
OQ•K6JK - +$E / #d
- d!N -./ #ÿ †5‡ Q
XI%G
0 1R–†V
ø †s‡ Í%ÿ †5‡ —
’-†s‡ Ö
“
–«ö—
0 1¤–†ø…†5‡ Íí,†5‡ —
•g Ë$
2J"
T#C+$h&7
%&G%&h&#i!”’,†5‡ !_
- ;. . 4+7= - +$E / & / 2#¸«¬¬3&%
2
$l­”&#+$F)
2
OC•V . p$
2#GJ"
T E*2),J"
2 - +$E
2”!Q - 3 . )
4+!mn#Q
+$`DFE+$*OH@n
n!_+\
n
VJK
e
2!_N+$+W
2EC . 4+$
"–†Çdkd˜3-. =ÊVÇ ˜3=kd­—gE2!m+ ..
2X6%&6+$+W
2#E . #+$
d–†Ç ˜3=Fkb«G—N6
%bE2!m+ - W&h - Od•K# /. I!mBËo&hœ
&F+$
2 &G%
2
W ? 2+$ . G=V
28J`$&#7#dE2
#+¥O .
ÊV $‡$
2J"
I#b
2E&i! b!Q i 4+
!_d/ ›6Ö\­&F+$
2#
OB•K# D)@- DF
U
2J"- IC4- %G.3 / +)
=&$ ? )‚GDF
`
2J"
KT%d'*)@+$
`Y / . 4 ? %G
GXG"%j= +$E & 2b#W«¬¬&G%
2
Oe 2TGXAB£Q˜š&- Ç ˜ž/ G / / 4!m+ .4? #!mKC ? - #
4#+7=&oG"d
2!MB+$+b
2Eo 4+$
UÇdkd˜3=
kB. ­=Q&1ÊVÇ ˜õ+$G6Y / - a .4? ”S&[*&¸. 2 ./ O1PI .4?
#8S . /. $!_8AB£`˜9
E . 2&L
$JK - # - E# / -./ $EF
2
T!_B#CÊ
˜84Do
2!_@JXGC+$
O
Ê
˜84D
QT# 4 &&&+$G *
N 2
S#C4
b&#%OÊ
˜84.D? &#&#
C - C!`W+$- &F .e/ &#EF)
&F Bb&G%8&7+$G
d *d4!`
IE#CEF 4
- * . JdO1[oDFE - b$Ê- ˜84D<Q . 4 ? && - . #? )
QJK /. &$" . E#! /. 6C&G%
2`J"# - -./ K"JK .. )
2E%G&jONÊ#eDFE+$*e­*=*Ê
˜84DbbJ"‡¬ - *
&i +$G& OÊ
˜84D &iJ"4[*)
%6.4!"? ËöFO pÕ - *- 6–€Ê ? —d&3Ë- ¬FO«p - 6–†„T&#+
‘nG24—`I­G)@&#+$#
2$
ON•K
X
2J"
`UAB£Q˜ž
. 2$
2
24BE*I4 . > G
O
µKx Ø _~oÀH´BÞU¾H‰e~vz†w3~Fsjyb×j´Iµ Žg~7wi~Fxs[xsV(}yxsVgx#v¸H~¹
ßHz_xyzMusiut•’ ð ‡ Ú#yŽg~ vGxyz_u Ø ~yá ~~#soyŽg~b'¹%wi~FxsV}"òHŠHxmz_y%|
xsg¯yŽg~u‰Vyz†w”Šnw¸ÚuFß~vc³*½½Rgxyx}~y}ÚzmsZפVz†w3~FsH¹
}z_usg}º „QuFáb~v6ß#xmŠg~F}$xvG~ Ø ~yy~v*ºy$~F}ŠV_y}t@uv8À1xsVc¿
Vz†wi~#sg}z_usV}x#v~i}z†w3zm_xv*ÚexsVlŽgxß~7yŽH~3}xw3~7vGxs ä zmsH‹gº
¦§©¨
¹ ¨
º ª
–N¹ ¨
º ­
¹±º ¨
–7—˜#™Rš
ª« ¬­®­¯±°T².³j«¥ªo¬R´5­
ª«¥ªo·³·¯±°T².³j« ³·µ¬
ª«¥ªI´s¸R¬¯±°T².³j« ³®µ³
ª«¥ªo­»jª-¯±°T².³j« ³®¬5¸
ª«¥ªo³5¸¸F¯±°T².³j« ³µ¬®
ª« ³5¸R³µ¯±°T².³j« ³¬jªo³
7.
P HCONCLUSIONS
DFE+$*
2#J3#N
›pœRŸžŸ— ¢¡NœR˜_£_¤ £#¤¥—
­j« ¬®µ¬¶¯±°T²©³j« ´´5·5¸
­j« ³·³µ¶¯±°T²©³j« ­®jªo®
ª« ¸R®R´´¯±°T²©³j« ­R´5³¬
ª« ³·»·¶¯±°T²©³j« ³R´5··
ª« ³5¸R»»¶¯±°T²©³j« ³R´Ÿªo®
ª« ³®³µ¶¯±°T²©³j« ³­·R´
E4 !N'*),+$
+$/ n . 4+¯-–†Çd. kB˜h.4? —j!mnS&F/ -./ ? N!#Y / . ) 4 ? . Jž&#+$#
2
O^P / 6 . 4+$
$k «h&LkB­ . / / & ? f< - B!N Çdkd˜ìJK*C&h+$+b
2Eh
2EF)
%G O•K 2J¯Go
2!_o+$+W
2E1
6
2
2* !m
S&#.4?8*& ? -./ #
=Q
bkd­8E2!_+$
G .? JK . .. Çdkd˜3=H / BG G ? #oJK*
bG$S - . J"4(8%&
+$+b
2E3! / - H=N
2 - ok «E2!m+$
W2 (Ç ˜3O
ÔQ ? 3J`*
6h* / 4 .4? 2+$ . G8J`*
6EF)
E . &b2%##WD#+$E . X ? *
#7q ®G€O`,K+#
KW
2oJ"#"
" . ?7- 7B+&FBE# - 2O
‘n "JKa874 3+$#&#
"
&#&6
i„T/ &F+ȑn24§. +$> &l
7*&c!_i- AB£Q-˜ ./ &l!m
Ç ˜3=N / $ / $DFE+$*
&F - #S+ - -./ 2HO
•KUÊ ? +$&W!j#4M . > i– - #*
2d%&#+RE*
"4 .<- %—QJKa
"
K!_IAB£Q˜3=Ç ˜3=#&ok «OQPI2)
=" G$7
6 #+$
6G .. & ? / GWÊV/Ç . ˜3=/ kd­=j&7ÇdkB˜3=4 . > . &” ? C„T. &F+ .
‘n24h+$&jO
µKx Ø _~¼t<´7ÞU¾H‰e~vz†w3~Fsjy8×j´hˆ u<w3‰e~yz_yz_us¤w3x#yvz_¾ct@uvi×F¹\HxyxL}yxvGyz_sg‹lt,vuw ²guv‹|{v_~t@y5x6xsV½y$xsVHu<w àUxvGyz_yzMus
v@vzM‹Žjy5x(z_sVz_yz_xmz_»x#yz_usg}ºçÞTx Á Žè~Fs<yvG|è}ŽguFá$}[yŽH~sjŠnw Ø ~Fv(utoyzmw3~F}½vw3x¾Hz†w”Šnw
³½½<x3yŽgx#y(yŽg~cx_‹uvz_yŽnw zms±yŽH~
uÁ mŠnws1Žgx(x Ø ~Fyy~vG¹2òHŠgxmz_y%| Á mŠV}y~FvzmsH‹3yŽHxs(yŽg~6x_‹uvz_yŽnwõzms[yŽg~ovuFá8ºIµbŽH~ovG~F}ŠV_y}Ct,uvWÀhxsV1¿hVz†w3~FsV}z_usV} x#vG~
}zmwzm_x#vÚN}u3áb~8gu[sHuyWvG~‰euvGyyŽg~#w0Žg~v~ºBrsL‰gxvGyz Á Šg_xv*ÚQÙ7Ü7Œãzm} Ø ~yy~vyŽgxs;Ù7Œôt@uv¾¾iyu¸³½½iutB³½½iyz†w3~F}zms
~x Á ŽLVz†w3~FsV}z_usly~F}y~FQº
¦§©¨
¦§•¨
¹ ¨
¹±º ¨
–O¹ ¨
º ª
º ­
¿#À ˆÁ
¹ ¨
·5¸
¬
³
·
³
·
ª
³
­
¹±º ¨
ªo³³
··
»µ
· ¬
¸R®
´ µ¬
5
­5¸
µ
–O¹ ¨
ªo³³
·jª
ªoµ
ªI´5¬
»jª
¬»
¬­µ
º ª
·»
¸R¬
¸
ªo·
ªo³
­³5¸
º ­
ªo³³
·jª
­R´
®­
·³
¬®5¸
’ C$&F+$
2#
Q
N$$E$EF +¤!_
+ ./ ?B? G
OVkIJ`= - *V
2 - b
n
2#GJ"CGn. 4n+ ?
"EF!m% X 2"&F+$
2 4 & #MY n)
!_ -./ . F="/&1# / 27 . . ?GJX)@&F/#+$- 2 - ."-./ / #
4#+è
`'),+$# +$
=%` #
6. I#7/&F- +$
2o&#4 - .- ? OV‚iq ‡H#B / "
2-./ J"
KG
/!X
2CIEF
2+$EE .2=
DF!UE&##%
2 –†
. #Q
E#Gë - b$&FE#
%
2
%—
N=V+J"/- +a#I4e
2QIS&d -/#./ - Oe-.•K/ / V#X
e- I& !_. *&F)@Y / . 4 ? =#!m
-./ . #+$
X!m . JX)‚&F+$
2 .
&#%=
/- 7
U'),G+$# - +$#
O
8. ªÃ,ğREFERENCES
«Å«7ƕÇIÈ ž ÇIÉ«
ÊÌËÍÎÍÏTÐхÒ.ÏÓÔ#Õ5Ñ7ÖCÍÎÖ/Ô5с×NÖ/Í/ضÙeÚ5ÛÛIÜYÝpÞ3ßIÏÓTÍÎÖCàRÏ
ÙeÚjÑÓoÍÎÖ3Ôхáâ Õ5Ô5ÐÖCÍ/Øã+ä#« ¡©å Ç  À Œ¡O˜ Ç ¿#¿oæ7ç Çèé —˜ É æ ªo·»jª«
 ­Ã+Å«¨ê«jÆ ¤ ¿#ë —ì «íîÏTÚÐïË5âíîÏTÍ3שÔÐ#ðäOñÔÐÊpËÍÎÍÏoÐхÒÌÏÓÔ#Õ5Ñ7ÖCÍÎÖ/ÔÑ7«
Å å:œR˜ Ç ŸžŸ—…¡©˜ Ç ¿_¿TæŸò”óô —˜#ž æ ªo··µj«
 ¬Ã ¡ «õ«7Æ ˜#œRžŸå Ç šVœRŸžˆö «7¨ê« –œIššsœRž « › Ç÷ j¤¥Ÿ™¤¥Ÿ¤ £_¤:œRå
엤¥5£ ¿pô —˜
¹ ²ø¨ˆÇ œR ¿pù å ÀŸ¿ £ Ç ˜#¤¥Ÿ™ «jú  ÊÌÐïÔoÓRû©ü5ýÍ/ØþÑ7ÍÏoÐÑËÍÎÖ3ÔÑËâ•ÿNÔÑTñoûNÔÑ
Ë5ÓIØÖCÑÏ eÏËÐÑ7Ö/ÑÕ æ ì7œR™ Ç ¿ ·jª ··j«¨ —˜#™5œRˆ¹±œ Àô ¶œRŸ æ õ œR
–7˜œR ù ¤ ¿_ù — æ Å
æ ªo··»j«
 ´Rà ,«7Å — ¶œRj¤ ù ¤ À œRŸžˆ¡ «7¨ˆÇIÇ ˜ «Ÿ¨ˆÇ œR ¿#ë ¤ ô £oÁNœ+˜#— ÀŸ¿ £”œRìŸìŸ˜_—5œ ùë
7ÐïËÑ7äË5ÓTÍÎÖ/ÔÑ7ä,ÔÑ
£_— è œR˜_ž ô Ç œ£ À ˜ Ç ¿ ì7œ ù Ç œR7œRå š ¿ ¤ ¿ «7þ
ÊpËÍÎÍÎÏTÐхáÑË5â ÜäÖCäîË5Ñ
Ë5ÓIØÖCÑϱþÑ7ÍÏTâCâ Ö ÕsÏoÑÓÏ æ ­³³jª«
 µÃ+õ« œ ¿ ™ À ìj£#œ «7§ ó ì Ç ˜#¤¥ Ç 5£ ¿ è ¤ £ ë ˜œRŸžj— ŒìŸ˜_— Ç ù £_¤¥— «7ú 
ÑÓ#ÏTÐÍËÖCÑ7ÍÎÜÖ/хáÐÍÎÖ ©ÓTÖ/ËâþÑ7ÍÏTâCâ Ö ÕsÏoÑÓÏ ÌÊ.Ð_ÔoÓÏÏ 5ÖCÑÕ5ä-Ô_ñîÍC؟Ï
Ö 5ÍÏÏoÑ7Í/ØêÿOÔÑTñÏTÐïÏTÑÓ#Ï
á”þ
æ ì7œR™ Ç ¿ ªI´5¬ ªoµjª æ õ œR
–7˜œR ù ¤ ¿_ù — æ Å
æ ­³³³j«7¨ —˜#™5œRˆ¹±œ Àô ¶œRŸ¡ À Ÿå¥¤ ¿#ë Ç ˜ ¿ «
 ®Ã
˜_¤¥ Ç œ ¿Tæ –7˜_¤ ÇIÈoÇ æ ¹±œRj7œR æ Ç ì7œRå:œ æ œRŸž
¤¥7œIš «Å å ÀŸ¿ £ Ç ˜#¤¥Ÿ™
Ÿþïá
¤¥…å:œR˜_™ Ç ™˜œRì 럿 œRjž… ¶œ£_˜#¤ ù Ç ¿ «Ÿú  NÝ pá eá+ÿ
Üã ÔäÖCÚjãƒÔÑ ±Ö/äÓoÐïÏTÍÏ?á?â ÕsÔÐÖCÍ/Øã+ä 3áƒÿNÔÑTñÏTÐïÏTÑÓÏ+Ô5Ñ
eØjÏÔÐ_ÏoÍÎÖ/ÓËâOËÑ
jÏoÐÖ/ã+ÏTÑ7ÍËâ
áÑËâ ÜäÖCäîÔ_ñ îÖCäÓTÐïÏoÍÏ
áâ Õ5Ô5ÐÖCÍ/Øã+ä æ ªo···j«
 ¸TÃîé+« –7˜ Ç À ŸžˆœRŸžˆ› «õ ù#ë œR쟤¥˜ Ç«
¿_ë —˜_£p¤¥5£#˜_—ž Àjù £_¤¥—…£_—
—— ¿ £#¤¥j™ « jË Ë5ÑÏoäÏ ÔoÓTÖ/ÏTÍÎܔñÔÐ?áÐÍÎÖ ©ÓTÖ/ËâþÑ7ÍÏTâCâ Ö ÕsÏoÑÓÏ æ
ªI´ Á ¸¸ª j¸R»³ æ ªo···j«
 »Ã ,« ¹±œRå £#— æ ¡ « œRŸ™å Ç š æ ¹ «
œR™ ¿ £#œ æ œRŸž ğ«é —s— «
¦Ç  Ç ˜œR奤 ÈIÇ ž ù å ÀŸ¿ £ Ç ˜#¤¥Ÿ™ 柿#À ì Ç ˜ ¤ ¿ Ç ž…å Ç œR˜_Ÿ¤¥Ÿ™ æ œRjž…ž7œ£#œ
œ ¿#¿ ¤¥™Ÿ Ç s£ «Ÿú  ÊÌÐïÔTÓ#ÏÏ Ö/ÑÕä-Ô#ñ±Í/ØjÏ ÏTàÏTÑ7Í/ØþÑ7ÍÏTÐÑËÍÎÖ/ÔÑËâ
ÿNÔÑTñIÏoÐ_ÏoÑÓÏFÔÑ -ÑÔ×pâ Ï TÕsÏ îÖCäÓÔàÏTÐܶËÑ îË5ÍÎË
ÖCÑ7ÖCÑÕ æ
ì7œR™ Ç ¿ ­·· ¬³R´ æ õ œR…–7˜œR ù ¤ ¿_ù — æ Å
æ ­³³jª« Å.¨ ¡©˜ Ç ¿_¿ «
 ·Ã,¨ê« ¹ Ç œR˜_ ¿Tæ é+«7¨ œR ¿ — À ˜ æ œRŸž -«jé,« ç ™ « 
¤¥ ô —˜# ¶œ£_¤¥— ² £ ë Ç —˜ Ç £_¤ ù œR7œRå š ¿ ¤ ¿ — ôOë œR˜#žVœRŸž ¿ — ô £pœ ¿#¿ ¤¥™Ÿ Ç s£
ÑÓÏoÐÍËÖ/Ñ7ÍÎÜÖCÑ
Ç £ ë —ž ¿Ìô —˜ ù å ÀŸ¿ £ Ç ˜_¤¥Ÿ™ «Ÿú  Ê.ÐïÔTÓÏ#Ï Ö/ÑÕä,Ô_ñ
áÐÍÎÖ ©ÓTÖ/Ë5âþÑ7ÍÏoâ/â Ö¥Õ5ÏTÑÓÏ æ ì7œR™ Ç ¿ ­»­ ­·¬j«
ú æ ªo··5¸«
 ªo³Ã ,« ¤ É œ ¿oæç « å:œ ¿_¿ ¤ ¿Tæ œRŸž Ä7« Ç ˜ ÇIÇIÉ« ë Ç ™å¥— 7œRå É5² Ç œR ¿
ù å ÀŸ¿ £ Ç ˜#¤¥Ÿ™FœR奙—˜#¤ £ ë « Ç ùë j¤ ù œRåe˜ Ç ì—˜_£ æ Å — ì À £ Ç ˜ õ ù ¤ Ç  ù Ç
ú  ¿ £#¤ £ À £ Ç æ öpŸ¤ Ç ˜ ¿ ¤ £š¶— ô ¿ £ Ç ˜#ž7œR æ ë Ç ç Ç £ ë Ç ˜#å:œRŸž ¿oæ
– Ç Ÿ˜ À œR˜_š ­³³jª«ú ±õs² ö ”²³jª²ø³­j«
+*
21 *
43
43
45
:9
( -
0
%
'&
8
8
(
'=
>
& &
)
.(
&
%
"!#!#!$
,(
-*
/$
76
;(
'
4
% +<
& 0=
=
¦§©¨
¦§•¨
¹ ¨
¹±º ¨
–O¹ ¨
º ª
º ­
¿#À ˆÁ
¹ ¨
ªo³³
³
³
³
³
³
³
¹±º ¨
ªo³³
ªo³³
³
³
¸R·
ªo³³
®®
´´5µ
³
³
ªo³³
7?
–N¹ ¨
ªo³³
ªo³³
­jª
º ª
ªo³³
ªo³³
º ­
ªo³³
ªo³³
¬R´
¸R³
ªo³³
³
³
oª ³³
¬³
¬µjª
³
­³³
´5³R´
 ªªÃ+Ä7«7¨ œ ù À ÇoÇ  «õ — Ç Ç £ ë —ž ¿Ìô —˜ ù å:œ ¿_¿ ¤ ÷ ù œ£_¤¥—ˆœRŸž…œR7œRå š ¿ ¤ ¿
— ô À å £_¤ œR˜#¤:œ£ Ç — ¿ Ç ˜ œ£_¤¥— ¿ «7ú  ©«Ÿ¨ê« ÇTÅ œR œRjž
Ä7« ç Ç šj ¶œR æ Ç žŸ¤ £_—˜ ¿oæ ÊÌÐïÔoÓÏÏ ÖCÑÕ5ä,Ô#ñ?Í/ØjÏîÙ©Ö ñÍ/Ø ”ÏTÐ#ðÏTâ ÏTÜ
Üã Ô5ä#Ö/Úã ÔÑ
ËÍ/ØjÏTã+ËÍÎÖ3Ó#Ë5â ÍËÍÎÖ/ä#ÍÎÖ3Óoä±ËÑ Ê.Ð_ÔsÞ#ËsÞIÖ/â Ö/ÍÎÜ æ
5—å À Ç+ª æ ì7œR™ Ç ¿ ­»jª ­·5¸ æ Æ•Ç ˜ ÉÇ å Ç š æ Å
æ ªo·®5¸« öpŸ¤ Ç ˜ ¿ ¤ £šV— ô
Å œR奤 ô —˜#j¤:œ,¡©˜ Ç ¿#¿ «
8
8
+*
8
CD
3
'3
A
B
@
8
4
 ªo­Ã+¨ê«7¨ˆÇ :å œ+œRŸž ,« º Ç ù ÉÇ ˜# ¶œR «  Ç ó ì Ç ˜_¤¥ Ç s£#œRå ù — ì7œR˜_¤ ¿ —
Ë5ÓIØÖCÑÏ+â Ï#Ë5ÐÑ7ÖCÑÕ æ
— ô —sž Ç å ² 7œ ¿ Ç ž ù å ÀŸ¿ £ Ç ˜#¤¥j™F Ç £ ë —sž ¿ «
´5­ Á · ­· æ ­ ³³jª«
 ªo¬Ã ,« ç ™ æ ¨ê«ŸÄ —˜_ž7œR æ œRjž é+« Ç ¤ ¿_¿ « ò  ¿ ì Ç ù £#˜#œRå ù å ÀŸ¿ £ Ç ˜#¤¥Ÿ™ŸÁ
7œRå š ¿ ¤ ¿ œRŸž…œRˆœR奙—˜#¤ £ ë «íîÏTÚÐïË5âþÑTñÔÐãFËÍÎÖ/Ô5шÊÌÐïÔoÓÏTä#äÖ/ÑÕ
ÜäÍÏTã,ä æ ªI´ æ ­³³­j«
 ªI´Rà ,« ¡ Ç å¥å Ç ™œRŸž -«7¨ —s—˜ Ç« ùIù Ç å Ç ˜œ£_¤¥Ÿ™ Ç ó œ ù £ ² Ç œR ¿
œR奙—˜#¤ £ ë ¿ è ¤ £ ë ™ Ç — Ç £_˜#¤ ù ˜ Ç œ ¿ —Ÿ¤¥Ÿ™ «7ú  ÊÌÐïÔoÓÏÏ ÖCÑÕ5ä,Ô#ñ?Í/ØjÏ
Ù•Ö ñÍ/Øá+ÿ
Ÿþ
þÑ7ÍÏTÐÑËÍÎÖ/ÔÑË5â.ÿNÔÑTñÏTÐïÏTÑÓÏ+Ô5Ñ
-ÑÔ5×Ìâ Ï TÕsÏ îÖCäÓÔàÏTÐÜËÑ -ËÍË
ÖCÑ7Ö/ÑÕ æ 쟜R™ Ç ¿ ­5¸¸ ­»jª«
”ú ¡©˜ Ç ¿#¿Tæ ªo···j«
 ªoµÃ ,« ¡ Ç å¥å Ç ™œRŸž -«7¨ —s—˜ Ç« ² Ç œR ¿ Á § ó £ Ç ŸžŸ¤¥Ÿ™
² Ç œR ¿
è ¤ £ ë Ç ù ¤ Ç 5£ Ç ¿ £_¤¥ ¶œ£_¤¥—V— ô £ ë Ç  À Ç ˜p— ô<ù å ÀŸ¿ £ Ç ˜ ¿ «7ú 
ÊÌÐïÔTÓ#ÏÏ Ö/ÑÕä+Ô_ñ±Í/ØjÏ+ü Í/ØVþÑ7ÍÏTÐÑËÍÎÖ/ÔÑËâ.ÿOÔÑTñIûNÔÑ
Ë5ÓIØÖCÑÏ
Ï#Ë5ÐÑ7ÖCÑÕ æ ì7œR™ Ç ¿ ¸R­5¸ j¸R¬R´Ÿ«¨ —˜_™5œRˆ¹±œ Àjô ¶œRŸ æ õ œR
–7˜œR ù ¤ ¿#ù — æ Å
æ ­³³³j«
 ªo®Ã+Ä7« ¡ Ç 7œ æ Ä7« — È œRŸ— æ œRŸžV¡ « œR˜#˜#œ 7œR™5œ «  Ç ìŸ¤¥˜#¤ ù œRå
ù — 쟜R˜#¤ ¿ —— ô<ô — À ˜p¤¥j¤ £#¤:œR奤 È œ£_¤¥—V Ç £ ë —ž ¿pô —˜.£ ë DZÉ5² Ç œR ¿
œR奙—˜#¤ £ ë «7ÊÌËÍÎÍÏTÐÑ ÐïÏÓÔ#Õ5Ñ7ÖCÍÎÖ/ÔÑâ ÏTÍÎÍÏoÐä æ ­³ Á ªo³­5¸ ªo³R´5³ æ ªo···j«
 ªT¸Tà ¡ «7õ œRŸžYœRŸž ,«Ÿ¨ ——˜ Ç5« › Ç ì7œR¤¥˜_¤¥Ÿ™ ô œ À å £š ¤ ó £ À ˜ Ç —sž Ç å ¿
ÀŸ¿ ¤¥Ÿ™+ž Ç  ¿ ¤ £š Ç ¿ £_¤¥ ¶œ£#¤¥— «Ÿú  Ê.Ð_ÔoÓÏÏ 5ÖCÑÕ5ä-Ô_ñîÍC؟Ï+ü Í/Ø
þÑ7ÍÏoÐÑËÍÎÖ3ÔÑËâ.ÿNÔÑTñoûNÔ5Ñ
Ë5ÓØjÖCÑÏ eÏËÐÑ7ÖCÑÕ5«7¨ —˜_™5œR
¹±œ Àjô ¶œRj æ õ œRV–7˜œR ù ¤ ¿_ù — æ Å
æ ­³³jª«
 ªo»Ã ¡ «7õ œRŸžYœRŸž ,«Ÿ¨ ——˜ Ç5« –œ ¿ £_ ¤ ó¶ù å ÀŸ¿ £ Ç ˜#¤¥Ÿ™ ¿ — ô £ è œR˜ Ç æ ­³³­j«
«
%
-
"5
F9G(.(
9
(
+ +
-
K
NM 43
'
+E
;(
H
'I
J
-
"L
H
43
M
0
H
NO
B
P#Q
QRTS U
U%V
V
VTWYX
Z[WYX\"]TW>^_]"U'`R4Z7ab#_NU
 ªo·Ã+Ä7«õ ë ¤œRjž 𫨠œR奤 É« ç —˜# ¶œR奤 ÈIÇ ž ùIÀ £ ¿ œRjž…¤¥ ¶œR™ Ç
7ÐïËÑ7äË5ÓTÍÎÖ/ÔÑ7ä,ÔхÊpËÍÎÍÎÏTÐхáÑË5â ÜäÖCäîË5Ñ
¿ Ç ™ Ç s£#œ£#¤¥— «
þ
Ë5ÓIØÖ/ÑϱþÑ7ÍÏoâ/â Ö¥Õ5ÏTÑÓÏ æ ­­ 3» Á »»» ·³µ æ ­³³³j«
 ­³Ã ©« œRž Ç ë « – À ÈIÈ š ¿ Ç £ ¿ «7þÑTñÔÐãFËÍÎÖ/ÔÑêËÑ ÿNÔÑ7ÍÎÐïÔâ æ » Á ¬¬» ¬µ¬ æ
ªo·®µj«
4c #d
3 e
e
 ­jªÃ+Æ«
À  ¿#À
º Çè
e
%
%
É ² ë œR˜# —j¤ ù Ç œR ¿
—— ¿ £#¤¥Ÿ™+¤¥
ë Rœ Ÿ™ «
¦Ç  Ç ˜œR奤 ÈIÇ ž 5
ì Ç ˜ j¤ ¿ Ç žVå Ç œR˜#Ÿ¤¥Ÿ™ « Ç #ù ë Ÿ¤ ù œRå› Ç ì —˜ï£?ºp¡ eø² ­³³³²#ªo¬5¸ æ
å Ç £ï£ ² ¡Nœ ù É œR˜_ž
œ ¿oæ ­³³ ³j«
Y8
3 '=
3
0
"=
 ­­Ã+Æ« ë œRŸ™ æ ¨ê« º ¿#Àeæ œRŸžYö « œIšsœRå « ¹ ² ë Rœ ˜_ —Ÿ¤ ù Ç œR ¿
œ
ž7œ£œ ù å ÀŸ¿ £ Ç ˜_¤¥Ÿ™œR奙—˜#¤ £ ë « Ç ùë Ÿ¤ ù œRå<› Ç ì—˜ï£ºp¡ e#² ªo···²ªo­R´ æ
º Çè å Ç ï£ £ ² ¡Nœ ù É œR˜_ž
œ ¿oæ ªo···j«
3 = 0e
3
43 8
 ­¬Ã î« ë œRj™ æ › « ›”œR ¶œ É ˜#¤ ¿_ë 7œR æ œRŸž ê
¨ « ¤ sš «Æ•ú › Å º-ÁŸœ+ Çè
ž7œ£œ ù å ÀŸ¿ £ Ç ˜_¤¥Ÿ™œR奙—˜#¤ £ ë ¢œRŸžˆ¤ £ ¿ œRŸ
ì ìŸå¥¤ ù œ£#¤¥— ¿ « 5—å À Ç,ª æ
ì7œR™ Ç ¿ Iª ´Ÿª ªo»­ æ ªo··5¸«
8