Optimal decoding of noisy neuronal populations using recurrent

!"#$%!%&'&%(!%)
"*!""+,*.-/"0
13246587:9<;>=?2/467.@4BAB7CD28EF=?G87HI7)G,;J2(7K@';J9(L8M?7N=O2AN5'=?CP546587:QD*;JMRAS;JET46DU7)EV46=O9<;>4I7S43ADUWYX;J2*46=[Z
4I=?7)E\>4I587SL8HF7)EI72*4P;>4I=?D2;J2'QM?7B;J28G/CD2*46HI;JEF4)\*Q=O]J7)2^4I587HF7)EILD28EF7_DJ`;aLDL8X8M?;>46=OD2UDJ`28D=OEFbc287)X'HID28Ed
ef=g465h;i9(=?28DJHjCP5;J28Q7,=?2k28DJ46;>46=OD2l4658=OEcC);J2
m7,QJ7)287H6;JMO=?n)7Gk4IDi4I587<L'HIDm8MO7)9oD>`S7)EV46=O9<;>4I=?28Qqp
WYX;J2*4I=O46=O7)Er+465'7/D28MgbqHF7s;JMG8=gtu7HI7)2'C)7/=OE4658;>4v=O28EF4I7s;JGwD>`TMx;Jm7)MO=?28Qy465'7/287)X'HID28EAN=O465q43ADz=O28G8=?C7)E\
{ ;J28G
|\BAB7}2877)G~p =?28G'=?C)7E)\ {VK€sgOg€6{ƒ‚ \BAN587HI7i46587i„<…?†q=?2'G87K@‡HFX828E`&HID9 ˆ‰46D
ŠU‹:dŒ132‡4658=OE
C);JEI7U46587cHI7)EFL+DJ28EI7cDJ`465'7^287X8HID2'Ea=?E:G8728DJ467GlŽ?3‘“’“’“’“‘ [”a\+;J28Gi46587HI7^;JHI7^p •I;J2'QM?7EI–,4ID,7EF4I=?9,;>467>\
— K€sggO€ — ‚ d˜e
7:AN=?MOMM?74 G8728DJ4I7465'7aC)DJ9,L8MO74I7:EF74_D>`™HI7EILD28EF7)E)\ — 465'7aEI7K4SDJ`;J28QMO7)E)\R;J28G<š<› ˜œ —J
4I587žC)D28G'=O46=OD2;JM+L8HIDJm;Jm8=OM?=O43b(DJ`%Dm8EF7)HV]R=O28Q Q=g]72i4I587žL8HI7EI7)2*46;>46=OD2};>28QM?7E)\ — d
Ÿ_587,28743ABDHI ¡L8HF7)EF7)2*467G¢=?2¡46587(9<;>=?2l467.@R4^Cs;J2hm+7]=?7KA7G¢;JEc;J2
;>M?QDHF=O4I589£`&DHžCD9,L'X'46=O28Q
4I587jL8HI7EI72Y46;>46=OD2i;J28QMO7)E¤$Q=O]J7)2i;/EI7K4D>`%HF7)EFL+D2'EI7)E\ \846587j2'743ABDHI <¥828G8E:;yEI74ND>`;J2'QM?7E)\S—s¦ § ›  \
¨¡© ˆ €)OgO€ pª\4I5;>4c;JHF7(7EF4I=?9,;>467EUD>`465'7(4IHIX87,;J28QMO7)E\ —s§ d¬«:DA­QDRDG¡=?Ej4658;>4c;JM?QDJHI=O4I589<®¯Ÿ_587
;J2'EFAB7)H°G87)L7)28G'EBD2AN5;>4$AB7:9,7);J2mYbh•VQDRDG8–8d%«7HI7_AB7X8EF7:4I587NG874I7)HF9,=O2;J2*4TDJ`46587NC)D±]>;JHF=x;J28C7
9,;>46HF=g@+\G87)2'DJ467Gz²ƒ³%—s¦ § ³%—s¦ ´Oµ ›&G87¥2'7)G/=O9,9(7)G8=?;>467MOb:m7)M?D±A  \#4ID9(7s;JEFX8HI7T465'7BWYX;JMO=O43bjD>`'465'7°7EF4I=?9,;>467>d
¶ X8Hv9(DJ4I=O]>;>46=OD2q`&DJHvX8EI=O28Q¬465'=?EjWYX;J2*46=g43bw=OEa465;#4ž=O4vG'7467HI9(=?287E)\™4IDq;¬M?;JHIQJ7/7K@4672*4s\46587y9^X'46X;>M
=O2'`&DHI9,;>4I=?D2¡m743AB7)7)2·465'7¬28D=OEFbh287)X8HFD2;JMBHI7EILD28EI7E)\ \T;J28G¸4I587¬L8HF7)EF7)2*4P;>4I=?D2·;>28QM?7E)\ — ¤(4I587
EF9<;JMOM?7Hu46587°M?DJQ:D>`'465'7BG87K467HI9(=?2;J2*4DJ`R46587°C)D±]>;JHF=x;J28C7T9<;>4IHI=[@u\±4I587BM?;JHIQJ7)H™465'7B9/XR46X;JM*=O2'`&DHF9<;>4I=?D2
¹ ˆ)ºdS›»46HF=?C4IMObjEFL+7);J Y=?28Q'\>465'=?EHI7EIX8Mg4;JL'L8M?=O7)ED28MgbjAN587)2^4I587°287)X8HFD28E˜;JHI7°X828CDHIHF7)Mx;#467)Gud%eh7Bm7)MO=?7]J7
=g4:;JL8L8MO=?7)EN;>M?EIDy4ID,CDHIHF7)Mx;#467)Gi287X8HID2'E)\;JE:M?D28Q(;JE_4I587žC)D±]>;JHI=?;J28C)7ž9,;>46HF=g@¬=?ENEI9,;JM?Md132w;>2Yb‰C);JEI7>\
=g4_=?EN;QDDRGzEV4P;JHV46=?2'Q(LD=O2Y4)d  Ÿ_5'7cCD9,LD2872*46ENDJ`46587žC)D±]>;JHF=x;J28C7ž9<;>4IHI=[@z;JHF7jQ=O]J7)2im*b
ƒ² ³%—s¦ § ³%—s¦ ´xµT¼ ²6›>—s¦ § › ½¿—s¾ §± ›J—s¦ ´ › ˜½¿—s¾ ´OIµ
AN587HI7z465'7q;>28QM?7zm'H6;JCP >746E(=?2'G8=?C);>467‰;J2‡;s]7H6;JQJ7iAN=g465·HI7EIL7)C44ID¡4I587‰L8HIDJm;Jm8=OM?=O43bhG8=OEF46HF=?m8XR46=?DJ2
š,› ˜œ — \;J28G —s¾ §¼ ² —s¦ § › Iµ =?ES4I587ž9,7);J2z]>;JM?X87jD>`%4I587ž7)EF4I=?9,;>467>d
eh7,28D±AÀ5;s]7,43ABD‰4P;JEF E¤<ˆ  CD9,L'X'467y465'7(G'7467HI9(=?2;>2Y4UDJ`°465'7,CD]>;JHF=x;J2'C)79<;#46HI=[@+\;J28G
Á 
CD9,L8;JHI7/4I5;>4žG87K467)HF9,=O2;J2*4j46Dz4I587DL'46=O9<;>M˜D287>dÂDHF4IX82;>4I7)MObJ\D287yG8D7)Ež28D>4c58;±]J7y46D‰C)D2'EI=?G'7)H
;JMOMuLDEIEF=?m8MO7j7)EV46=?9,;>4IDHIES4ID¥828Gi4I587žDL'4I=?9,;JMuD2'7Jr'`&DH_X'2m'=x;JEF7)G}7EF4I=?9,;>46DHFE)\46587žM?D±AB7)HNmDX828GiD2
4I587žG874I7)HI9(=?28;J2*4N=?E_Q=g]7)2im*b¬465'7U=O2*]7)HFEI7UDJ`46587U˜=OEI587H_132'`&DHI9,;>4I=?D2 ¹ Á#ºd
AN587HI7UÄ<=OES46587U˜=OEI587H_=?2'`&DHF9<;#46=?DJ2™\
G87K4#²ƒ³ — ¦ ³ —¦ µSà G87Kˆ 4Ä
›Åˆ 
Ä §6´ ©ÇÆ ½ s— ȧ É —s´ MODQ°š<› ˜œ —JÊ 
›Á 
È È
Ë$WYX;>4I=?D2h›3ˆ  =?ES465'7U9^X8MO4I=gZ3G'=?9(7)28EF=?D2;>M;J2;JMODQyDJ`46587cÌH6;>9·7Í HVZÅÎ:;JDymDX828G ¹ Á#ºƒd
¶ X8HvL8HFDQHI;J9Ï28D±Aª=?Ea4IDzC)D9(L8X'4I7^465'7yC)D±]>;JHI=?;J28C)7^9<;>4IHI=[@w;>EIEIDC)=?;>467GwAN=O4I5¡4I587/287K43ADJHI w7EVZ
4I=?9,;>467>\™465872
C)DJ9,L;>HI7y465;#4c4IDi4I587¬ÌHI;J9·7)Í HVZ3Î;>DimDX82'G™\˜Ë$Wd›Kˆ  d<Ÿ_587(28743ABDHF EcA7(C)D2'EI=?G'7)H
;JHF7}465'DEI7w4I5;>4i;JEVbR9(L'4IDJ467}4ID·;¢EI9(DRDJ4I5fpfZÐG8=?9(7)28EF=?D28;JMa;#4I46HI;JC4IDH)\NAN=O4I5Ñ46587lL'HIDL7)HV43bŒ4658;>4
ˆ
)7 ;JCP5¸LD=?2*4UD2h4I587¬;#4I46HI;JC4IDHU=?Ež287)XR46H6;>M?MOb¡EV4P;Jm'M?7}›=ƒd 7Jdg\A7,7K@RC)MOX8G87¬EFX8CP5¸m7)5;s]=?DHc;JEcM?=?9(=O4aCb*Z
CM?7)E  d¯Ÿ_587)EF7l28743ABDHI YE‰;JHF7}7EF46=O9<;#46DHFE,=O2 465'7q`&DMOM?D±AN=?28QkEI728EI7>¤7K4<465'7}=?2'=O46=?;JM_C)DJ28G8=O4I=?D2‡DJ`
4I587^287K43ADJHI im+7 \+AN5'=?CP5w=OEQ7287)HI;>467G}`&HIDJ9 46587cC)D28G'=O46=OD2;JML'HIDm;>m8=?MO=O43b¬G'=?EF4IHI=Om8X'46=OD2™\š,› ˜œ — d
=O]J7)2,4I5;>4°=?2'=O46=?;JM'CD28G8=g46=OD2™\*46587:287K43ADHF 7]DJMO]7ES=?246=O9,7:;J2'G<HI7Mx;#@R7EBD2*4ID^=O4IEBpfZ3G8=O9,728EI=OD2;JM
;>4F46HI;JC4IDH)d$Ÿ_587žLDEI=g46=OD2zD2z46587U;>4F46HI;JC4IDH_L8HID±]=?G'7)E;J2‰7)EF4I=?9,;>467jD>`%4I587 —s§ d
ŸD}EI77<58D±A­4I58=?EžABDHI YE^=O2hL'H6;JCK46=?C7J\A7,C)D2'EI=?G'7)Hc;qEI7K4^D>`_28743ABDHF k7K]DMOX'46=OD2k7)WYX;>4I=?D28EUDJ`
4I587j`&DHI9
› ˆ  © › ›
I
› 
AN587HI7 ;J28G 5;s]7yCD9,LD2872*46E±?3‘“’“’“’“‘ [” ;J2'GyOÐ‘“’“’“’“‘ [”v\ =?Ea;¬28D28MO=?287);JH:`&X'28C4I=?D2wD>` \™;J82 G
AB7ž=?2*467HIL8HF74 ;JEN;EI7K4D>`%¥HF=?28QHI;>467E)dTŸ_58=?EN7WX8;>46=OD2‰=?E_=?2'=O46=?;JM?=On)7G,]=x;/465'7UHF7)M?;>46=OD2
›  ©¯ › — 
› 
Ÿ_587ž7.@'=OEF4I7)28C7cDJ`%46587U;>4F46HI;JC4IDHS=?9(L8MO=?7)EB465;>4_4I587)HF7ž=?E_EIDJ9,7žEI9(DDJ465¬`&X82'C46=OD2™\ ›  \'EI;>46=OEF` b=?28Q
›  © › › F
› 
AN587HI7w4I587¯;>HI7l;
EF74zD>`cp QJ7)287H6;JMO=?n)7G~;J28QJM?7)Ed 132Ñ465'7wM?=O9,=g4 \ ;>L8L8HID;JCP587)E¬4I587
;>4F46HI;JC4IDH)rR=ƒd 7Jdg\8M?=O9! ›  ©f › —J¦  d$Ÿ_587žLD=?2*4_DJ2¬46587U;>4F46H6;>C46DJH)\ — ¦ \8=?ES4I587j287K43ADHF ¬7)EV46=O9<;>4I7vDJ`
4I587vEI7K4_DJ`L8HF7)EF7)2*4P;>4I=?D2‰;>28QM?7E)\ — d#"D>467a4I5;>44I587v287K43ADJHI ,AB7jX8EF7j=?2,4I587v9,;J=?2(467.@R4NC);J2¬m7vCs;>EF4
=O2Y4ID(4I587c`&DJHI9 Q=g]7)2}=?2qËTWd˜›  m*bq7.@RL8HI7EIEI=O28%
Q $' &v=?2i467HI9(EDJ(` ' &v]=x;y465'7c¥HFEF4v7WYX;>46=OD2}=O2i4I587
9,;J=?2¬4I7K@4s\;>28Gq=O28EI7HF4I=?28Q/4I587žHI7)EFX8MO4I=?28Q7.@'L'HI7)EFEI=OD2}=O2Y4IDy46587žEI7C)D2'G™d
)7Cs;JX8EF7U4I587ž=?28=g46=?;JM+CD28G8=g46=OD2z=?E_Q7287)HI;>467G}L8HFDm;Jm'=?M?=OEF4I=?Cs;>M?MObJ\46587ž7EF46=O9<;#467vAN=?MOMum7žG8=Ot+7)HF7)2*4
D2Œ7s;JCP5~46HF=x;JMd+*E-,FX8EV4zG8=?EFC)X8EFEI7G™\4I587wWYX;JMO=O43b‡DJ`j465'7w7)EV46=?9,;>4I7q=OE<HI7Mx;>4I7)GÑ4ID¸=O4IE<C)D±]>;JHF=x;J28C7
9,;>46HF=g@+d¬ŸDwC)DJ9,L8XR467465;>4cC)D±]>;JHF=x;J28C7,9,;>4IHI=g@+\A7(4P;J >7z;qL7)HV46X8HFm;>4I=O]7,;JL8L'HID*;JCP5u¤/A7,=O467H6;>4I7
;¡M?=O287s;JHF=?n7)G·]7)HFEI=OD2ŒDJ`46587i`&X8M?M_2'D28M?=O287s;>Hy28743ABDHI \NË$Wdv.›  \°AN58=?CP5Œ;JM?MODANEX8E(46DkG874I7)HF9,=O287
;J28;JMObY46=OCs;JMOMObi46587<;JL8L8HFDs@'=O9<;#467y¥2;JM°LDEI=g46=?DJ2hD2k46587<;>4I4IH6;JCK46DHžQ=g]72
46587,=?28=g46=?;JM˜CD28G8=g46=?DJ2™%
d *
G8= /(C)X8Mg43bU;JHI=OEI7)E%m+7Cs;JX'EI7J\*X'28M?=O J7LD=O2Y4› #Z3G8=O9,728EI=OD2;JM  ;>4I4IH6;JCK46DHFE)\>=O4%=?E28DJ4DJmY]=ODX81E 03254672_L+D=O2*4
D2465'7vpfZÐG8=?9(7)2'EI=?DJ2;JM;>4F46H6;>C46DJH46D^MO=?287);JHI=On)7_;>HIDX82'G™d$1Ð4T46X8HF28EBDJX'4B4I5;>4TAB7a9,;±b/G874I7)HI9(=?2'7N4I587
;JL'L8HIDL'HI=x;#467žL+DJ=?2*4Nm*bqQJD=?28QL;>EF4M?=?2'7s;JH_DHFG87)H:=?2iDX8HNL7)HV46X8HFm;>46=OD2i7K@RL;J28EF=?D2u8d 74X8E:`&DJH:2'DA
L7)HV46X8HFm};JHFDX828Gi;J2q;JHFm8=O4IH6;JHVb<LD=?2*4)\8E6;sb z© ›  \;>28GqM?;>467HSG87K467)HF9,=O28-7 9d 74F46=O28Q
›
 © ›  ‡³ ›
 €
4I58HIDX'Q5‰EI7)CD28GqDHIG87HN=?2i³ ›
 \Ë$Wd%›  m7)CD9(7)E
›: 
³ ›
; ˆ  ©+< › >= ³ ›  Áˆ @? ? ›  ¤Y³ ›  ³ › 
AN587HI7 < =?ES4I587CB;JC)Dm'=x;J2‰7]>;JMOX;>4I7)G‰D2‰46587U;>4F46H6;>C46DJH)\
›A 
Á
$¼ È ƒ› K › ›  F €
È
›
4I587q•¤ –28D>4P;>4I=?D2z=OE_EI58DHV465;>28Gi`&DJHN;(EFX89 D2‰43AD(=?2'G8=?C7)E)\
È É ›  › ›8›I   ³ ų €
È
È
;J2'Gw46587=?2'G8=?C7)Ev5;s]J7(9^X8MO4I=?L8MO7cCD9,LD2872*46E)\ ¼ {V.€)OgO€I{Ђ dc132hË$WdT› A  \;J28G¡=?2w4I587yHI79<;J=O28G87H
DJ`%46587C*aL8L7)2'G8=g@+\A7cX8EI7UEF46;J28G;JHFGwG8DJ4VZ3L8HFDRG'X8C4:28DJ46;>46=OD2™r7Jd Q8dg\46587 C)D9(L+DJ287)2*4DJ` < = ³ =OE
ų .d
Ÿ_587¡7K@RL;>28EI=OD2™\vË$Wdž› A  \a=?E,]J;>M?=?GÑ;JEzM?D2'Q¢;JE¬465'7l58=?Q5'7)H¬DHFG87)Hz2'D28M?=O287s;>HI=O4I=?7E<;JHF7lEI9,;JM?M
CD9,L8;JHI7G‰4IDy46587žWYX;JG8HI;>46=OCj467)HF9qd$132‰4658;>4NCs;JEF7J\Ë$Wd%(› A  9<;sb¬m7žHI7KANHI=O4F4672q;>E
@? ? ›  ¤Y³ ›  ³ ›
°¼

ˆ

= ? ? ¤› < = ³ › I › < = ³ › I 
© < = ³ ›  Á <
³ ›  ›

M?!=O9 < › >= ³ ›  © 
›

:« 7)HI7y4I587EIX8L7)HFEIC)HF=?L'4 a9,7);J28Ež9/X8Mg46=?L'MOb < *m bl=O4IEI7)Mg` :46=O9,7E)r=O4jG'DR7E˜9,7);J2k4IH6;J2'EILDEI7>d(ŸD
;s]DJ=?GEI7C)X8M?;JHI=g43b 465'7:M?;JEF4$4I7)HF9­=?2(Ë$Wd›  JQ D=?28Qv4IDž=?2'¥2'=O43by;>E#%QD7)E$46Dž=O2'¥28=g43b AB7:HF7)WYX8=OHI7
4I5;>4
Ë$WYX;>4I=?D2¡›  =?E°46587jCD28G8=g46=?DJ2,4658;>44I7)M?MOEX8EBAN5;>4N;J2'QM?7>\ \46D/MO=?287);JHI=On)7;JHIDJX828G™d$1Ð4N;>M?EIDU467M?M?EBX8E
4I5;>4³ ›  © '\8AN58=?CP5q=?2z46X'HI2i=?9(L8M?=O7)E)\RX8EI=O28Q,ËTWd%›:  \'4I5;>4 w=?ES465'7c287K43ADJHI ‰7)EV46=?9,;>4I7jDJ`%4I587
L8HF7)EF7)2*4P;>4I=?D2q;J28QJM?7)E\ — d
eh7,C);J2
HF7)Cs;>EF4^ËTWdB›!  =O2Y4IDi;i`&DHF9oEIX8=g4P;Jm'M?7/`&DHžCs;>M?C)X'Mx;>4I=?D2lm*bk28DJ4I=?28Q8\]=x;iË$Wd›  \4658;>4
< ›  5;>Ejp 7=?Q72Y]J7)CK46DHFEAN=O4I5}7=?Q72Y]>;JMOX87(ˆr4658DEF7^7=?Q72Y]J7)CK46DHFEj;JHI7>\#" §j¼ È$&% € ¨<© ˆ €)OgO€ pªd
»R=O28C)7yAB7(;JHI7(;JEFEIX89(=?28Qz4I5;>4 ;JG89(=O4IEj;J2h;>4I4IH6;JCK46DH\;JM?M46587(DJ465'7)Hj7)=OQ7)2*]>;JMOX87)EžDJ` < 9/X8EF4Um7
MO7)EIE_4I5;J2¡ˆdTŸ_5YX8E)\=?2z4I587žM?=?9(=O4°4658;>84 # \ < 4P;> J7)E:D2q;/]7)HVb‰EI=O9,L8MO7a`&DHF9q¤
M?!=O9 < ›  © § " § ›  "(§' › 
AN587HI7N46587)"*§' ›  ;JHF7_46587;JG ,FD=O2*4T7)=?QJ7)2*]7C46DJHIED>`u465'7 B ;>C)Dm8=?;J2™d,+:EI=O28QU4I587NDHF4I58DQDJ2;JM?=g43b/CD28G8=[Z
4I=?D2-" §' = " ´ © ³ §6´ ›³ §6´ =?ES465'7/.jHFD287)CP >7)H:G87)Mg4P;  \Ë$Wd›
 m8HF7s;J YEN=?2*4ID<p 7)WYX;#46=?DJ28E)\D2'7ž`&DJH_7s;JCP5
¨\
"*§'
› 3= ¹ › —½ ›  º © ›Vˆ 
AN587HI7UA7cX8EI7GlË$WEd$›  ;>28G¢›:  4ID<7K@RL8HF7)EFEj³ ›  =?2q4I7)HF9,E:DJ` › — ;J28G ›  dSŸ_5'7c]>;JM?X'7UD>`9
4I5;>4E6;>4I=?EF¥87)EjË$Wd$›Iˆ  CDHIHF7)EILD28G'Ea46D<4I587^LD=O2Y4D2}4I587/;#4I46HI;JC4IDH4I5;>4:A7^M?=?2'7s;JHF=?n)7Gw;JHFDX828Gu\
;J2'G·;JM?EFD}46D}4I587z287K43ADHF 7EF46=O9<;#467¬DJ` — d 7K4I4I=?28Q © — ³ — \AN58=OCP5™\$467)HF9 m*bh467)HF9q\$9(7s;>28E
§ © —s§ ³ —s§ \;>28Gq7.@RL;J28G8=O28Q,ËTWd›3ˆ  46Dy¥HFEF4:DHFG87)HN=?2‰³ — \8AB7c;JHIHF=O]7ž;#4_46587žEI7K4aD>`˜7WX8;>46=OD28E
"(§ '
› —3= ¹ › —J$½ › —J º5
´
³ —s´ È
$
› 3= ¹ › —˜½ ›  º
"*§ '
$
ŸD,L8HFDRC7)7GiAB7cG'7¥287ž465'7U2'D=?EF7J\ › — \'465'HIDX8QJ5i4I587žHI7)M?;>46=OD28EF58=?L
© 
›VˆJˆ 
› — © › — ¸› —J
›Vˆ±Á 
AN587HI7
› —J°¼ ² µ
=OE46587j9(7s;>2‰]>;JMOX87vDJ`4I587ž287)X8HFD2;JMuHI7)EFL+DJ28EI7žQ=g]7)2z4I587jEI7K4D>`%L'HI7)EF7)2*4P;#46=?DJ2};J2'QM?7E)\ — dT1328EI7HF46=O28Q
Ë$Wd›Åˆ±Á  =?2*46Di›3ˆˆ  b=?7M?G8E
› — = › — " §' › —3= ¹ › —J½ › — º › 3= ¹ › —J ¸› —˜½ ›  º
© 
$
›Vˆ 
1Ð`^4I587¡467)HF9 "*§' › — = ¹ › —Jv½ › —J ºžG8D7)E v]>;J28=OEI5~`&DHi;JM?M — \a4I587)2™\`&DH‰EID9(7 — \j³ — AN=?M?M
m7z28D28n7)HFDk=O2¸46587zMO=?9(=O4ž4658;>4y46587z2'D=?EF7¬QD7)E/46Dln7)HFD8\;>28G¢46587z287K43ADJHI AN=OM?M°L8HIDG8X8C7im'=x;JEF7)G
7EF46=O9<;#467)EdUÌD2*]7HIEI7MObJ\=O`T=O4aG8D7)Ea]>;J28=OEI5™\465872l46587/2'743ABDHI iAN=?M?Mm7/X82Ym8=x;>EI7)Gudžeh7^4I5X'Ej9<;J >7
4I587;JEIEFX89(L'46=OD2w465;#4 "(§' › —9= ¹ › —JB½ › —J º © € ¨}© ˆ €sggO€ p — d^1Ð`°4658=OEjC)D28G'=O46=OD2w=OEvE6;>4I=?EV¥7)G
›;J28G}=g4a=OE:`&DJH:4I587^G8=g]=?EI=g]7U28DHF9<;JMO=?n);>46=OD2¬X8EF7)Gl=?2i46587c9<;>=?2‰467K@4  \465872lË$Wd›Fˆ  =?9(L8MO=?7)ES4I5;>4)\
`&DHEI9,;JM?M h\³ — hd$Ÿ_5YX8E\46587v4I7)HI9 ³ — È $ " §' = 465;>4:;>L8L+7);JHIE_=O2zË$Wd›3ˆ  =?E ‰› É  ;J2'GzCs;J2
m7ž=?Q28DJHI7)Gud˜ef=O4I5‰4I58=?ENEF=?9(L8M?=g¥Cs;>4I=?D2u\YAB7j¥28G‰465;#4a³ — =?ENQ=g]72im*b
" §'
´
³ —s´ È
$
" §'
¹ "*§' › —J3= È › — º  "*´' › —J3= ¸› — 
›Vˆ 
´
132z465'=?ES7.@'L'HI7)EFEI=O D2™\;J28G‰ =O2<AN5;>4_`&DMOM?D±ANE)\A7ž;>HI7jX8EF=?28 Q ;/EF58DHF4I5;J28G‰28D>4P;>4I=?D2<`&DJH46587j=O2*]7)HFEI7žDJ`
;9<;#46HI=[@+¤ ¹ §I´ º ¼ ¹ º §6´ dŸ_5YX8E)\ ¹ " §' › — = È › — º =OE_46587 ¨ …?†^C)D9(LD287)2*4:DJ`%46587U=?2*]7HIEF7^DJ`
4I587ž9<;>4IHI=[@ "*§' › —J3= È › — d
+EF=?28Q‰Ë$WdT›6ˆ  \™=O4a=?Ev2'DAªEF4IH6;J=OQ5*4I`&DHVAS;>HIGw46DzCD9(L8X'467c46587yCD]>;JHF=x;J2'C)7/9,;>46HF=g@‰4I5;>4jG87K467HVZ
9(=?287ES46587ž7HIHIDJH_=?2z46587ž7EF46=O9<;#467jDJ`46587U;J2'QM?7E)\;J2'GiAB7j¥28Gq4I5;>4
³ —s§ ©
²ƒ³ —s§ ³ s— ´?µ © È % › — = " ' › — ¹ " ' › —3= › —3= " & ' › —J º  " & ' › — = È › —J
'&

AN587HI7
› —J =?ES4I587ž28D=?EF7jC)D±]>;JHI=?;J28C7U9,;>4IHI=g@+\
› —JT¼ ² ¸› — › —JIµ 
)7Cs;JX'EI7aAB7v28D±A 5;s]7a43ABD/CD]>;JHF=x;J2'C)7a9,;>4IHI=?C7)E\ ;J28G¡²ƒ³ — ³ —µ \AB7aAN=?MOMC)D28EF=?EV467)2*4IMOb(HI7K`&7)H4ID
;JE_4I587 4 CD±]J;>HI=x;>28C)7ž9,;>46HF=g@¬;J28Gh²ƒ³ — ³ —µ EI=?9(L8Mgb¬;JE_4I587žC)D±]>;JHI=?;J28C)7j9,;>4IHI=g@+d
*aEžG8=OEICX8EIEF7)G™\%;JmD]J7J\G87)CHI7);JEI=O28Qz46587G87K467)HF9,=O2;J2*4žDJ`T465'7(CD±]J;>HI=x;>28C)7y9,;>46HF=g@}=?28CHI7);JEI7Ež4I587
9/XR46X;JM:=?2R`&DHI9,;>46=OD2‡m+7K43A77)2f46587w4I587w287X8HID28;JMvHI7EILD28EF7)E‰;J28G~4I587wL8HF7)EI72*4P;>4I=?D2f;J2'QM?7E)d *
EV46H6;>=?Q5*4I`&DJHFA;JHIG™\*m'X'4TEID9(7AN58;>4T467)G'=?DX8E\*Cs;JMOC)X8M?;>46=OD2/EF58D±ANE°4I5;>4$465'7_G874I7)HI9(=?28;J2*4T=?E$9(=?28=O9,=On)7)G
AN5872
= €
"*§
' È %
;>4_AN5'=?CP5‰]J;>M?X87jDJ` "*§' 465'7UCD±]J;>HI=x;>28C)7j9,;>46HF=g@<EI=O9,L8MO=O¥7E46D
›Vˆ 
© È % =  = È  
ƒ² ³ —s§ ³ —s´Oµ Ÿ_5YX8E\AN587287]J7)HjË$Wd%›Vˆ  =OENE6;>4I=?EF¥87)G™\465'7c28DJ28M?=O287s;JH_HF7)CX8HIHF7)2*4a2'743ABDHI ‰Q=g]7)2q=?2qË$Wd%›  M?7s;>G8E
4ID,;yCD]>;JHF=x;J2'C)7ž9<;#46HI=[@¬EFX8CP5q4I5;>4
›Vˆ : 
G874±²ƒ³ — ³ —µ © 8G 7K4 ¹ = ˆ  = º 
È
È
Ÿ_58=OE^7)WYX;#46=?DJ28EcQJ=O]7E^X8EU46587,9,=O28=?9^X89oG87K467)HF9,=O2;J2*4cDJ`S465'7<C)D±]>;JHF=x;J28C7,9,;>4IHI=g@¡;JEIEFDRC=x;>4I7)G
AN=g465w465'7y7)EF4I=?9,;>467cL8HIDG8X8C7)Gkm*b}465'7y28743ABDHI dcŸ%D‰G87K467)HF9,=O287^AN587K46587Hj465;>4v9,=O28=?9/X'9 HI7s;>CP587)E
4I587jÌHI;J9·7Í HVZ3Î;JDUmDX828G™\A7a287)7G¬46D^ Y28D±Af465'7aG8=OEF46HF=?m8XR46=?DJ2,DJ`4I587a2'D=?EF7Jr=ƒd 7Jdg\AB7v2877)G¬46D^ 2'DA
4I587c7.@RL8M?=OC)=O4_`&DJHI9 DJ`$š<› ˜œ —J d 7K4aX8E:C)DJ28EI=OG87)HN43AD(43bL+7EaDJ`˜28D=?EF7J¤ ;JX'EIEI=?;J2‰AN=O465q;J2};JHIm8=g46HI;JHFb
CDHIHF7)Mx;#46=?DJ2z9<;>4IHI=[@u\`&DHSAN58=OCP5

 =
› ½ › —JI =
K
7
R
@
L
› ½ › —F
€
š<› ˜œ —J ©
É ›ƒÁ  G87K4
‹ ŠU‹‡=?ET46587:46DJ46;JM2YX89/m7)H°DJ`287X8HID2'E)\;J2'G%DJ=?EIEFD2<AN=g465<X'28C)DHFHI7Mx;>4I7)G<2'D=?EF7J\Y`&DH
AN587HI7aŠ ¼
AN58=OCP5
š,› ˜œ —
› —
ƒ
© Ž!

›Vˆ A 
31 2
4I587(EI7)CD28G¢7.@'L'HI7)EFEI=OD2™\ ;J2'G 28D±AÇHF7`&7)HU46Di46587,2X'9/m+7H^DJ`SEIL8=O J7)Ec=?2
;J2¸=?2*4I7)HF]>;JMTHI;>46587H
4I5;J2h4I587,¥8HI=?2'Q}H6;#467JdqÂDHj46587"%D=OEIEFD2¸G8=OEF46HF=?m8XR46=?DJ2k4I587<9(7s;J2k]>;JM?X87(DJ` =?E \$;J28Gh46587,28D=?EF7
CD]>;JHF=x;J2'C)7j9,;>46HF=g@<=?E_Q=g]7)2im*b
¼ 6² ›Ž ½  ›Ž ½ Iµ © O³& AN587HI746587(EIX'm8EICHI=?LR4l• D=?EFEID2'–q=O28G8 =?C);>467Ež;J 2h;±]J7)HI;JQ7(D]J 7)HU46587L8HFDm;Jm8=OM?=g43b}G8=OEF4IHI=?m'X'46=OD2¡Q=O]J7)2
=O2¡ËTWdT›6ˆ A  dC"DJ4I7/465;>4aA7(;JHF7yX8EI=O28Q¬46587yEVb9/m+DJM `&DHa4I587y28D=OEI7/CD]>;JHF=x;J2'C)7y9,;>46HF=g@qDJ`°m+D>465
4I587 ;JX8EFEI=x;>2¸;J28G %D=OEIEFD2¸G8=OEF46HF=?m8XR46=?DJ28E)r˜AN5'=?CP5¸G8=OEF4IHI=?m'X'46=OD2lA7¬9(7s;>2
EI5'DX8M?Ghm+7,C)MO7s;JHž`&HID9
4I587žC)D2*467.@4sd
1Ð4c=?EžEF4IH6;J=OQ5*4I`&DHVAS;JHFGk4IDqEF58D±A 465;#4U4I587,˜=?EF587)Hž=?2R`&DHI9,;>46=OD2™\Ë$WdB›IÁ  \`&DJHž4I58743ADqCs;JEF7)E^=OE
Q=g]72im*b
Ä §6´ ‘ © È % =  = È Áˆ 46H  = È % =  = È ›Vˆ 
Ä §6´ ‘ © È % =  = È ›Vˆ 
AN587HI7:46HTHI7K`&7)HIET46Dž465'7:4IH6;JC7DJ`™;U9,;>4IHI=g@+d%Ÿ_5874IH6;JC7N4I7)HF9 =?2,ËTWdu›ˆ  =OE°;U28DJ2RZ3287Q*;>4I=O]7NG87K¥28=g467
9,;>46HF=g@,AN=O4I5iHF7)EFL+7C4N46D46587j=O28G8=OC)7)E ¨ ;J28G \;JEN=?ES4I587j¥HIEV4N467)HF9 D2z465'7UHF=?Q5*4N5;>28G‰EI=?G'7UD>`Ë$Wd
›3ˆ  d$Ÿ_5X'E)\
G874 ¹ Ä º Ã G874 ¹ È =  = È º
›ƒÁ 

=È º
G87K4 ¹ Ä º © G874 ¹ È =
›ƒÁˆ 
Ë$WYX;JMO=O43bq=?Ej;JCP5'=?7]J7)G¡=?2¡Ë$WdT›ÅÁ  D28MObq=O`$4I587/46HI;JC)7/4I7)HF9 ]>;J28=OEI587E)\™AN58=OCP5¡5;JL8L7)28EžD2'MObiAN587)2
=?E_=O28G87L+728G87)2*4DJ` — d°ÌD9(L;JHF=?28Q(Ë$WYE)d›3ˆ :  ;J28Gh›Á  \8AB7U;JHIHF=O]J7c;#4NDX8HS¥2;>MHI7)EFX8MO4)¤
ˆJdÂDH ;>X8EIEF=x;J2w2'D=?EF7^AN=O4I5wC)D2'EF4P;>2Y4ž2'D=?EF7^C)D±]>;JHF=x;J28C7/9,;>46HF=g@+\ \+465'7y9,=O28=?9/X'9 G874I7)HF9,=[Z
28;J2*4<DJ`46587iC)D±]>;JHF=x;J28C7q9,;>4IHI=g@¢;JCP58=O7]7GÑm*b·46587i28743ABDHF ‡=OE 4IDk4I587}ÌH6;J9·7)Í HÅZÅÎ:;JD
mDX82'G™d
ÁdÂDH ;JX8EFEI=?;J2,2'D=?EF7:AN=g465,;U28DJ=?EI7:C)D±]>;JHF=x;J28C7N9<;>4IHI=[@/4658;>4G'7)L7)28G8EBD2(L8HI7EI7)2*46;>46=OD2¬;J2'QM?7>\
4I587(9,=O28=?9/X'9£G87K467HI9(=?2;J2*4UDJ`S4I587(C)D±]>;JHI=?;J28C)79,;>46HF=g@k;>CP58=?7K]7)G
mYbl4I587<2'743ABDHI 6 4I587jÌHI;J9·7)Í HVZ3Î;>DcmDX828GudŸ_587vG8=gtu7HI728C)79<;sb(m+7:Cs;>M?C)X'Mx;>4I7)G<m*b,C)D9(L;JHF=?28QUË$WYE)d™›ˆ :  ;J28G
›3ˆ  d
RdÂDHyX'28C)DHFHI7Mx;>4I7)G %D=OEIEFD2Œ28DJ=?EI7>\°4I587‰9,=O28=?9^X89 G'7467HI9(=?2;>2Y4D>`4I587qCD±]J;>HI=x;>28C)7z9,;>46HF=g@
;>CP58=?7K]7)Gqm*b¬46587ž287K43ADJHI z=?E 4IDy46587cÌH6;>9·7Í HVZÅÎ:;JDymDX828Gud
"!$#!&%'!&(*)+!$,
¹ ˆ)ºC"cd )BHIX8287M*;J28GCB'd %d ";JG;JMd.-qXR46X;JMJ=?2'`&DHF9<;#46=?DJ2™\s˜=OEI587H=?2'`&DJHI9,;>46=OD2v;J2'GULDL8X'Mx;>4I=?D2vCDRG'=?28Q8d
/ 1032 5476 4\™ˆ '¤gˆ A '9
ˆ 8 AR\+ˆ 'd
¹ Á#ºUŸj:d -kdÌD]J7)H;J28G B'd *cd*Ÿ_58D9,;JE)<d ; 4 # >=!4 ?= 0 4 4 2 09@ d BJD582ef=?MO7Bb A »RD2'E)\ "7A
C°DHI \™ˆ 'ˆd
: