=Paper=
{{Paper
|id=Vol-2936/paper-185
|storemode=property
|title=Local Classification with Recurrent Neural Network for Profiling Hate Speech
Spreaders on Twitter. Notebook for PAN at CLEF 2021
|pdfUrl=https://ceur-ws.org/Vol-2936/paper-185.pdf
|volume=Vol-2936
|authors=Pablo Pallarés,Carlos Herrero
|dblpUrl=https://dblp.org/rec/conf/clef/PallaresH21
}}
==Local Classification with Recurrent Neural Network for Profiling Hate Speech
Spreaders on Twitter. Notebook for PAN at CLEF 2021==
https://ceur-ws.org/Vol-2936/paper-185.pdf
!
!
!
!"#$%& '%$(()*)#$+)",& -)+.& /0#1220,+& 3012$%& 30+-"24& *"2&
52"*)%),6& 7$+0& 8900#.& 8920$:02(& ",& ;-)++02<& 3"+0=""4& *"2&
5>3&$+&'!?@&&ABAC&#"$&#%$&#&$&#'$!#($&
&
!!
"#$%&!"#%%#'()!!!#*+!,#'%&)!-.''.'&!!
!
!
"#$%&'()%*+*",-.%*/0$%0+"1'"2+./$0%+3"4+5%$-"1'"2'(+3")6$3"2+.'$0%+3"789::3";<+%$""
!!
!
>=(+2$#+&&
/0.!1.*.'#%!23'2&).!&4!506)!7&'8!6)!50.!)53+9:!6;2%.;.*5#56&*:!#*+!+.<.%&2;.*5!&4!#!
)9)5.;!50#5:!16<.*!#!/7655.'!4..+:!+.5.';6*.)!64!65)!#350&'!)2'.#+)!-#5.!=2..>0!?-=@A!/0.!
>&'23)!3).+!7#)!2'&<6+.+!6*!50.!B50!C*5.'*#56&*#%!D350&'!"'&46%6*1!,&*5.)5A!/06)!+#5#!).5!
>&*)6)5)!&4!EFF!/7655.'!2'&46%.)G!HFF!6*!=2#*6)0!#*+!HFF!6*!I*1%6)0A!/0.'.!6)!&*.!JKL!
46%.!2.'!#350&'!7650!EFF!57..5)A!/0.!*#;.!&4!50.!JKL!46%.!>&''.)2&*+)!5&!50.!3*6M3.!
6+.*5646>#56&*!&4!50.!#350&'A!N6*#%%9:!50.'.!6)!#!5'350A5O5!46%.!7650!50.!%6)5!&4!#350&')!?#350&'!
6+@! #*+! 50.! 1'&3*+! 5'350! ?,%#))! 5&! 706>0! 50.! #350&'! PF! &'! HQ! $.%&*1)@A! N6')5:! 7.! 76%%!
2#'5656&*!50.!+#5#!).5!6*5&!/'#6*:!R.<.%&2;.*5!#*+!/.)5:!5&!>#''9!&35!#!)32.'<6).+!5'#6*6*1!
&4!#!>%#))646.'!?O!S!)#;2%.:!9!S!%#$.%@!7650!50.!5'#6*6*1!).5A!=.>&*+:!7.!2'&>..+!5&!;#8.!
#!2#'#;.5.'!#+T3)5;.*5!3)6*1!50.!+.<.%&2;.*5!).5!5&!;6*6;6U.!50.!>%#))646>#56&*!.''&'A!
/06)! 7&'8! 6*5.*+)! 5&! #22'&#>0! 506)! 5#)8! 4'&;! #! R..2! L.#'*6*1! ?RL@! 2.')2.>56<.:!
6*5'&+3>6*1! )&;.! 2.>3%6#'659! 50#5! #%%&7)! 3)! 5&! &$5#6*! 1&&+! >%#))646>#56&*! '.)3%5)A! /0.!
+.<.%&2.+!)9)5.;!;3)5!6*235!50.!#$)&%35.!2#50!5&!#!+.>&;2'.)).+!+#5#!).5!#*+!1.*.'#5.!
#*!JKL!46%.!4&'!.#>0!+&>3;.*5!6*!50.!+#5#!).5:!#)!+.)>'6$.+!6*!50.!5#)8A!C*!50.!%#)5!).>56&*!
7.!76%%!.<#%3#5.!50.!#>>3'#>9!&$5#6*.+A!!!
!
D0E-"2:(&&C&
D350&'!2'&46%6*1:!0#5.!)2..>0:!57655.':!57..5!2'.2'&>.))6*1:!2'&46%6*1!0#5.')A!
C0! ?-=@! 6)! >&;;&*%9! +.46*.+! #)! #*9! >&;;3*6>#56&*! 50#5! +6)>'.+65)! #! 2.')&*! &'!
1'&32! $#).+! &*! )&;.! >0#'#>5.'6)56>! )3>0! #)! '#>.:! >&%&3':! .50*6>659:! 1.*+.':! ).O3#%! &'6.*5#56&*:!
*#56&*#%!&'616*:!'.%616&*!&'!&50.'!>0#'#>5.'6)56>)A!V6<.*!50.!.*&';&3)!#;&3*5!&4!>&*5.*5!1.*.'#5.+!
$9! 3).')! &*! /7655.':! 50.! 2'&$%.;! &4! +.5.>56*1! #*+! 2&))6$%9! >&*5'#)56*1! -=! )2'.#+! $.>&;.)!
43*+#;.*5#%:!4&'!.O#;2%.:!5&!46105!#1#6*)5!;6)&19*9!#*+!O.*&20&$6#A!/&!506)!.*+:!506)!5#)8!#6;)!
5&!6+.*5649!2&5.*56#%!2'&2#1#5&')!&4!0#5.!)2..>0!&*!/7655.'!#)!#!46')5!)5.2!6*!2'.<.*56*1!0#5.!)2..>0!
4'&;!)2'.#+6*1!#;&*1!&*%6*.!3).')A!C5!6)!#$&35!6*<.)561#56*1!70.50.'!65!6)!2&))6$%.!5&!+6)>'6;6*#5.!
#350&')!70&!0#<.!)0#'.+!0#5.!)2..>0!6*!50.!2#)5!4'&;!50&).!70&!0#<.!*.<.'!+&*.!)&:!#)!4#'!#)!7.!
8*&7A!
!
!
!
H
,LIN!EFEH!W!,&*4.'.*>.!#*+!L#$)!&4!50.!I<#%3#56&*!N&'3;:!=.25.;$.'!EHWEX:!EFEH:!Y3>0#'.)5:!Z&;#*6#!
IKDCLG!2#$2#%4&[32#'0.'$E[32=7/!+/7630?7!+,<<,>5!@0A7>57!B33/08930,>!':*!C>37/>630,>6D!E++!FG!':*H:!!
!
,IbZ!c&'8)0&2!"'&>..+6*1)!?,IbZ^c=A&'1@!!
!
"!
!
!
!
!
!
!
"# $ %&'(%) /01 2!34553- 6!!!!!!!!!!!!!!!!!!!!1789:;!
*+,-+.
!
D! )3;;#'9! &4! 50.! '.#)&*6*1! &4! 50.! 2'&$#$6%6)56>! ;&+.%! 4&%%&7.+! 6)! 50.! 4&%%&76*1G! 7.! >#*!
.)56;#5.!50.!2&)5.'6&'!2'&$#$6%659!&4!>%#))!,!16<.*!50.!.*56'.!).5!&4!57..5)!&4!#*!#350&'A!c.!>#*!
4&';3%#5.!65!#)!4&%%&7):!;#86*1!50.!#22'&2'6#5.!;#'16*#%6U#56&*)!&4!50.!>%#))!5#1)!#))&>6#5.+!7650!
.#>0!/7..5G!
/01234553<=>?@AB 6 $ C..H F* C..E F* D C..G F* /019 !"* 9 "I 9 J JJ!!9 "K 234553<=>?@AB 6!!!!!!!!!!!!!!E"H
!
Z.1#'+6*1!50.!6*5.'*#%!2'&$#$6%659!&4!50.!;#'16*#%6U#56&*!6*!.O2'.))6&*!?H@:!7.!>#*!+.>&;2&).!
65! 6*5&! 50.! 2'&+3>5! &4! E! 5.';)G! 50.! 2'&$#$6%659! 50#5! 16<.*! 50.! %6)5! &4! #*! #350&'i)! 57..5)! 1.5)! 50.!
>%#))646>#56&*!&4!.#>0!57..5:!#*+!50.!2&)5.'6&'!&4!>%#))!,!16<.*!50.!>%#))!&4!.#>0!57..5!#*+!50.!%6)5!
&4!57..5)!&4!50.!#350&'!5&!+.5.';6*.!65)!%#$.%G!
!/019 "* 9 "I 9 D!!9 "K 2L<=>?AB 6 $
!!!!!!!!!!!!!!!!$ !/0"* 9 "I 9 J JJ!!9 "K 2L<=>?AB 6 M !/012L<=>?AB 9 "* 9 "I 9 J JJ!!9 "K6 E%H
-.'.:!7.!;#+.!#!).'6.)!&4!#22'&O6;#56&*)!5&!)6;2%649!50.!>#%>3%#56&*):!#22'&O6;#56*1!50.!57&!
5.';)!&$5#6*.+!6*!.O2'.))6&*!?E@G!
!
•! !""#$%&'()*!
HA! N&'!50.!46')5!5.';!&4!.O2'.))6&*!?E@:!7.!>#*!#))3;.!50#5!50.!#350&'i)!/7..5)!'#*86*1!6)!
)5#56)56>#%%9!6*+.2.*+.*5!&4!50.!'#*86*1!&4!50.!&50.'!#350&'i)!/7..5)A!]*!50.!&*.!0#*+:!
506)!#))3;256&*!6)!>&*)6)5.*5!$.>#3).!*&5!#%%!&4!#*!#350&'i)!/7..5)!0#<.!5&!)2'.#+!0#5.!
)2..>0! &'! <6>.! <.')#:! $35:! &*! 50.! &50.'! 0#*+:! 7.! >#*! >&*)6+.'! 50#5! 50.'.! 6)! )&;.!
'.%#56&*)062!$.57..*!#*!#350&'i)!+644.'.*5!/7..5)A!]*>.!506)!>&*)6+.'#56&*!0#)!$..*!;#+.!
#5! 50.! >&*>.253#%! %.<.%:! 506)! 4#>6%65#5.)! &2.'#$6%659:! 7.! #%)&! ;#+.! 50.! f#6<.! Y#9.)!
#))3;256&*!6*>&'2&'#56*1!50.!)5#56)56>#%!6*+.2.*+.*>.!$.57..*!/7..5)G!!
K0KQ!RSTT?UVWXYZ[ 6
/0"* 9 "I 9 J JJ!!9 "K 2L<=>?@AB 6 N O-F* /0"P2L4553- 6!!!!!!!!!!!!!!!!!!!!!!!E&H
%:! C*!50.!).>&*+!5.';!&4!.O2'.))6&*!?E@:!7.!>#*!;#8.!57&!#22'&O6;#56&*)A!N6')5:!7.!#))3;.!
50.!)5#56)56>#%!6*+.2.*+.*>.!&4!>%#))!,!>&*>.'*6*1!50.!#350&'i)!%6)5!&4!/7..5):!16<.*!50.!
>%#))!%#$.%)!&4!.#>0!&4!50.!57..5)!6*!50.!%6)5A!,&*>.253#%%9:!64!&*.!0#)!50.!>%#))646>#56&*!&4!
.#>0!57..5!?%&>#%!>%#))646>#56&*@:!50.!#350&'i)!%6)5!&4!57..5)!6)!*&5!'.M36'.+!5&!+.5.';6*.!50.!
2&)5.'6&'!2'&$#$6%659!&4!50.!,!>%#))G! !
!
!!!!!!!/012L<=>?@AB 9 "* 9 "I 9 D!!9 "K6 N !/012"* 9 "I 9 D!!9 "K 6!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!E'H
C*! 50.! ).>&*+! 2%#>.:! 7.! >#*! #22'&O6;#5.! 50.! 2'&$#$6%659! 50#5! 50.! #350&'! $.%&*1)! 5&!
>%#))!,!$9!>&3*56*1!;#*9!56;.)!7.!>%#))646.+!#!/7..5!#)!>%#))!,:!+6<6+.+!$9!50.!5&5#%!
*3;$.'!&4!/7..5)G!
*
!!!!!!!!!!!!!!!!!!!!!!!!!!!/012"* 9 "I 9 J JJ!!9 "K 6 $ K!0KQ!RSTT?U M !CK-F] \0 !"- 9 16!!!!!!!!!!!!!!!!!!!!!!!E(H
VWXYZ[ 6
N6*#%%9:!)3$)565356*1!.O2'.))6&*)!?_@!#*+!?`@!7650!50.!#22'&O6;#56&*):!6*!50.!&'616*#%!.O2'.))6&*!
?H@:!7.!0#<.G!
&!
!
!
!
!
!
!
+#5#Pj.*jQ@:!#*+!76%%!'.53'*!57&!%6)5)G!#!%6)5!&4!=5'6*1)!7650!50.!5&8.*6U.+!#*+!>%.#*.+!57..5)!7650!
50.!I;&T6)!'.2%#>.+!$9!50.6'!#))&>6#5.+!7&'+:!#!%6)5!7650!50.!>%#))!%#$.%!&4!.#>0!57..5:!#*+!#*&50.'!
%6)5!7650!50.!#350&'!&4!.#>0!57..5A!N&'!.#>0!&4!50.!57..5)!4'&;!50.!)#;.!#350&':!7.!'.2.#5.+!50.!
)#;.!>%#))!%#$.%!#*+!50.!)#;.!#350&'!EFF!56;.)A!
!
!
@)6120&KH&49>A30,>!=740>7O=636573EH&
&
!
]4!50.!HFF!I*1%6)0!#350&')!?HF:FFF!57..5)@!#*+!50.!HFF!=2#*6)0!#350&')!?HF:FFF!57..5)@:!7.!
'.).'<.!HF!I*1%6)0!#350&')!HFu!?H:FFF!57..5)@!#*+!HF!=2#*6)0!#350&')!HFu!?H:FFF!57..5)@!4&'!
50.!/.)5A!/&!2#'5656&*!50.!+#5#!).5:!7.!;3)5!+&!65!#5!50.!#350&'!%.<.%:!%.#<6*1!#%%!50.!57..5)!&4!50.!
).%.>5.+!#350&')!6*!50.!5.)5!).5A!C*!506)!7#9:!7.!6*4.''.+!#%%!50.6'!57..5):!#*+!50'&310!50.!.)5#$%6)0.+!
<&56*1!)9)5.;!?50.!;&)5!<&5.+!>%#))@:!+.5.';6*.+!50.!#350&'i)!>%#))!%#$.%A!C4!7.!0#+!5'#6*.+!&*!#*9!
&4!50.!#350&'i)!57..5):!50.!.<#%3#56&*!7&3%+!$.!3*'.#%6)56>A!!
!
C*!506)!7#9:!7.!#1#6*!.O5.*+.+!50.!5'#6*6*1!+#5#:!6*!506)!>#).:!$9!576>.!#)!;3>0A!/0.'.4&'.:!7.!
3*646.+!50.!%6)5)!&4!57..5):!%#$.%):!#*+!#350&')!).2#'#5.+!$9!%#*13#1.!6*5&!#!)6*1%.!%6)5!#*+!)0344%.+!
50.!.*56'.!>&'23)A!
K.)!>&*<.')6&*!3)6*1!)&;.!5&&%)!4'&;!50.!8.'#)!
2'&>.))6*1!2#>8#1.G!
!
HA! c.!#22%6.+!50.!h.'#)!5&8.*6U.'!&*!50.!%6)5!&4!57..5)A!!
!
EA! c.! 2.'4&';.+! 50.! /.O5E=.M3.*>.)! >&*<.')6&*! $9! #22%96*1! 2#++6*1! #45.'7#'+)! 5&!
1.*.'#5.!aE!<#%3.)!?%.*150!&4!50.!;&)5!.O5.*+.+!57..5@A!C*!50.).!%6)5):!7.!'.2%#>.+!50.!
7&'+)!$9!50.6'!6*+.O!6*!50.!<&>#$3%#'9!1.*.'#5.+!7650!50.!5&8.*6U.'A!C*!506)!7#9:!50.!%6)5!
&4!57..5)!$.>&;.)!#!%6)5!&4!).M3.*>.):!#*+!.#>0!&4!50.).!)3$%6)5)!6)!50.!6*235!2#'#;.5.'!&4!
&3'!*.3'#%!*.57&'8A!
!
_A! c.! %&#+.+! 50.! .;$.++6*1)! &$5#6*.+! 4'&;! 50.! *.57&'8G! j1%&<.A57655.'AEvYAHFF+A5O5jA!
/0.).!#'.!HFF^+6;.*)6&*#%!.;$.++6*1)!2'.^5'#6*.+!7650!#!/7655.'!5#)8!6*!I*1%6)0!#*+!
=2#*6)0!PvQA!
!
XA! c650!50.).!I;$.++6*1)!#*+!50.!5&8.*6U.':!7.!1.*.'#5.+!#*!.;$.++6*1)!;#5'6O:!7650!50.!
7&'+)! &4! &3'! <&>#$3%#'9:! 706>0! 7.! %&#+.+! %#5.'! #)! 7.6105)! &4! &3'! ;&+.%! 6*! 50.!
.;$.++6*1)!%#9.'A!
!
f.O5:!7.!*..+!5&!#+#25!50.!>%#))!%#$.%)!5&!7&'8!7650!&3'!*.3'#%!;&+.%A!Z.>#%%!50#5!&3'!).5!&4!
%#$.%)!7#)!,!S!mF:!HnA!,&*)6+.'6*1!50#5!&3'!;&+.%!0#+!#)!&35235!%#9.'!#!+.*).!%#9.'!&4!E!*.3'&*)!
#*+!#!)&45;#O!#)!#*!#>56<#56&*!43*>56&*:!50.!6*5.'.)56*1!506*1!6)!5&!;#8.!#!*.7!>&*<.')6&*!7650!
8.'#)A356%)A5&d>#5.1&'6>#%A!C*!506)!7#9:!7.!'.2'.).*5.+!&3'!).5!&4!%#$.%)!#)!4&%%&7)G!
!
^! F!S!PH!FQ!
^! H!S!PF!HQ!
!
J!
!
!
!
!
!
!
;$=%0&CH&&
U0V7!+,<-6/05,>!@UIR!
WM! PQQ!50V7! X-3:!BD1,/032! &%! B=6! J'! B=6! "%L! B=6! %(J! B=6! ("%! B=6#*!)..!50#5!3)6*1!50.!D+#;!&256;6U.':!<#'96*1!50.!)6U.!&4!50.!L=/K!7650!
4'&U.!2'.^%&#+.+!I;$.++6*1)A!c.!&$5#6*.+!50.!$.)5!'.)3%5)!7650!#*!L=/K!)6U.!&4!E`g!#*+!gXA!
C*5.'.)56*1%9:!7.!&$5#6*.+!$.55.'!'.)3%5)!6*!50&).!50#*!7650!HEa!*.3'&*)!706>0!6)!50.!6*5.';.+6#5.!
<#%3.A!/06)!6)!2'&$#$%9!$.>#3).!50.!*3;$.'!&4!.O2.'6;.*5)!)0&3%+!$.!0610.'A!N&'!50#5!'.#)&*:!7.!
+.>6+.+! 5&! 3).! 50.! L=/K! 7650! E`g! *.3'&*)! 6*! 50.! 4&%%&76*1! .O2.'6;.*5)! )&! 50.! ;&+.%! 0#)! #!
1'.#5.'!'.2'.).*5#56&*!>#2#>659A
K%6"2)+.G(&
/0.!).>&*+!.O2.'6;.*5!>&*)6)5)!&4!;&+6496*1!50.!&256;6U#56&*!#%1&'650;A!C*656#%%9!7.!0#<.!
7&'8.+! 7650! =1+5" PHXQ:! 5&! %#5.'! 5.)5! 7650! =1+>(+1" PHXQ! #*+! =1+1'.*+" PHXQA! C*! 50.! 4&%%&76*1!
2#'#1'#20)!7.!76%%!)..!#!+.)>'6256&*!&4!50.!_!&256;6U#56&*!#%1&'650;)A!
!
D%%!_!#'.!1'#+6.*5!+.)>.*5!&256;6U#56&*!#%1&'650;)!#*+!#+T3)5!50.!%.#'*6*1!'#5.!#)!#!43*>56&*!&4!
50.!1'#+6.*5!)&!50#5!64!50.!1'#+6.*5)!#'.!)3$)5#*56#%:!50.!%.#'*6*1!4#>5&'!+.>'.#).)!#*+!6*!#'.#)!&4!
%&7!1'#+6.*5:!<#%%.9)!70.'.!50.!1'#+6.*5!6)!%&7:!50.9!#+T3)5!50.!1'#+6.*5!)&!50#5!50.!7.6105)!#'.!
;&'.!)61*646>#*5!5&!5'#*);65!50.!6;2'&<.;.*5!7650&35!+6))62#56*1A!
!
C*!D+#1'#+!?D+#25#56<.!V'#+6.*5@:!50.!<#'6#56&*!&4!50.!7.6105)!+.2.*+)!&*!50.!1'#+6.*5:!$35!
3*%68.!=VR:!65!6)!*&5!#!)>#%#'!2'&+3>5!&4!50.!%.#'*6*1!4#>5&'!#*+!50.!1'#+6.*5!$35!#*!.%.;.*5^76).!
2'&+3>5A!C5!6)!#!0.%243%!#%1&'650;!4&'!50.!5'.#5;.*5!&4!)2#').!+#5#!$.>#3).:!4&'!50.!#+#25#56&*!&4!
50.!%.#'*6*1!'#5.!+6)>3)).+!#$&<.:!65!6)!+6<6+.+!$9z0(- 0{6 x 56A!/06)!>&;2&*.*5!#>>3;3%#5.)!50.!
1'#+6.*5)!)M3#'.+!5&!.%6;6*#5.!50.!)9;$&%!)&!50#5!64!50.9!#'.!031.!?2#'#;.5.')!7650!;&'.!4'.M3.*5!
4.#53'.)@:! 50.! %.#'*6*1! 4#>5&'! +.>'.#).):! #*+! 64! 65! 6)! ;6*6;#%! ?2#'#;.5.')! 7650! 6*4'.M3.*5%9!
#))&>6#5.+!4.#53'.)@:!50.!%.#'*6*1!4#>5&'!76%%!$.!;&'.!2'&;6*.*5A!
!
D+#+.%5#:!6)!#*!.O5.*)6&*!&4!50.!2'.<6&3)!&*.:!$35!)5&'6*1!#!46O.+^)6U.!76*+&7!&4!#>>3;3%#5.+!
1'#+6.*5)!?2'.<6&3)@!50#5!#%%&7)!0#<6*1!#!<6.7!&4!0&7!65!.<&%<.)!?50.!6*>'.;.*5)!&4!50.!7.6105)!
&4!#!)2.>646>!'#*1.@!)&!50#5!64!50.!6*>'.;.*5)!#'.!'.#)&*#$%.!50.!%.#'*6*1!4#>5&'!6*>'.#).)!?65!0#)!#!
>.'5#6*! '.).;$%#*>.! 5&! ;&;.*53;@A! /06)! #<&6+)! 50#5! 50.! '.+3>56&*! &4! 50.! %.#'*6*1! '#5.! 6)!
;&*&5&*&3)A!!
!!
L#)5%9:!#*+!+.)265.!$.6*1!3).+!6*!50.!46')5!.O.'>6).:!D+#;!?D+#25#56<.!K&;.*5!I)56;#56&*@!6)!
50.!;&)5!>&;2%.O!&4!50.!50'..!;.50&+)A!C5!>&;$6*.)!#%%!&4!50.!#$&<.!#*+!#++)!50.!2'.<6&3)!7.6105!
5&!50.!1'#+6.*5!)&!50#5:!64!50.!2'.<6&3)!7.6105!7.'.!'.%.<#*5:!65!7&3%+!0#<.!;&'.!6*4%3.*>.!&*!50.!
*.7!&*.A!=..!50.!'.)3%5)!&$5#6*.+!&*!50.!<#%6+#56&*!6*!/#$%.!EA!
T!
!
!
!
!
!
!
7650! gX! *.3'&*)! 6*! 50.! L=/K! #'.! )%6105%9! $.55.'! 50#*! 50.! '.)3%5)! 7650! HEa! #*+! E`g! *.3'&*)A!
b*4&'53*#5.%9:!7.!2.'4&';.+!506)!.O2.'6;.*5!7650!50.!E`g^*.3'&*!;&+.%!$.4&'.!+.%6<.'6*1!50.!
>&;2.5656&*! '.)3%5)! +3.! 5&! %#>8! &4! 56;.! #*+! $.>#3).! 65! 7#)! 50.! $.)5! ;&+.%! )&! 4#'! #5! 506)! 56;.A!
/0.'.4&'.:!7.!&$5#6*.+!50.!'.)3%5)!3).+!6*!50.!>&;2.5656&*!7650!#!;&+.%!5'#6*.+!4'&;!)>'#5>0!7650!
#!E`g^*.3'&*!L=/K!#*+!3)6*1!50.!D+#;!&256;6U.'!7650!50.!%.#'*6*1!'#5.!)>0.+3%.'!+.)>'6$.+!
#$&<.A!/0.!5'350!6)!50#5!50.!'.)3%5)!#'.!#%68.!7650!50.!+644.'.*5!L=/K!)6U.):!$35!50.!;#6*!+644.'.*>.!
%6.)!6*!50.!5'#6*6*1!#*+!6*4.'.*>.!56;.A!/0.!;&+.%!7650!gX!*.3'&*)!6*!50.!L=/K!6)!#22'&O6;#5.%9!
4&3'!56;.)!4#)5.'!50#*!50.!;&+.%!7650!E`g!*.3'&*)A!
N,$%E()(&
/0.!>&;2#'#56<.!'.)3%5)!&$5#6*.+!50'&310&35!50.!.O2.'6;.*5#56&*!20#).!#'.!#5!50.!57..5!%.<.%!
?%&>#%@:! 5'#6*6*1! 7650! 50.! 5'#6*! ).5:! #*+! <#%6+#56*1! 7650! 50.! +.<.%&2;.*5! ).5A! -&7.<.':! 50.!
>&;2.5656&*! 2'&2&).)! 50.! 2'.).*5#56&*! &4! '#*86*1! '.)3%5)! #5! 50.! #350&'! %.<.%! ?1%&$#%@A! N&'! 506)!
23'2&).:!7.!.)5#$%6)0.+!#!<&56*1!)9)5.;:!#)!+.)>'6$.+!6*!=.>56&*!E!&4!506)!'.2&'5A!I)).*56#%%9:!65!
#))61*)!50.!#350&'!50.!;&)5!<&5.+!>%#))!%#$.%!+3'6*1!50.!6*4.'.*>.!20#).!&4!06)!).5!&4!57..5):!7650!
50.!*.3'#%!>%#))646.'!&$5#6*.+!#5!57..5!%.<.%A!
!
C*!506)!).>56&*:!57&!'.)3%5)!#'.!1&6*1!5&!$.!#*#%9U.+A!]*!50.!&*.!0#*+:!50&).!&$5#6*.+!6*!50.!
)0#'.+!5#)8:!706>0!6)!2'.<6&3)!5&!506)!%#)5!>&;2#'6)&*!&4!.O2.'6;.*5!*3;$.'!X!#*+:!50.'.4&'.:!
7.'.!&$5#6*.+!7650!#!'.>3''.*5!*.3'#%!;&+.%!7650!E`g!*.3'&*)!6*!50.!&35235!%#9.'!&4!50.!L=/K!
#*+!3)6*1!D+#;!#)!&256;6U.'A!c.!5'#6*.+!506)!;&+.%!7650!50.!70&%.!+#5#).5!2'&<6+.+!6*!50.!5#)8:!
)0344%6*1!#%%!50.!#350&')i!57..5)!6*!=2#*6)0!#*+!I*1%6)0!#*+!#22%96*1!)&;.!5'#6*6*1!5.>0*6M3.):!
)3>0!#)!50&).!#%'.#+9!;.*56&*.+!6*!=.>56&*!X!#*+!&50.'):!)3>0!#)!&50.')!%.#'*6*1!'#5.!#**.#%6*1!
7650!'.0.#56*1A!!
!
;$=%0&KH&&
+,<-73030,>!P759D35!
PQQ!50V7! M-,A25! B93:!MU!6AA9/6A.! B93:!MQ!6AA9/6A.! B?7/617!BAA9/6A.!
%(J! "%(! *:KL! *:(L! *:JL!
%(J! %(*! *:L*! *:(K! *:JL(!
!
c.!2'.).*5.+!50.!'.)3%5)!&$5#6*.+!7650!57&!+644.'.*5!5'#6*6*1!&4!50.!)#;.!;&+.%A!/0.!'.)3%5)!
#'.! 6*+..+! <.'9! )6;6%#'A! C*! $&50! >#).):! 50.! #>>3'#>9! 6*! =2#*6)0! 6)! 7.%%! #$&<.! 50.! #>>3'#>9! 6*!
I*1%6)0:!+.)265.!0#<6*1!#!7.%%^$#%#*>.+!5#)8!#5!50.!%#*13#1.!%.<.%!HF:FFF!/7..5)!6*!=2#*6)0!#*+!
HF:FFF!57..5)!6*!I*1%6)0A!/0.!%&>#%!>%#))646.'!+.<.%&2.+!7#)!$6%6*13#%:!$35!50.!'.)3%5)!5.*+!5&!$.!
$.55.'!6*!&*.!%#*13#1.!50#*!50.!&50.'!4&'!)6;6%#'!>&;2.5656&*)A!/0.!'.)3%5!&4!50.!#<.'#1.!&4!$&50!
%#*13#1.)!6)!<.'9!)6;6%#'!5&!50#5!&$5#6*.+!6*!50.!5.)5)!$.4&'.!50.!2'.).*5#56&*!&4!50.!;&+.%A
=.>&*+%9:! 7.! #*#%9U.! 50.! '.)3%5)! &$5#6*.+! #45.'! 506)! ).>&*+! 2#'5! &4! .O2.'6;.*5! X:! 70.'.!
6;2'&<.;.*5)!0#<.!$..*!#>06.<.+!#5!57..5!%.<.%:!3*4'..U6*1!50.!.;$.++6*1)!;#5'6O:!$35!7650!#*!
L=/K!&4!gX!*.3'&*)A!D5!50.!)#;.!56;.:!50.!5.)5!#*+!6*4.'.*>.!20#).!#'.!>&*)6+.'#$%9!#>>.%.'#5.+A!
f&56>.!50#5:!6*!506)!>#).:!50.!;&+.%)!0#<.!$..*!5'#6*.+:!7650!BFu!&4!50.!+#5#!2'&<6+.+!?BFu!&4!
#350&')@:!$.%&*16*1!5&!50.!5'#6*!#*+!+.<.%&2;.*5!).5:!#*+!0#<.!$..*!.<#%3#5.+!7650!50.!/7..5)!&4!
HFu! &4! 50.! #350&')! '.).'<.+! 4&'! 5.)56*1A! /0.'.4&'.:! 7.! >&;2#'.+! $&50! ;&+.%)G! L=/K^E`g!
?2'.).*5.+!6*!50.!>&;2.5656&*@!#*+!L=/K^gX!?$.)5!;&+.%!&$5#6*.+!#5!/7..5!%.<.%@!3*+.'!50.!)#;.!
>6'>3;)5#*>.)G!
!
!
!
!
""!
!
!
!
!
!
!
;$=%0&NH&&
[,53\A,<-73030,>!A,<-6/05,>!
R,=7D! WM! PQQ!50V7! X-3:!BD1,/03217D6=,5! J'! B=617D6=,5! %(J! B=6#*!)..!50#5!50.!
'.)3%5)!0#<.!6;2'&<.+!7650!#*!L=/K!&4!gX!*.3'&*)!#>06.<6*1!#*!#>>3'#>9!6;2'&<.;.*5!&4!#%;&)5!
E!2&6*5)!#*+!)2..+!6;2'&<.;.*5)!&4!OXA!/0.!E`g!L=/K!;&+.%!+&.)!*&5!0#<.!50.!)#;.!7.6105)!
#)!50.!;&+.%!3).+!5&!&$5#6*!50.!>&;2.5656&*!'.)3%5)!$.>#3).!7.!5'#6*.+!50.!>&;2.5656&*!;&+.%!
7650!HFFu!&4!50.!+#5#!2'&<6+.+!#*+!50.!&*.!3).+!6*!506)!5.)5!7650!BFuA!-&7.<.':!7.!3).+!50.!
)#;.!2#'#;.5.')!#*+!5'#6*6*1!)5'#5.16.)A!C*!$&50!;&+.%):!7.!&$5#6*!#*!#>>3'#>9!*.#'!gaA`u!7650!
50.!/7..5!%.<.%!<#%6+#56&*!).5A!!
O.))6*1! 6;2&'5#*5! 5.O5:! +#5#! 2'.2#'#56&*:! <.>5&'6U#56&*:! 5&8.*6U#56&*:! ;&+.%! 5'#6*6*1! #*+!
46*.^53*6*1A!C*!#++656&*:!7.!3).+!+..2!%.#'*6*1!#5!50.!57..5!%.<.%!?L&>#%!#22'&#>0@A!]*>.!7.!0#<.!
+&*.!#%%!50.!.O2.'6;.*5#56&*:!7.!+.5.';6*.+!50#5!50.!$.)5!>%#))646.'!3).)!'.>3''.*5!*.3'#%!*.57&'8)!
7650!#*!L=/K!&4!E`g!*.3'&*):!D+#;!&256;6U.'!#*+!46*.^53*6*1!$9!3*4'..U6*1!50.!cI!;#5'6OA!
c650!506)!;&+.%:!7.!6*4.''.+!50.!5.)5!).5!#5!50.!57..5!%.<.%!#*+!).5!32!50.!<&56*1!)9)5.;!5&!+.46*.!
50.!&35235!).5!6*!50.!4&';#5!16<.*!6*!50.!D350&'!"'&46%6*1!5#)8!P`QA!-&7.<.':!7.!4&3*+!50#5!7.!>#*!
)56%%! 2'&2&).! +644.'.*5! )5'#5.16.)! 5&! 6;2'&<.! 50.! )2..+! #*+! 50.! #>>3'#>9! &4! 50.! >%#))646.':! .A1A:!
'.+3>6*1!50.!L=/K!5&!gX!f.3'&*)A!=&;.!&4!50.!2'&2&)#%)!7.!>#*!506*8!&4!4&'!4353'.!7&'8!#'.!
#*#%9U6*1! 50.! /7..5)i! )6U.! 6*! 50.! 5#)8! 3)6*1! #! 06)5&1'#;! #*+! #+T3)56*1! 50.! )5'6*1! %.*150! 6*235!
2#'#;.5.'! 6*! 50.! ;&+.%A! /06)! 76%%! )2..+! 32! 50.! 5'#6*6*1:! 706>0! 6)! $.>#3).! L=/K)! >#**&5!
2#'#%%.%6U.! #*+! 5#8.! #+<#*5#1.! &4! V"b! >#2#>659A! C*! #++656&*:! 50.! %&*1.'! 50.! )5'6*1! %.*150:! 50.!
0.#<6.'!65!6)A!D*&50.'!2'&2&)#%!7&3%+!$.!6*5'&+3>6*1!;&'.!)5#5.^&4^50.^#'5!*.3'#%!;&+.%):!)3>0!#)!
/'#*)4&';.')G!Y.'5:!7650!#55.*56&*!;&+.%)!>#2#$%.!&4!).%.>56*1!50.!;&)5!'.%.<#*5!6*4&';#56&*A!C*!
)0&'5:!7.!0#<.!#>06.<.+!1&&+!'.)3%5):!5#86*1!6*5&!#>>&3*5!)5#5.!&4!#'5!6*!)6;6%#'!5#)8)A!
! !
"%!
!
!
!
!
!
!
U#):!CA!K#'8&<:!
KA!K#9.'%:!KA!"&550#)5:!NA!Z#*1.%:!"A!Z&))&:!IA!=5#;#5#5&):!YA!=5.6*:!KA!c6.1;#**!
#*+!KA!c&%)8#A!j]<.'<6.7!&4!"Df!EFEHG!D350&')062!p.'646>#56&*:!"'&46%6*1!-#5.!
=2..>0!=2'.#+.')!&*!/7655.':!#*+!=59%.!,0#*1.!R.5.>56&*j!6*!!:*?"@$*'($+*%-$+."
4-$A'('$0'"-A"*?'"4BCD"=))-0%+*%-$"E4BCD":9:!F:!Y3>0#'.)5:!Z&;#*6#:!EFEHA!!
PEQ!! KA! "&550#)5:! /A! V&%%3$:! KA! c6.1;#**! #*+! YA! =5.6*A! jC*4&';#56&*! Z.5'6.<#%!
I<#%3#56&*!6*!#!,0#*16*1!c&'%+j\!/CZD!C*5.1'#5.+!Z.).#'>0!D'>065.>53'.\!).'6.)G!
/0.!C*4&';#56&*!Z.5'6.<#%!=.'6.)\!6+)A!)5.6*GEFHB'\!6)$*A!Bva^_^F_F^EEBXa^H:!fA!NA!
#A! ,A! ".5.'):! I+A:! Y.'%6*! -.6+.%$.'1! f.7! y&'8G! =2'6*1.':! ).2A! EFHBA! +&6A!
HFAHFFveBva^_^F_F^EEBXa^Hzd`!
P_Q!! NA! Z#*1.%:! VA! LA! +A! %A! ".x#:! YA! ,03%<6:! IA! N.')6*6! #*+! "A! Z&))&A! j"'&46%6*1! -#5.!
=2..>0!=2'.#+.')!&*!/7655.'!/#)8!#5!"Df!EFEHj\!,LIN!EFEH!L#$)!#*+!c&'8)0&2):!
f&5.$&&8!"#2.')A!C*!4-$A'('$0'"+$1"B+G)"-A"*?'"C&+.H+*%-$"D-(H5"E4BCD":9:!F:!
EFEHA!!
PXQ!! NA! Z#*1.%:! VA! LA! +A! %A! ".x#:! YA! ,03%<6:! IA! N.')6*6! #*+! "A! Z&))&A! j"'&46%6*1! -#5.!
=2..>0! =2'.#+.')! &*! /7655.'j\! C*! B50! C*5.'*#56&*#%! ,&;2.5656&*! &*! D350&'!
"'&46%6*1\! =9;#*5&:! EFEHA! b'%G! 0552)Gee2#*A7.$6)A+.e>%.4EHe2#*EH^7.$e#350&'^
2'&46%6*1A05;%A!
P`Q!! j"'&46%6*1! -#5.! =2..>0! =2'.#+.')! &*! /7655.'j! =9;#*5&:! K#9&! EFEHA! 3'%G!
0552)Gee2#*A7.$6)A+.e>%.4EHe2#*EH^7.$e#350&'^2'&46%6*1A05;%A!
PgQ!! .A!-&>0'.65.'!#*+!wA!=>0;6+03$.'A!jL&*1!=0&'5!/.';!K.;&'9j!6*!*'0?$%0+."('<-(*"
DI@J:9KJLM3"22A!F^a:!EH!D1&)5&!HBB`A!!
PvQ!! ZA! =A! ,A! RA! KA! w.44'.9! ".**6*15&*A! jV%&p.G! V%&$#%! p.>5&')! 4&'! c&'+!
Z.2'.).*5#56&*jA!b'%G!0552)Gee*%2A)5#*4&'+A.+3e2'&T.>5)e1%&<.eA!
PaQ!! hA!D26:!j8.'#)!%#9.')!'.13%#'6U.')jA!b'%G!0552)Gee8.'#)A6&e#26e%#9.')e'.13%#'6U.')eA!
PBQ!! ,A!=A!=.'1.9!C&44.:!jY#5>0!f&';#%6U#56&*G!D>>.%.'#56*1!R..2!f.57&'8!/'#6*6*1!$9!
Z.+3>6*1!C*5.'*#%!,&<#'6#5.!=0645:j!6*!N:$1"@$*'($+*%-$+."4-$A'('$0'"-$"O+0?%$'"
B'+($%$>:!LCLLI!VZDfR!"DLDC=:!EFH`A!!
PHFQ!!hA! #26:! jh.'#)! $#5>0d*&';#%6U#56&*jA! b'%G!
0552)Gee8.'#)A6&e#26e%#9.')e*&';#%6U#56&*d%#9.')e$#5>0d*&';#%6U#56&*eA!
PHHQ!!VA!-A!DA!hA!CA!=A!ZA!=A!f656)0!='6<#)5#<#A!jR'&2&35G!D!=6;2%.!c#9!5&!"'.<.*5!f.3'#%!
f.57&'8)! 4'&;! ]<.'46556*1:j! P-H($+." -A" O+0?%$'" B'+($%$>" Q')'+(0?" !M" E:9!7F"
!L:LJ!LMR3"K#9&!EFHXA!!
PHEQ!!hA!#26:!j8.'#)!+'&2&35jA!!
PH_Q!!j)8%.#'*! ;&+.%d).%.>56&*:jA! b'%G! 0552)Gee)>6865^
%.#'*A&'1e)5#$%.e;&+3%.)e1.*.'#5.+e)8%.#'*A;&+.%d).%.>56&*A5'#6*d5.)5d)2%65A05;%A!
PHXQ!!=A! Z3+.'A! jD*! &<.'<6.7! &4! 1'#+6.*5! +.)>.*5! &256;6U#56&*! #%1&'650;)j:! %$)%>?*"
4'$*('"A-("S+*+"=$+.T*%0)3"UH%"V+.W+T"=T.%'$"B*1X3"EFHgA!!
!
!
"&!
!
!
!