# # .1 7:@?4DOMEc

B VS O x G VSP L ON 9 V SY N B SWSd SY YP DOMYWWO NO x D9H95? IY U RY ” x @O SM 9 OWO N DOMYWWO NO ! x @ S V CY O SY E W VS PY EV O 6 NS x ” x IY U RY ” #

L FCO BA 0 P OFK A LOF FT OFK KC B@K B ABM x ʼ zʼ OPO O MO” z Y 7H S OW z x ~ OPO O MOʼ PL FCOr v FOB g du y x VSP ”

L FCO BA 0 P OFK A LOF FT OFK KC B@K B ABM ” VSP WYNOVS ” R 2 U WY YR RS O c&MYW MRS O )1/ ʼ zʼ7H q r ~ 7H q r z 7FDʼ z z fi ” fl z ~ ʼ & ci g FOB l i z uG VSP @YNOVS ” p YYV , VSP fl v ”g O

L FCO BA 0 P OFK A LOF FT OFK KC B@K B ABM )& VSP FY ” x ”C OMS SY s t x ” s t x fl z CE O SW Y ”7H fl ”7H z

L FCO BA 0 P OFK A LOF FT OFK KC B@K B ABM & VSP ”@: 6CD x MVSMU ” V LOV ” PL FCO n z p B @: 6CD” p q ” z y r

L FCO BA 0 P OFK A LOF FT OFK KC B@K B ABM m x ʼ z + ” LVSM p x VSP @:m6CD SVV ”@:m6CD” x ” ʼ

L FCO BA 0 P OFK A LOF FT OFK KC B@K B ABM m C OMS SY ” L OVS Oʼ zʼ nsPL FCO ci L OVS O Y V S OW z ʼ sPL FCO r LF@GPLn m

” 7Y O P M V ʼyfl O x 5NN O S 8OV cON :OONL MU PY 7Y S Y F S S aS R AO V AO aY U S 7FD ONSM SY x ?BD92 5 ? O EM VO BjO DOMYWWO N SY 9 S O aS R 9VS SLSVS c N 7 MS c 7Y S x B VS O ?O S Y D U PY EO O S V @ SM DOMYWWO N SY x C5?2 5 CY S SY LS 5a O ?O S : WOaY U PY 7FD C ONSM SY S ?S O DOMYWWO NO Ec OW YkS O LS z fl

g g B@9S r U kmV x @ S 7Y PO O MO2 1 ). f 1 )0 w VY m RY O ”Y V O O SY Y O O O SY w N c O SY C OV NS M SY x F Y S V2 1 )1 w ” x IY U RY 2 1 )1 f 1 ( w 1 )1 ” R VP N c aY U RY w 1 ( P VV N c aY U RY w d 0 0, s rCP A S RKMG EKL

0 0, KMG EKL x r r ygr l U ” IY U RY x Y SdO VUO ʼ VV x ()0 z ” x , S S ON VU / Y V O O SY + Y O O O SY x ., s,/0@K :B r ! q ” lJ VO ” r x ” 7 S OY - YY VOmAO hSb &

@O SM 9 OWO N DOMYWWO NO ! x Y VS O” O O OWO ” WO SM ʼ z z q ff MVSMU zz”nr x MVSMU ” O z” NaOVV SWO ʼ 7FD” ʼ Y SPc” x & MVSMU”y ” fl V LOV & B BM DF D K O @ F@G 1BBA @G CKM .K OB O B@K B A OFK

@O SM 9 OWO N DOMYWWO NO ! Deriving User- and Content-specific Rewards for Contextual Bandits # x Y SPc” V cVS OMYWWO N SY r n L OVS O ”LS VSdO AFO LK F@S

@O SM 9 OWO N DOMYWWO NO ! Deriving User- and Content-specific Rewards for Contextual Bandits # x O WS SWO” O V cVS ” fl VOO V cVS ” O W SWOʼ z T dd VS O O ” O W SWOʼ z

@O SM 9 OWO N DOMYWWO NO ! Deriving User- and Content-specific Rewards for Contextual Bandits # x MY MV O S O V cVS ” Y S g h n r

@O SM 9 OWO N DOMYWWO NO ! Deriving User- and Content-specific Rewards for Contextual Bandits # x N S O ” MY MV O S ~ OMB M OB ”

@ S V CY O SY E W VS PY EV O 6 NS x r M r w f cm lrMBR MAʼ V O L NS x ” ʼ x ”L OVS O” ffl x VY O SY 75 )1 P VV O

@ S V CY O SY E W VS PY EV O 6 NS r x MVSMU VY ” V O ” n x M SY ʼ ” y ” ʼ x l ʼ MYVN fl Oa N ʼ fl

@ S V CY O SY E W VS PY EV O 6 NS 3 M BA -BM KP F - AFO x & ) ”EV O ) ” M SY FYW Y E W VS ff x km r9 OBr o n e x EV O” p ʼy W ʼ

@ S V CY O SY E W VS PY EV O 6 NS MDF K OBMFKM 9 L F D x ” :K L K 9 L F D BAr x ,M OBaonsp KOao x Oa N” z x ” V O” z x p ” ʼ W

@ S V CY O SY E W VS PY EV O 6 NS MDF K OBMFKM 9 L F D x EV O ” p ” z M r 6 OVS O ” ʼ z ʼ z )( /( ”

7Y O P M V 7 Y H VSN SY !" x ” x fi VSN SY z z” r d rs x fl ” r d z z 5M SY ” 2 O& & fl ”7H ” ” q @E9r H VSN SY z z

7Y O P M V 7 Y H VSN SY !" )2 • ” fl d • r b t y ” ” ” fl ” (&1+” ~ 2 p 9BLTOM S O8DC3<276 :;E.?>@ADC=B51<27/604

”IY U RY ” . P @EF B B M F D KMG EKL # x x AO CE ()/ + ” x ) ” 7@? AO CE P VV O ” RY O SY ʼ z x D9H95? fi fl x S ON E O UO E 5 ROc x ~~ o

y ʼ z

5 O NSb

Ya EO S S O S DOMYWWO N SY Ec OWe BkS O 9 V SY Y CY V S c3 x OW” Y V S cʼDOMYWWO NO ”YkS O x CY V S c” fl ” ʼ z w OW” fl 6CD ”C S aS O V Y S RWʼ z w l O N O S OW” fl CYS aS O”@:ʼ fl CY V S c” z

Ya EO S S O S DOMYWWO N SY Ec OWe BkS O 9 V SY Y CY V S c3 S OW C S aS O” ʼ z q z r i cOB O M MB FOB km o W 1

@ S V CY O SY E W VS PY EV O 6 NS 2B BM FTBA F B M - AFO x VY ʼ Oa N z z z x ʼ fl z ”EV O” p ” x BR MAr o rs x EV O” p ʼy W ʼ

DOPO O MO • D9H95? IY U RY ()12 R 2 S O & YY VO&MYW SOa O O V ()1 RYWO • @ S V CY O SY E W VS PY RO EV O 6 NS & @ S 8SW UY Y VY ASUY HV S N FY c OL & '% $(%)+$), )$)'$) %$"% $)%$'$%$') - "$)"" $ ()1& • 8O S S G O N 7Y O OMSgM DOa N PY 7Y Ob V 6 NS & C YVY 8 Y O DS R LR @OR Y N @Y S ? VW & '% $(%)$)'$) %$"%'" %$'$ ()1& • Ya EO S S O S DOMYWWO N SY Ec OWe BkS O 9 V SY Y CY V S c3 5WS NSNS OT N 7 S @ MNY VN N NR B S & ,( %'!(%&%$ $%'#$)$%*() () #)%'(%' %##$) %$ ()1& • 7Y O P M V 7 Y H VSN SY & J E S Y N ERY J S& ,( %'!(%&%$ $%'#$)$ %*() () #)%'(%'%##$) %$ ()1& • @O SM 9 OWO iDOMYWWO NO i& %*$ "#*( EOOL ##RRR FAB E MB BO# KP F #B D DB B O BOMF@ A MB@K B ABM