Slides used at the Asian CHI Symposium 2020 and modified a bit after the talk.
(B[F#BTFE4FMG$POpEFODF&TUJNBUJPOPO .VMUJQMF$IPJDF2VFTUJPOTBOE*UT'FFECBDL4IPZB*TIJNBSV 5BLBOPSJ.BSVJDIJ ,PJDIJ,JTFBOE"OESFBT%FOHFM(FSNBO3FTFBSDI$FOUFSGPS"SUJpDJBM*OUFMMJHFODF %',* (SBEVBUF4DIPPMPG&OHJOFFSJOH 0TBLB1SFGFDUVSF6OJWFSTJUZ
View Slide
.PUJWBUJPO*NQSPWJOHUIF1FSGPSNBODFPGB-FBSOFS
.PUJWBUJPO*NQSPWJOHUIF1FSGPSNBODFPGB-FBSOFS-FDUVSFUFYUCPPL
.PUJWBUJPO*NQSPWJOHUIF1FSGPSNBODFPGB-FBSOFS-FDUVSFUFYUCPPL 2VFTUJPOT UFTU
.PUJWBUJPO*NQSPWJOHUIF1FSGPSNBODFPGB-FBSOFS-FDUVSFUFYUCPPL 2VFTUJPOT UFTU 3FWJFX
.PUJWBUJPO*NQSPWJOHUIF1FSGPSNBODFPGB-FBSOFS-FDUVSFUFYUCPPL 2VFTUJPOT UFTU 3FWJFX8IJDIRVFTUJPOTIPVMECFSFWJFXFEDBSFGVMMZ QSJPSJUZ MFBLBHF
,FZ*EFB$POpEFODF"XBSF-FBSOJOH"TTJTUBOU
,FZ*EFB$POpEFODF"XBSF-FBSOJOH"TTJTUBOU$PSSFDU*ODPSSFDU
,FZ*EFB$POpEFODF"XBSF-FBSOJOH"TTJTUBOU$PSSFDU*ODPSSFDU$POpEFOU6ODPOpEFOU
,FZ*EFB$POpEFODF"XBSF-FBSOJOH"TTJTUBOU$PSSFDU*ODPSSFDU$POpEFOU6ODPOpEFOU .VMUJQMF$IPJDF2VFTUJPO
(B[F#BTFE4FMG$POpEFODF&TUJNBUJPO
(B[F#BTFE4FMG$POpEFODF&TUJNBUJPO%FDJTJPOXJUIDPOpEFODF
(B[F#BTFE4FMG$POpEFODF&TUJNBUJPO%FDJTJPOXJUIDPOpEFODF %FDJTJPOXJUIPVUDPOpEFODF
(B[F#BTFE4FMG$POpEFODF&TUJNBUJPO• IBTCFFOPSJHJOBMMZQSPQPTFECZ:BNBEBFUBM%FDJTJPOXJUIDPOpEFODF %FDJTJPOXJUIPVUDPOpEFODF>,:BNBEB ,,JTF BOE0"VHFSFBV&TUJNBUJPOPGDPOpEFODFCBTFEPOFZFHB[FBOBQQMJDBUJPOUPNVMUJQMFDIPJDFRVFTUJPOT*O1SPD6CJ$PNQ"EKVODUQQr
(B[F#BTFE4FMG$POpEFODF&TUJNBUJPO• IBTCFFOPSJHJOBMMZQSPQPTFECZ:BNBEBFUBM• 8FJNQMFNFOUUIJTJEFBBTBXPSLJOHTZTUFNBOE FWBMVBUFIPXNVDIEPFTJUJNQSPWFMFBSOJOHQFSGPSNBODFT%FDJTJPOXJUIDPOpEFODF %FDJTJPOXJUIPVUDPOpEFODF>,:BNBEB ,,JTF BOE0"VHFSFBV&TUJNBUJPOPGDPOpEFODFCBTFEPOFZFHB[FBOBQQMJDBUJPOUPNVMUJQMFDIPJDFRVFTUJPOT*O1SPD6CJ$PNQ"EKVODUQQr
3FTFBSDI)ZQPUIFTFT
• 3)2VFTUJPOTBOTXFSFEDPSSFDUMZXJUIPVUDPOpEFODFUFOEUPCFGPSHPUUFODPNQBSFEUPLOPXMFEHFXJUIDPOpEFODF3FTFBSDI)ZQPUIFTFT
• 3)2VFTUJPOTBOTXFSFEDPSSFDUMZXJUIPVUDPOpEFODFUFOEUPCFGPSHPUUFODPNQBSFEUPLOPXMFEHFXJUIDPOpEFODF• 3)2VFTUJPOTBOTXFSFEJODPSSFDUMZXJUIDPOpEFODFUFOEUPCFNJTUBLFOBHBJODPNQBSFEUPXSPOHLOPXMFEHFXJUIPVUDPOpEFODF3FTFBSDI)ZQPUIFTFT
• 3)2VFTUJPOTBOTXFSFEDPSSFDUMZXJUIPVUDPOpEFODFUFOEUPCFGPSHPUUFODPNQBSFEUPLOPXMFEHFXJUIDPOpEFODF• 3)2VFTUJPOTBOTXFSFEJODPSSFDUMZXJUIDPOpEFODFUFOEUPCFNJTUBLFOBHBJODPNQBSFEUPXSPOHLOPXMFEHFXJUIPVUDPOpEFODF• 3)&TUJNBUJOHTFMGDPOpEFODFGSPNMFBSOJOHCFIBWJPSTBOEHJWJOHGFFECBDL FH BEEJOHRVFTUJPOTUPBSFWJFXMJTU IJHIMJHIUJOHUIFNXIJMFSFWJFXJOHBWPJETTVDITDFOBSJPT3FTFBSDI)ZQPUIFTFT
%FNP
4ZTUFN0WFSWJFX
4ZTUFN0WFSWJFX1SFQSPDFTTJOH pYBUJPOTBDDBEFEFUFDUJPO
4ZTUFN0WFSWJFX1SFQSPDFTTJOH pYBUJPOTBDDBEFEFUFDUJPO'FBUVSFDBMDVMBUJPO
4ZTUFN0WFSWJFX1SFQSPDFTTJOH pYBUJPOTBDDBEFEFUFDUJPO'FBUVSFDBMDVMBUJPO8FVUJMJ[FUIFGPMMPXJOHpWFFGGFDUJWFGFBUVSFTTFMFDUFECZ'PSXBSETUFQXJTFGFBUVSFTFMFDUJPO GTVNPGpYBUJPOEVSBUJPOTPO$IPJDFT GWBSJBODFPGYDPPSEJOBUFPGpYBUJPOT GUIFOVNCFSPGTBDDBEFTCFUXFFODIPJDFBSFBT GTVNPGTBDDBEFEVSBUJPOT GSFBEJOHUJNF
4ZTUFN0WFSWJFX• #JOBSZDMBTTJpDBUJPO• 4VQQPSU7FDUPS.BDIJOF 47.• 3#'LFSOFM $ Ѝ1SFQSPDFTTJOH pYBUJPOTBDDBEFEFUFDUJPO'FBUVSFDBMDVMBUJPO $MBTTJpDBUJPO8FVUJMJ[FUIFGPMMPXJOHpWFFGGFDUJWFGFBUVSFTTFMFDUFECZ'PSXBSETUFQXJTFGFBUVSFTFMFDUJPO GTVNPGpYBUJPOEVSBUJPOTPO$IPJDFT GWBSJBODFPGYDPPSEJOBUFPGpYBUJPOT GUIFOVNCFSPGTBDDBEFTCFUXFFODIPJDFBSFBT GTVNPGTBDDBEFEVSBUJPOT GSFBEJOHUJNF
&YQFSJNFOUBM%FTJHO
&YQFSJNFOUBM%FTJHO• 1BSUJDJQBOUT BHF
&YQFSJNFOUBM%FTJHO• 1BSUJDJQBOUT BHF• &ZFUSBDLFS5PCJJ$)[
&YQFSJNFOUBM%FTJHO• 1BSUJDJQBOUT BHF• &ZFUSBDLFS5PCJJ$)[• 2VFTUJPOT&OHMJTIHSBNNBS
&YQFSJNFOUBM%FTJHO• 1BSUJDJQBOUT BHF• &ZFUSBDLFS5PCJJ$)[• 2VFTUJPOT&OHMJTIHSBNNBS• 1SPDFEVSFT
&YQFSJNFOUBM%FTJHO• 1BSUJDJQBOUT BHF• &ZFUSBDLFS5PCJJ$)[• 2VFTUJPOT&OHMJTIHSBNNBS• 1SPDFEVSFT• 5IFTUEBZ5SJBMBOEQSFUFTU
&YQFSJNFOUBM%FTJHO• 1BSUJDJQBOUT BHF• &ZFUSBDLFS5PCJJ$)[• 2VFTUJPOT&OHMJTIHSBNNBS• 1SPDFEVSFT• 5IFTUEBZ5SJBMBOEQSFUFTU• 5IFSEEBZ3FWJFX *ODPSSFDUDPSSFDUXJUIPVUDPOpEFODF
&YQFSJNFOUBM%FTJHO• 1BSUJDJQBOUT BHF• &ZFUSBDLFS5PCJJ$)[• 2VFTUJPOT&OHMJTIHSBNNBS• 1SPDFEVSFT• 5IFTUEBZ5SJBMBOEQSFUFTU• 5IFSEEBZ3FWJFX *ODPSSFDUDPSSFDUXJUIPVUDPOpEFODF• 5IFUIEBZ1PTUUFTU
&YQFSJNFOUBM%FTJHO• 1BSUJDJQBOUT BHF• &ZFUSBDLFS5PCJJ$)[• 2VFTUJPOT&OHMJTIHSBNNBS• 1SPDFEVSFT• 5IFTUEBZ5SJBMBOEQSFUFTU• 5IFSEEBZ3FWJFX *ODPSSFDUDPSSFDUXJUIPVUDPOpEFODF• 5IFUIEBZ1PTUUFTU• 5IFDMBTTJpFSXBTQSFMJNJOBSZCVJMUXJUIBOPUIFSQBSUJDJQBOUT
%JWJOH"OTXFSTJOUP&YQFSJNFOUBMBOE$POUSPM(SPVQT(1) corr. w/ conf.53.5%(2a) corr. w/o conf.5.6%(2b) corr. w/o conf. > feedback5.1%(3) incorr. w/o conf.5.1%(4a) incor. w/ conf.16.5%(4b) incorr. w/ conf. > feedback14.1%%BUBDPSSFDUFEBUUIFQSFUFTU
%JWJOH"OTXFSTJOUP&YQFSJNFOUBMBOE$POUSPM(SPVQT(1) corr. w/ conf.53.5%(2a) corr. w/o conf.5.6%(2b) corr. w/o conf. > feedback5.1%(3) incorr. w/o conf.5.1%(4a) incor. w/ conf.16.5%(4b) incorr. w/ conf. > feedback14.1%PGDPSSFDUBOTXFST XJUIPVUDPOpEFODFXFSF JODMVEFEJOUIFSFWJFX%BUBDPSSFDUFEBUUIFQSFUFTU
%JWJOH"OTXFSTJOUP&YQFSJNFOUBMBOE$POUSPM(SPVQT(1) corr. w/ conf.53.5%(2a) corr. w/o conf.5.6%(2b) corr. w/o conf. > feedback5.1%(3) incorr. w/o conf.5.1%(4a) incor. w/ conf.16.5%(4b) incorr. w/ conf. > feedback14.1%PGDPSSFDUBOTXFST XJUIPVUDPOpEFODFXFSF JODMVEFEJOUIFSFWJFXPGJODPSSFDUBOTXFST XJUIDPOpEFODFXFSF IJHIMJHIUFEBUUIFSFWJFX%BUBDPSSFDUFEBUUIFQSFUFTU
&YQFSJNFOUBM3FTVMUT B CDPSSXDPOGBDPSSXPDPOGCDPSSXPDPOGGFFECBDL B C JODPSSXPDPOGBJODPSXDPOGCJODPSSXDPOGGFFECBDL5IFNFBOPGDPSSFDUBOTXFSSBUFT BNPOHQBSUJDJQBOUTBUUIFQPTUUFTU
&YQFSJNFOUBM3FTVMUT B CDPSSXDPOGBDPSSXPDPOGCDPSSXPDPOGGFFECBDL B C JODPSSXPDPOGBJODPSXDPOGCJODPSSXDPOGGFFECBDL• 5IFSBUJPPG BDPSSFDUBOTXFSTXJUIPVUDPOpEFODFXBTESPQQFEDPNQBSFEUPBOTXFSTXJUIDPOpEFODF Q5IFNFBOPGDPSSFDUBOTXFSSBUFT BNPOHQBSUJDJQBOUTBUUIFQPTUUFTU
&YQFSJNFOUBM3FTVMUT B CDPSSXDPOGBDPSSXPDPOGCDPSSXPDPOGGFFECBDL B C JODPSSXPDPOGBJODPSXDPOGCJODPSSXDPOGGFFECBDL• 5IFSBUJPPG BDPSSFDUBOTXFSTXJUIPVUDPOpEFODFXBTESPQQFEDPNQBSFEUPBOTXFSTXJUIDPOpEFODF Q• "OTXFSTXJUIPVUDPOpEFODFUFOEUPCFGPSHPUUFOJOUIFOFBSGVUVSF5IFNFBOPGDPSSFDUBOTXFSSBUFT BNPOHQBSUJDJQBOUTBUUIFQPTUUFTU
&YQFSJNFOUBM3FTVMUT B CDPSSXDPOGBDPSSXPDPOGCDPSSXPDPOGGFFECBDL B C JODPSSXPDPOGBJODPSXDPOGCJODPSSXDPOGGFFECBDL• 5IFSBUJPPG BDPSSFDUBOTXFSTXJUIPVUDPOpEFODFXBTESPQQFEDPNQBSFEUPBOTXFSTXJUIDPOpEFODF Q• "OTXFSTXJUIPVUDPOpEFODFUFOEUPCFGPSHPUUFOJOUIFOFBSGVUVSF• 5IFQFSGPSNBODFPG CIJHIMJHIUFEBTJODPSSFDUXJUIDPOpEFODFXBTIJHIFSUIBO BXPIJHIMJHIU Q5IFNFBOPGDPSSFDUBOTXFSSBUFT BNPOHQBSUJDJQBOUTBUUIFQPTUUFTU
&YQFSJNFOUBM3FTVMUT B CDPSSXDPOGBDPSSXPDPOGCDPSSXPDPOGGFFECBDL B C JODPSSXPDPOGBJODPSXDPOGCJODPSSXDPOGGFFECBDL• 5IFSBUJPPG BDPSSFDUBOTXFSTXJUIPVUDPOpEFODFXBTESPQQFEDPNQBSFEUPBOTXFSTXJUIDPOpEFODF Q• "OTXFSTXJUIPVUDPOpEFODFUFOEUPCFGPSHPUUFOJOUIFOFBSGVUVSF• 5IFQFSGPSNBODFPG CIJHIMJHIUFEBTJODPSSFDUXJUIDPOpEFODFXBTIJHIFSUIBO BXPIJHIMJHIU Q• 'FFECBDLTVDDFFEFEUPJNQSPWFUIFNFBODPSSFDUBOTXFSSBUF5IFNFBOPGDPSSFDUBOTXFSSBUFT BNPOHQBSUJDJQBOUTBUUIFQPTUUFTU
• 3)2VFTUJPOTBOTXFSFEDPSSFDUMZXJUIPVUDPOpEFODFUFOEUPCFGPSHPUUFODPNQBSFEUPLOPXMFEHFXJUIDPOpEFODF• 5SVF FWBMVBUFECZUIFDPNQBSJTPOCFUXFFOBOEB• 3)2VFTUJPOTBOTXFSFEJODPSSFDUMZXJUIDPOpEFODFUFOEUPCFNJTUBLFOBHBJODPNQBSFEUPXSPOHLOPXMFEHFXJUIPVUDPOpEFODF• /PUBMXBZTUSVF FWBMVBUFECZUIFDPNQBSJTPOCFUXFFOBOEB• 3)&TUJNBUJOHTFMGDPOpEFODFGSPNMFBSOJOHCFIBWJPSTBOEHJWJOHGFFECBDL FH BEEJOHRVFTUJPOTUPBSFWJFXMJTU IJHIMJHIUJOHUIFNXIJMFSFWJFXJOHBWPJETTVDITDFOBSJPT• 5SVF FWBMVBUFECZUIFDPNQBSJTPOCFUXFFOBBOEC"OTXFSTUPUIF3FTFBSDI)ZQPUIFTFT B CDPSSXDPOGBDPSSXPDPOGCDPSSXPDPOGGFFECBDL B C JODPSSXPDPOGBJODPSXDPOGCJODPSSXDPOGGFFECBDL
$PODMVTJPOBOE'VUVSF8PSL
• 8FIBWFEFNPOTUSBUFE$POpEFODF"XBSF-FBSOJOH"TTJTUBOU XIJDINFBTVSFTUIFTFMGDPOpEFODFPGMFBSOFSTGSPNUIFJSFZFNPWFNFOUTBOEOBWJHBUFTUIFNUPSFWJFXDSJUJDBMRVFTUJPOT$PODMVTJPOBOE'VUVSF8PSL
• 8FIBWFEFNPOTUSBUFE$POpEFODF"XBSF-FBSOJOH"TTJTUBOU XIJDINFBTVSFTUIFTFMGDPOpEFODFPGMFBSOFSTGSPNUIFJSFZFNPWFNFOUTBOEOBWJHBUFTUIFNUPSFWJFXDSJUJDBMRVFTUJPOT• $PSSFDUBOTXFSSBUFTPGRVFTUJPOTXFSFJODSFBTFECZBOE CZHJWJOHGFFECBDLBCPVUDPSSFDUBOTXFSTXJUIPVUDPOpEFODF BOEJODPSSFDUBOTXFSTXJUIDPOpEFODF SFTQFDUJWFMZ$PODMVTJPOBOE'VUVSF8PSL
• 8FIBWFEFNPOTUSBUFE$POpEFODF"XBSF-FBSOJOH"TTJTUBOU XIJDINFBTVSFTUIFTFMGDPOpEFODFPGMFBSOFSTGSPNUIFJSFZFNPWFNFOUTBOEOBWJHBUFTUIFNUPSFWJFXDSJUJDBMRVFTUJPOT• $PSSFDUBOTXFSSBUFTPGRVFTUJPOTXFSFJODSFBTFECZBOE CZHJWJOHGFFECBDLBCPVUDPSSFDUBOTXFSTXJUIPVUDPOpEFODF BOEJODPSSFDUBOTXFSTXJUIDPOpEFODF SFTQFDUJWFMZ• 'VUVSFXPSL$PODMVTJPOBOE'VUVSF8PSL
• 8FIBWFEFNPOTUSBUFE$POpEFODF"XBSF-FBSOJOH"TTJTUBOU XIJDINFBTVSFTUIFTFMGDPOpEFODFPGMFBSOFSTGSPNUIFJSFZFNPWFNFOUTBOEOBWJHBUFTUIFNUPSFWJFXDSJUJDBMRVFTUJPOT• $PSSFDUBOTXFSSBUFTPGRVFTUJPOTXFSFJODSFBTFECZBOE CZHJWJOHGFFECBDLBCPVUDPSSFDUBOTXFSTXJUIPVUDPOpEFODF BOEJODPSSFDUBOTXFSTXJUIDPOpEFODF SFTQFDUJWFMZ• 'VUVSFXPSL• %FTJHOJOHCFUUFSGFFECBDL$PODMVTJPOBOE'VUVSF8PSL
• 8FIBWFEFNPOTUSBUFE$POpEFODF"XBSF-FBSOJOH"TTJTUBOU XIJDINFBTVSFTUIFTFMGDPOpEFODFPGMFBSOFSTGSPNUIFJSFZFNPWFNFOUTBOEOBWJHBUFTUIFNUPSFWJFXDSJUJDBMRVFTUJPOT• $PSSFDUBOTXFSSBUFTPGRVFTUJPOTXFSFJODSFBTFECZBOE CZHJWJOHGFFECBDLBCPVUDPSSFDUBOTXFSTXJUIPVUDPOpEFODF BOEJODPSSFDUBOTXFSTXJUIDPOpEFODF SFTQFDUJWFMZ• 'VUVSFXPSL• %FTJHOJOHCFUUFSGFFECBDL• "QQMZJOHUPEJGGFSFOURVFTUJPOGPSNBUT$PODMVTJPOBOE'VUVSF8PSL