Oliver Weidlich - Designing Experiences for the Augmented Human

Since the earliest tools humans have been augmenting their capability with technology. In the modern era we are starting to mainstream digital enhancement of our capabilities in new and interesting ways. Oliver will explore the areas of Augmented Reality, Intelligent Agents and the Internet of Things and how the combinations of these can create powerful experiences.

Transcript

1. N e ha hi i a edi ed a c i f a li e e e a d he ef e ma c ai e . Thi a c i
   i he j i e f Ca i LIVE a d he a h i ed a e ible f a me a d ma be
   c ied ed b a he a i h a h i a i .
   www captionslive com au | captionslive outlook com |
   UX A a ia
   UX A a ia 2021
   Da 1
   T e da , 24 A g 2021
   Ca i ed b : T ac Ball
   

   View Slide

2. N e ha hi i a edi ed a c i f a li e e e a d he ef e ma c ai e . Thi a c i
   i he j i e f Ca i LIVE a d he a h i ed a e ible f a me a d ma be
   c ied ed b a he a i h a h i a i .
   Page 26
   i h ha f e g a d all f he di ad a age ha c e i h
   ha f he e ac all ha e a i cha ge ha . I
   add e i g cli a e cha ge e ha e a i ed e ha
   i e ali igh h gh cie a d e, a d I, ca ab l el
   la a a i h ha ha e .
   Tha ' he i f de ig a d I d ' hi k he eed f
   de ig ha e e bee g ea e . I al d ' hi k he i f
   de ig ha e e bee g ea e . I h e like e ill e b ace ha
   i a d a d i e ha e ial cha ge h gh
   c i ie a d h gh cie ie . I ha k e ch f
   li e i g. A d I h e ill j i e i ha la . Tha k e ch.
   I eed cha ge ha . I ill a e f a i e. Wha e be
   d i g e i f Oli e Wei lich, f M bile E e ie ce. He i i
   S d e i l ckd a d like a a f S d e i bei g ai ed
   hich i killi g hi i e e c ec i i . S li e - igh I' e j bee ld
   ha Oli e ha a aged abili e hi i e e . I a g i g a e
   a e g i g la a e- ec ded e i f hi alk b he i li e. S
   Ala , ha k ch f d i g ha . Ma , ha k f d i g ha . A d
   if I c ld ee Oli e a d e ill a g db e Ma , e ca ge a ed.
   I ee Oli e .
   OLIVER WEIDLICH: I' li e. I' eal. De i e he ai , le ' h e he
   fib e a . Tha k f a e i i i g alk. G ea a a he
   c fe e ce a d he cha a e g i g ff. B illia . I ill f c e ake a
   c le el diffe e ack a d g alk ab all he ech l g a d ha
   f ff. I ha al igh ?
   STEVE BATY: Tha ' a bea if l hi g. Tha k f j i a d I ill ha d
   e .
   

   View Slide

3. N e ha hi i a edi ed a c i f a li e e e a d he ef e ma c ai e . Thi a c i
   i he j i e f Ca i LIVE a d he a h i ed a e ible f a me a d ma be
   c ied ed b a he a i h a h i a i .
   Page 27
   OLIVER WEIDLICH: I he i i f he ec cilia i I de a d he
   adi i al c dia f c h gh A alia a d c ec i
   la d ea a d c i a d a e ec elde a a d e e
   a d e e d ha all Ab igi al a d T e S ai I la de e le
   da . F h e h a k e a e i Oli e Wei lich I'
   he di ec f de ig a d i a i a M bile E e ie ce a d da ha
   I ill be alki g ab i de ig i g f he a g e ed h a . Thi i a
   di c i a d e l i g a ial c i g a d ha I ee a e e a
   i h a c e i e ac i a d e ch f c ed he ech l g
   ide f he hi g e ill di c a UX A alia.
   S da e ill alk h gh h ee hi g . The fi e i
   a g e i g h a a d h ha ' ha e i g e he la 10,000 ea
   . Ob i l j a a . S e ill fl h gh ha . The e
   ill alk ab ha i a ial c i g a d a c le f c e a ec a d
   ele e f ha . A d ha I hi k i i e e i g a d h e ha e bee
   de ig i g a ec i . The f c e a he e d e ill alk ab h
   d e b i g all he e hi g ge he i e i gle e e ie ce. Tha e
   ca e able a h le e a ge f i e ac i .
   S le ' g back i i e a d l k a h h a ha e a g e ed
   hei ca abili ie e he ea a d f c e a i g i h fi e a d i g
   fi e c k f d, a d idi g a diffe e le el f i i f
   b ai a d a h le diffe e e l i a c af f h a bei g . We a e
   ab 5,000 ea ag e c ea ed he heel. Reall ha d hi g.
   G d ge hi g d e. G ea bjec . A d f c e ab 80 ea ag
   , e had he g f c g i i e cie i h kicked ff he h le
   field f e g ic a he e e e l i g h e le i e ac ed il i
   a ic la b i l i e ac ed i h ai c l e a d ha
   ha d a e.
   

   View Slide

4. N e ha hi i a edi ed a c i f a li e e e a d he ef e ma c ai e . Thi a c i
   i he j i e f Ca i LIVE a d he a h i ed a e ible f a me a d ma be
   c ied ed b a he a i h a h i a i .
   Page 28
   A d f c e he ad e f he c e , a d he e big h ge
   c e ha k he h le a d had a e high e e
   le el - eeded a e high e e le el f k ledge i e ac i h he
   ia ch ca d . The c e g alle , e had he e
   diffe e - diffe e e f i e ac i , e c ld b i g he e c e
   h e a d h e c e a i e ed. We had he C a d li e
   deal i h a d i e ac i h. A d he e had he g a hic e
   i e face. A d he e added ha he i e e . A d e e ked
   he e c e ge he , e c ea ed c ica i cha el a d ea
   eal i e i f a i , ha c ld be ha ed a d he gl be. A d ha
   a a he e al hi g. The e k h e hi g . We k he
   c e a d i e e a d he i a li le de ice e c ld ca
   a he e i h a d eall cha ged he e f hi g e c ld d b
   ha i g ha i f a i ha d, a d bei g i he fl f k. The
   hi g e c ld d e e - a d c ai ed a de k.
   A d . S ha c ea ed a eal cha ge a d agai g i g f ha
   ch ca d he C a d li e i h he ke b a d he G e i h he
   e he a h e i h he ch i e ac i , e di ec
   a i la i , ia a c ee b i l , a d e ha e g e e alle
   de ice hich a e a ached all he i e, he he ha ' a a ch a
   i g, ha ca de ec i f a i l a d b al i ide .
   S hea a e a d he bi e ic i f a i . S hi a f
   a g e i g ha e ca d a d i g c i g hel e he la
   b ch f ea ha eall cha ged h e i e ac i h each he a
   e le a d al h e ca be e de a d el e a d .
   N e ill alk ab a ial c e . A d he e i a g ea b k
   called ' he i e e Re i a" ha ca e la ea a d i eall f
   alk ab hi h le e e a f c i g. A d eall i i alki g ab
   h e c bi e a a ge f hi g b i g a e le el f i e ac i
   

   View Slide

5. N e ha hi i a edi ed a c i f a li e e e a d he ef e ma c ai e . Thi a c i
   i he j i e f Ca i LIVE a d he a h i ed a e ible f a me a d ma be
   c ied ed b a he a i h a h i a i .
   Page 29
   be ee he h ical ld ha ' he e all a d , a d he digi al
   ld hich e a UXe ha e bee ed de ig i g a d i g
   de a d. A d e f he hi g I hi k he lef ff hi de c i i
   hich I ha e a li le adde d i ake hi a e a al
   e e ie ce. S he - e abli g a ial c i g i - h ld e ha ce he
   a e ca - h gh a al e i e face e gage i h he ld
   a d a d a g e ed eali a d hi g like ha . S ha i a ial
   c i g? Well, e a e g i g c e e e hi g da b i i
   hi g like i e e f hi g , i i c e a i al UI i h a i ellige
   age , i i a ificial i ellige ce, i i c e i i , a d all f he e
   bi . I ' he a g e ed - he AR cl d, he digi i a i f he eal
   ld a d . A d i ' hi g like ea able , AI gla e , head h e ,
   hi g like ha hich ill e able i e ac i h ha i e ac i la e .
   S da e ill alk h gh a c le f hi g eall f ke
   a ec . The IOT, i ellige age , AI cl d a d AI gla e . Thi i a
   e e he de ig i g h e e e ie ce .
   I e f i e e f hi g , f a l g i e, he la 10 ea e
   ha e bee alki g ab e ed de ice , he e li le de ice ca c ec
   he i e e , he cl d, e i e ia a bile de ice, e i e
   di ec l h gh a al e a i e i e e c ec i . B h he
   c bi e c ea e a c i e e ie ce f i diffe e a . Tha
   be e de a d e i e . A d e' e had he i
   k a a ge f jec f a - jec ha g b e a he
   Z ich i a i a a d gl ball , called S ldie l hich de ec bi e ic
   i f a i h gh a a a ch a Fi Bi , a d i f e le a
   e e a h ha e a a ic e di de . A d he ai i
   de ec he e f ha PTSD e i de a d ha e ha bi e ic
   i f a i i h a de ice hich ca he c e , he d a d a
   b ea hi g e e ci e, a edi a i ? O d e eed ge e e ge c
   

   View Slide

6. N e ha hi i a edi ed a c i f a li e e e a d he ef e ma c ai e . Thi a c i
   i he j i e f Ca i LIVE a d he a h i ed a e ible f a me a d ma be
   c ied ed b a he a i h a h i a i .
   Page 30
   e ice ba ed he e e i f ha PTSD i cide . S ha i a
   IOT de ice ha ' l ki g i ide . A d de a di g a ec f .
   We ha e ked jec like he ea able e e i e Nada
   ga a hich a e he ide b i l a d ha e e
   e h gh he a d ha ic feedback ai , k ee a d a kle
   de ec he e he h a b d i h e igh a i i lace li le
   ha ic e k ee i a bi a e all alig ed he a e
   d i g d a d d g ha e e i igh be. S ha ' ide he
   b d . O ide f , h d e be e de a d he he hi g ha
   e i e ac i h? S e ha e ked i h jec like G fa . L ki g a
   ha i f a i ca e ge f he ca ha ca i f a a d i e .
   S hi li le ligh i he da hb a d a d ba ed he i e i f
   b aki g accele a i g e ca gi e i al i dica . If e ca ge
   d i e be e he ha i e he e i e beca e he e i
   le ca b e i i , he e i le ea a d ea he ca , e le
   f el, e ce e a, e ce e a.
   S , agai , c ec i g a he de ice bjec ide f .
   A d he e ha e d e jec like f he ield he e e ac all
   hel i g fa e be e de a d hei ic cli a e . S i g a IOT
   e i he fa e ca gi e he i f a i ab he he i i
   il i e igh h gh i d di ec i , a d e e a e a d .
   F a a ic la a cel f la d. The igh ha e i e a d ha g b h
   ide f a hill a ge e al ea he i f a i d e ' hel b if ca
   alk ab a a ic la i e a d a ic la ide f he hill ha ca
   i e d c i i a d i e ield a d ake e e efficie
   a d hi g like a e i g, i iga i a d a i g a d .
   A d f c e a l f he e IOT de ice a e i h e . Thi
   i a e a le I ha e alked ab bef e a ell, he e i h e e
   ha e g i e ha 7- ea - ld ha a e hi d , a d
   

   View Slide

7. N e ha hi i a edi ed a c i f a li e e e a d he ef e ma c ai e . Thi a c i
   i he j i e f Ca i LIVE a d he a h i ed a e ible f a me a d ma be
   c ied ed b a he a i h a h i a i .
   Page 31
   af e 8.30 . . a d bef e 7a. . if he ha e e ha d he a
   ligh bed ide able 17% bl e. S he he i
   like hi i g i h he he i kicked i he ca ee a d
   be a a e f a d e ge a bi f a he Ma i ab i . P babl
   ' k a ell he he i 16 18 b le ' ee h ha g e . The
   ai ai i e a e a i g c ea e h e e ai ea
   de ice ha ca e ha ce abili ie b al he i f a i ha e
   igh a f e i e .
   A c le f ea ag i De e I a a a a i g jec he e
   hi ea a ki g a chi ha a l ki g a he elec ag e ic
   ec a d de a di g a e did ' ha e ai i a d each i
   ha a de ice a , c ld he ac clea e a d i ld
   ee a cha ge i he elec ag e ic ec . We a e a i g ake
   i f a i f e i e , i g i a a c f i g e e ie ce
   a d i f a i a d e ial i e ac i . Whe he ha e A d id
   iPh e ca ac all e able i de ec d , hi g like a
   fi e - fi e ala , a ke ala i h e, a d he ef e igge
   a a i like a be a ligh ed a d fla h. Thi g like
   ha . Ma be i ' a bab c i g. If a e i a he f he h e i
   ca i f f hi g like ha . Thi ff i bec i g ai ea .
   IOT, he de ice , he e ice , he a e f e e da e e ,
   e e b d i i g he b he a e ge i g he e.
   A d he he e i i ellige age . A d Oc be hi ea i
   ac all he 10 h a i e a f he Si i a la ched he a
   a ke he iPh e 4 S a d eall kicked ff a h le chai f e e
   a d chai f de ice a ca ee he c ee f i ellige age
   f Si i G gle a i a Ale a a d C a a. All f he e ha e e
   diffe e a f i e ac i g. A d e eed kee ha i i d he e
   a e de ig i g he e de ice , ca ee he A le ec e he e, a d
   

   View Slide

8. N e ha hi i a edi ed a c i f a li e e e a d he ef e ma c ai e . Thi a c i
   i he j i e f Ca i LIVE a d he a h i ed a e ible f a me a d ma be
   c ied ed b a he a i h a h i a i .
   Page 32
   i ke Si i he e e e diffe e i e ac i e h d i h diffe e
   i e ac i de ice a d f c e he i diffe e a ell. S e f
   he ha e c ee , e d ' . All e f diffe e i e ac i . We a
   i e ac i de ig e eed be a a e f he e a a f he e all
   a ial c i g e e ie ce.
   We ha e had he i a bile e e ie ce k a
   i ellige age jec f e le i h Ce eb al Pal . A d hel he
   gai e i de e de ce b eedi g a ca e a ch, a d bei g able
   de a d ha e be e i igh i he hi g he eed d
   d i g he da a d he a ec f a d c ica i .
   A d ha ' a eall g ea e able .
   The e i e jec ha I eall a ed e i . The
   i ellige ce a lifie b B a R e ele if ha e ' ee i hi check
   i . U all I ha e a ide b hi ill be a igh alk a i i . A i ha
   all he i f a i ca ee he e he lef -ha d ide f he lide.
   A d i i ba icall hi a i a ha l k a hi a ic la i e e a d
   i f a i . S i ill ca hi T i e feed, he bi ha a e
   i a f hi a d c e ha h gh c e a i al UI a d he ca
   ha e he i e ac i a k ha igh ha e j ha e ed, ha he
   h ld k ab . A d i eall di il hi g f hi . A d I hi k hi
   e al i ellige age , I hi k ill be c i ical. Whe e e
   da a, ha i ha acce i di id al da a, a d e al da a, b
   i i ha ed i h ece a il i h a gia c a i .
   The he e i a g e ed eali a d AR bile e ha e e e hi g
   f i le h i g ff a d a l f AR a he e i a ke i g ia
   l ki g h gh a bile h e b i l a d he e ha bee f
   ig ifica be efi ha f a a ke i g a d a c e cial
   e ec i e. B e f l k a he b ade a ec f hi g a d hi
   i a A alia c a called Jig S ace h i g a g e ed eali
   

   View Slide

9. N e ha hi i a edi ed a c i f a li e e e a d he ef e ma c ai e . Thi a c i
   i he j i e f Ca i LIVE a d he a h i ed a e ible f a me a d ma be
   c ied ed b a he a i h a h i a i .
   Page 33
   e ha ce lea i g a d b i g hi g i f f e le a d all i g
   he i e ac i diffe e a e ha e a e e gaged e e ie ce f
   lea i g. A d e ha ced. A d e ha e l k a a i ele e f ha f
   hi g like g i g he beach a d h ca e e ha ce ha e e ie ce
   h gh a bile AR le .
   We ha e e e d i B di i h Cha le Chla ha d i g
   e ea ch h e le i e ac i h he e e i e a d h d he
   e e k ha e hi g i he e ha he e i a a g e ed eali
   e e ie ce e gage i h? S , e ha e l ked a he h le e
   j e a d ha , f he QR c de e e f igge
   ha eed be he e. Ca e a, i eed ake a eb i e a he
   e a a e, i ' a cl k e j e a d e a e e ec i g
   he e hi g i e e he e c le f ea .
   A d al ha l i- e i e ac i f e e ha i g a
   a g e ed eali e e ie ce h gh a de ice, i h AR c e i a
   e i e i h a ha ed a g e ed eali e e ie ce e e
   eb d h i e gaged i ha AR e e ie ce h d he ha e a
   i e ac i i h he e e le a ell? Th e f f a e k .
   A d e ha e d e jec i h clie a ell f hi e f
   bile edia ed a g e ed eali . B b i l e i he gla e
   a d e ha e g hi g like h ll le , he agic lea gla e a ell.
   M e ece l Faceb k ha e a ed alki g ab hei - Faceb k
   eali lab gla e ha a e g i g be f e ea ch e . B
   de a d ha e le igh a ha e h gh a a g e ed
   eali e e ie ce, ia he e e f gla e , a d S a ece l
   a ced hei a ell.
   N fa hi , a ic la l , b he a I ee he e gla e i
   f like he N kia 7110, a back i he da , he e i a a e i le
   le el f i e e i e ac i , h gh a g ee c ee , h gh a g e
   

   View Slide

10. N e ha hi i a edi ed a c i f a li e e e a d he ef e ma c ai e . Thi a c i
    i he j i e f Ca i LIVE a d he a h i ed a e ible f a me a d ma be
    c ied ed b a he a i h a h i a i .
    Page 34
    c ee . B ha i e abled he i e e a d e abled WAP a a e ba e
    le el.
    The AR cl d hi i he e i e a d h d e digi i e
    he e e f hi g . H d e ie he h ical ld i h a digi al
    i a d he e diffe e la e f i f a i ha e igh ch e
    e gage i h? A d f c e e e e call he e diffe e hi g . We a e
    a he f a i f hi e eciall c i g e a diffe e c a ie
    igh f c diffe e b a ec f hi . O diffe e - call i diffe e
    hi g ha e a ligh l diffe e ie he e hi g . A l f k g
    i d i g hi .
    The ke a ec i he h le i he i g ea e ha he f
    i a . UX de ig e ha e de a d each f he e ech l gie
    a d he ll he e e ie ce ge he . A d ake a c he i e
    e e ie ce a d ha ' he de ig i g e e ie ce. The hi g ha eall
    igge ed hi a eei g i age like hi he e he i e e , igh ,
    f he e e ial gla e ha a e c i g i h j i g UI
    ele e i he iddle f face. A d a UX de ig e l k a hi
    a d g , hi i ' eal, hi i ha he e e ie ce igh be. S ha '
    eall f igge ed i l ki g h d e hi all ge he .
    U de a d he h ical e i e ha i a ic, de a d
    hi g ha a e a h ical e i e ha igh e. U de a d he
    digi al hi g i he h ical e i e a d h he igh
    c ica e. Of c e he e le i ha e i e . The hi g ha
    he igh be ea i g. Whe he he e i gla e a a ch he
    hi g . A d h igh he i e ac h gh c e a i al UI he
    a ec - he i e ac i a ec a d ha . The la e f he e
    e e ie ce. We ha e c e i h a i le f a e k, ifica i ,
    eall ba ic. J ela i f a i ba ed c e . A d bile
    e e ie ce i e c e al. We a e i g de a d ha c e .
    

    View Slide

11. N e ha hi i a edi ed a c i f a li e e e a d he ef e ma c ai e . Thi a c i
    i he j i e f Ca i LIVE a d he a h i ed a e ible f a me a d ma be
    c ied ed b a he a i h a h i a i .
    Page 35
    The e ice la e , f ha . Which a e hi g like I igh be
    alki g a d i h gla e , a d I alk a a ig a
    e a a , a d he h e be i he e a a he ide f
    he b ildi g a d gla e ca de ec ha ' a h e be , da a
    ele e , a d I ca call ha aigh a a . A e i le e ice. S
    c e i i i a e ice. The he e i le e . S hi g like hi .
    Y igh ch e ha e a hi ical le a d l k a d he ld i
    he hi g a d h gh diffe e e i d f i e. Th gh a
    diffe e le f he h ical e i e a d . A d he f
    ha , a lica i . Tha a e e ecific e e ie ce a d ha .
    N , e ha e f d e a h le a ge f hi ki g a d hi
    f he e ba ic hich i c e l bile hich i e i g a GO
    l ca i , ifica i , ha he I g ea l cal h i igge a
    hi g bile. If bile i i cke a d i ' eal ela ed a
    h i he h ical ld ha a be eall ef l. We ha e d e a
    b ch f b a d a d hi e e ie ce a d f e l ed h
    igh hi be diffe e h gh he e e f i e face . A d ha igh
    be e hi g a i le a a a iga i e e ie ce, a de i a i .
    Ne i c i . A d he e a e headi g a d i f a i e bedded
    i he e i e . S e hi g like he eed li i . H ha igh
    cha ge a g f he a d fa e . S he e he e i eedi g
    he ge hi eal i e da e he a e g i g 43, i a 40 e i e .
    A d he I ge cl e Chai h i h e he e i e hi g i
    he h ical ld ha I a ed be e i ded f a d he ha e
    ha e e i a c le f i e .
    S I igh a ge di ec i he e. A d he I igh ee he e
    a e ca ace cl e b beca e e de a d he h ical ld
    a d e de a d ha he e a e ' e le b ked i h e ace ,
    hich e i cl e he h ha I' i g g . Wha igh be
    

    View Slide

12. N e ha hi i a edi ed a c i f a li e e e a d he ef e ma c ai e . Thi a c i
    i he j i e f Ca i LIVE a d he a h i ed a e ible f a me a d ma be
    c ied ed b a he a i h a h i a i .
    Page 36
    he be e a e he be e a ki g i e
    The e g h gh, I k I' g i g e , e ickl ,
    e hi g i ich a d a e i all e gagi g a eddi g la i g
    igh . We igh g al g a d I igh be he eddi g la e a d I ha e
    a b ide a d g i h e be, a d e a e l ki g a he e e a d e
    a e g i g ka h ill i l k i h a i chai , a i i i a d
    ha if e a l k a a da ce fl . H ld he chai a d able
    e a a . I d ' like - he b ide d e ' like he i k he chai
    le ' cha ge ha hi e. Le ' l k a he ea i g la , le ' l k h
    ha la a d e k ha f a el La a a d J h ha e j
    b ke e ha e e he a diffe e able. H d e
    e gage a d h gh ge e a d i e ac i a d eech, he i a
    diffe e i i ha i a be e ef l he a d ee he a ailable
    a d h e igh hif e le a d. I a ch e di ec
    a i la i a d i hi he h ical c e f he e i e . Wha
    igh he b idal able he ie f he b idal able igh l k like
    he he i g i g d . Thi g like ha .
    The a e e f he hi g e a e e l i g a d I a a
    i h a ick e. Wh i a A ie, a d a back i A alia a h
    ag a d i i a g d ca ch i h Silke. She ha i e a l ab
    a ial c i g b I hi k he ke hi g f a UX c d i h d e
    hi k ab all he e e e ie ce a d de ig g ea e e e ie ce a d
    g ea i e ac i i h hi h le e e a f a ial c i g? A d h
    d e hel he ech l gi a d h e e le h igh a e
    a ial c i g e i i a e ible, i f ed a d ef l a ? S
    a l gie f g i g e i e. Tha k agai UX A alia f ha i g
    e. A d e S e e.
    STEVE BATY: Tha k e ch a e. Tha a a e e. A al.
    

    View Slide