Visionフレームワークのリアルタイム顔検出を使えば、ウインクするときゃるん♪と音が鳴る二次元美少女になれる！

iOSDC Japan 2018
2018/09/01 17:20〜 Track B ルーキーズ LT（5分）

Transcript

1. 7JTJPOϑϨʔϜϫʔΫͷ
   ϦΞϧλΠϜإݕग़Λ࢖͑͹ɺ
   ΢ΟϯΫ͢Δͱ͖ΌΔΜ̇ͱ
   Ի͕໐Δೋ࣍ݩඒগঁʹͳΕΔʂ
   גࣜձࣾσΟʔɾΤψɾΤʔɹഅ৔ೆ࣮
   J04%$+BQBO
   

   View Slide

2. ࣗݾ঺հ
   ˔
   അ৔ɹೆ࣮
   w %F/"
   J04"OESPJEΤϯδχΞ
   7JTJPOΛ࢖ͬͯ

   ͜Μͳ΋ͷΛ࡞ͬͯΈͨΑ
   ͱ͍͏͓࿩
   

   View Slide

3. 7JTJPOͱ͸
   ˔
   ը૾ೝࣝͷͨΊͷϑϨʔϜϫʔΫ
   w J04͔Βར༻Մೳ
   ˔
   ΦϒδΣΫτͷݕग़ɾ௥੻౳͕Ͱ͖Δ
   w إͷݕग़
   w όʔίʔυݕग़
   w ෺ମ௥੻
   w ͳͲͳͲ
   

   View Slide

4. إτϥοΩϯά
   ˔
   ϦΞϧλΠϜͰɺإͷಈ͖Λ௥੻Ͱ͖Δ
   w ྠֲ
   w ӈ໨ɺࠨ໨
   w ӈඑɺࠨඑ
   w ඓ
   ˔
   ެࣜαϯϓϧͰ؆୯ʹࢼͤΔ
   IUUQTEFWFMPQFSBQQMFDPNEPDVNFOUBUJPOWJTJPO
   USBDLJOH@UIF@VTFS@T@GBDF@JO@SFBM@UJNF
   

   View Slide

5. ΢ΟϯΫͰ͖ΌΔΜ̇
   ᶃ ӈ໨ͷݕग़݁ՌΛऔಘ
   ᶄ ӈ໨ͷߴ͞Λܭࢉ
   ᶅ ௚લͷߴ͞ͱͷ͕ࠩ

   େ͖͚Ε͹ԻΛ໐Β͢
   Oඵຖ
   

   View Slide

6. ᶃӈ໨ͷݕग़݁ՌΛऔಘ
   ӈ໨Λߏ੒͢Δ఺ͷ࠲ඪΛɺOඵຖʹऔಘ
   

   View Slide

7. ᶃӈ໨ͷݕग़݁ՌΛऔಘ
   ӈ໨Λߏ੒͢Δ఺ͷ࠲ඪΛɺOඵຖʹऔಘ
   

   View Slide

8. ᶃӈ໨ͷݕग़݁ՌΛऔಘ
   ӈ໨Λߏ੒͢Δ఺ͷ࠲ඪΛɺOඵຖʹऔಘ
   

   View Slide

9. ᶄӈ໨ͷߴ͞Λܭࢉ
   Z࠲ඪͷNBY஋ͱNJO஋Λऔಘ
   NBY஋ͱNJO஋ͷࠩ෼Λɺߴ͞ͱ͢Δ
   

   View Slide

10. ᶄӈ໨ͷߴ͞Λܭࢉ
    Z࠲ඪͷNBY஋ͱNJO஋Λऔಘ
    NBY஋ͱNJO஋ͷࠩ෼Λɺߴ͞ͱ͢Δ
    ߴ͞
    

    View Slide

11. ᶅ௚લͷߴ͞ͱͷ͕ࠩେ͖͚Ε͹̇
    ௚લͷߴ͞ͱͷࠩ෼Λऔಘ
    ࠩ෼͕ᮢ஋Λ௒͍͑ͯΕ͹ɺԻΛ໐Β͢
    

    View Slide

12. ᶅ௚લͷߴ͞ͱͷ͕ࠩେ͖͚Ε͹̇
    લճͷߴ͞ͱͷࠩ෼Λऔಘ
    ࠩ෼͕ᮢ஋Λ௒͍͑ͯΕ͹ɺԻΛ໐Β͢
    

    View Slide

13. ᶅ௚લͷߴ͞ͱͷ͕ࠩେ͖͚Ε͹̇
    લճͷߴ͞ͱͷࠩ෼Λऔಘ
    ࠩ෼͕ᮢ஋Λ௒͍͑ͯΕ͹ɺԻΛ໐Β͢
    ͳΜ͔ͩ
    ޡ൓Ԡ͕ଟ͍ͧɾɾɾ
    

    View Slide

14. νϡʔχϯάᶃ
    ˔
    ᮢ஋Λௐ੔
    w ʹઃఆ
    ͳͥɺͳͷ͔ɾɾɾʁ
    

    View Slide

15. νϡʔχϯάᶃ
    ˔
    ᮢ஋Λௐ੔
    w ʹઃఆ
    ѹ౗తखಈσόοάʹΑΔ
    ࢼߦࡨޡͷ݁Ռ
    

    View Slide

16. νϡʔχϯάᶄ
    ˔ ௚લͷߴ͞௚લճ෼ͷฏۉ஋ͱͨ͠
    ͳͥɺճ෼ͳͷ͔ɾɾɾʁ
    

    View Slide

17. νϡʔχϯάᶄ
    ˔ ௚લͷߴ͞௚લճ෼ͷฏۉ஋ͱͨ͠
    ͳͥɺճ෼ͳͷ͔ɾɾɾʁ
    ѹ౗తखಈσόοάʹΑΔ
    ࢼߦࡨޡͷ݁Ռ
    

    View Slide

18. ΢ΠϯΫ͢Δͱ͖ΌΔΜ̇
    

    View Slide

19. ࠓճͷײ૝
    ˔
    إΛܹ͘͠ಈ͔͢ͱɺإݕग़͕όάΔ
    w ࣮ࡍ࢖ͬͯΈΔͱɺਫ਼౓͕෼͔ͬͯྑ͍
    ˔
    ݕग़͢Δ·Ͱͷ࣮૷͕݁ߏෳࡶ
    w ݕग़݁ՌΛड͚औΔ෦෼͑͞෼͔Ε͹ͳΜͱ͔ͳΔ
    ˔
    σόοάͯ͠Δͱإ͕ർΕΔ
    w ද৘ے͕஁͑ΒΕΔ
    ˔
    ৭ʑͳΞΠσΞ͕ࢥ͍ු͔Ϳʂ
    w إτϥοΩϯά࢖͍͖ͬͯ·͠ΐ͏ʂ
    

    View Slide

20. ࠓճͷײ૝
    ˔
    إΛܹ͘͠ಈ͔͢ͱɺإݕग़͕όάΔ
    w ࣮ࡍ࢖ͬͯΈΔͱɺਫ਼౓͕෼͔ͬͯྑ͍
    ˔
    ݕग़͢Δ·Ͱͷ࣮૷͕݁ߏෳࡶ
    w ݕग़݁ՌΛड͚औΔ෦෼͑͞෼͔Ε͹ͳΜͱ͔ͳΔ
    ˔
    σόοάͯ͠Δͱإ͕ർΕΔ
    w ද৘ے͕஁͑ΒΕΔ
    ˔
    ৭ʑͳΞΠσΞ͕ࢥ͍ු͔Ϳʂ
    w إτϥοΩϯά࢖͍͖ͬͯ·͠ΐ͏ʂ
    

    View Slide

21. ࠓճͷײ૝
    ˔
    إΛܹ͘͠ಈ͔͢ͱɺإݕग़͕όάΔ
    w ࣮ࡍ࢖ͬͯΈΔͱɺਫ਼౓͕෼͔ͬͯྑ͍
    ˔
    ݕग़͢Δ·Ͱͷ࣮૷͕݁ߏෳࡶ
    w ݕग़݁ՌΛड͚औΔ෦෼͑͞෼͔Ε͹ͳΜͱ͔ͳΔ
    ˔
    σόοάͯ͠Δͱإ͕ർΕΔ
    w ද৘ے͕஁͑ΒΕΔ
    ˔
    ৭ʑͳΞΠσΞ͕ࢥ͍ු͔Ϳʂ
    w إτϥοΩϯά࢖͍͖ͬͯ·͠ΐ͏ʂ
    

    View Slide

22. ࠓճͷײ૝
    ˔
    إΛܹ͘͠ಈ͔͢ͱɺإݕग़͕όάΔ
    w ࣮ࡍ࢖ͬͯΈΔͱɺਫ਼౓͕෼͔ͬͯྑ͍
    ˔
    ݕग़͢Δ·Ͱͷ࣮૷͕݁ߏෳࡶ
    w ݕग़݁ՌΛड͚औΔ෦෼͑͞෼͔Ε͹ͳΜͱ͔ͳΔ
    ˔
    σόοάͯ͠Δͱإ͕ർΕΔ
    w ද৘ے͕஁͑ΒΕΔ
    ˔
    ৭ʑͳΞΠσΞ͕ࢥ͍ු͔Ϳʂ
    w إτϥοΩϯά࢖͍͖ͬͯ·͠ΐ͏ʂ
    

    View Slide