Upgrade to Pro — share decks privately, control downloads, hide ads and more …

確率推定の良さ(カリブレーション)の評価方法、較正方法

 確率推定の良さ(カリブレーション)の評価方法、較正方法

FANCOMI

May 22, 2020
Tweet

More Decks by FANCOMI

Other Decks in Technology

Transcript

  1. ֬཰ਪఆͷྑ͞ʢΧϦϒϨʔγϣϯʣͷ ධՁํ๏ɼֱਖ਼ํ๏ ํ๏ʹ͍ͭͯͷઆ໌ͱਓ޻σʔλ࣮ݧ ೥ɹ݄೔ɹΦϯϥΠϯษڧձ ֶੜΠϯλʔϯɹ੨༄ɹ༑Ղ

  2. ࣗݾ঺հ 2 w ૣҴాେֶେֶӃɹम࢜೥ w ઌਐཧ޻ֶݚڀՊɼిؾ৘ใੜ໋ઐ߈ w ৘ใֶशγεςϜݚڀࣨ w ݚڀ

    ੨༄༑Ղ ͓͋΍͗ɹΏ͏͔ w ϑΝϯίϛϡχέʔγϣϯζֶੜΠϯλʔϯ w ۭ࣌ؒ༧ଌͷਂ૚ֶशϞσϦϯάʢؾ৅Ϩʔμʔʣ w ,FZXPSEۭ࣌ؒ༧ଌɼը૾ॲཧɼਂ૚ֶश
  3. ͜ͷൃදͰΘ͔Δ͜ͱ 3 w ֬཰ਪఆͷྑ͞ʢΧϦϒϨʔγϣϯʣͷධՁํ๏ͱֱਖ਼ํ๏ʹ͍ͭͯௐࠪɼ ౴͑ͷΘ͔Δਓ޻σʔλͰৼΔ෣͍Λ֬ೝ w ධՁํ๏ʹ͍ͭͯ w ֱਖ਼ํ๏ʹ͍ͭͯ w

    ධՁࢦඪ͕ԿΛ͸͔͍ͬͯΔ͔ɼͲͷΑ͏ͳԾఆ͕͋Δ͔Λ͖ͪΜͱݟ ఆΊ্ͨͰ༻͍Δ΂͖ w *TPUPOJDSFHSFTTJPO͸෼ྨਫ਼౓͕͋Δఔ౓ྑ͍΋ͷʹ͏·͘ಇ͘ w 1MBUU4DBMJOH͸ࢄ෍ਤɼΧϦϒϨʔγϣϯۂઢͳͲͰɼ༧ଌ֬཰ͱਖ਼ղ֬ ཰ͷ܏޲Λଊ͑ͯ༻͍Δ΂͖
  4. ໨࣍ 4 w ࠓճѻ͏໰୊ w ΧϦϒϨʔγϣϯͷධՁํ๏ʹ͍ͭͯ w ࣮ݧᶃ w ΧϦϒϨʔγϣϯͷֱਖ਼ํ๏ʹ͍ͭͯ

    w ࣮ݧᶄ w ·ͱΊ
  5. ࠓճѻ͏୊ࡐ 5 ޿ࠂ" ݟͯ΋Β͑Δʢʣɼ΋Β͑ͳ͍ʢʣ ݟͯ΋Β͑Δ֬཰͸ w ֬཰ਪఆ ෼ྨ ֬཰ਪఆ w

    ྫ ޿ࠂͷ$53ʢDMJDLUISPVHISBUFʣ༧ଌ ਖ਼͍֬͠཰ਪఆ͕Ͱ͖͍ͯΔ ΧϦϒϨʔγϣϯ
  6. ֬཰ਪఆͱ෼ྨɼධՁͷྲྀΕ 6 Ϟσϧ ಛ௃ྔ ೖྗ ༧ଌ֬཰  ग़ྗ ༧ଌϥϕϧ 

    w ༧ଌ w ධՁ ධՁ⭕ ධՁʜ ਖ਼ղϥϕϧ  ਖ਼ղ֬཰ Θ͔Βͳ͍ ਖ਼ղσʔλ
  7. ຊൃදͷ಺༰ 7 ༧ଌ֬཰  ग़ྗ ༧ଌϥϕϧ  ᶃධՁํ๏ ֱਖ਼͞Εͨ༧ଌ֬཰ 

    ᶄֱਖ਼ํ๏ ᶃΧϦϒϨʔγϣϯͷධՁํ๏ w ͖ͪΜͱͨ֬͠཰ਪఆ͕Ͱ͖͍ͯΔ͔ ᶄ֬཰ֱਖ਼ํ๏ w ΧϦϒϨʔγϣϯతʹྑ͍֬཰΁ֱਖ਼͢Δํ๏ ਖ਼ղϥϕϧ  ਖ਼ղ֬཰ Θ͔Βͳ͍ ਖ਼ղσʔλ
  8. ຊൃදͷ಺༰ 8 ༧ଌ֬཰  ग़ྗ ༧ଌϥϕϧ  ᶃධՁํ๏ ֱਖ਼͞Εͨ༧ଌ֬཰ 

    ᶄֱਖ਼ํ๏ ᶃΧϦϒϨʔγϣϯͷධՁํ๏ w ͖ͪΜͱͨ֬͠཰ਪఆ͕Ͱ͖͍ͯΔ͔ ᶄ֬཰ֱਖ਼ํ๏ w ΧϦϒϨʔγϣϯతʹྑ͍֬཰΁ֱਖ਼͢Δํ๏ ਖ਼ղϥϕϧ  ਖ਼ղ֬཰ Θ͔Βͳ͍ ਖ਼ղσʔλ
  9. ΧϦϒϨʔγϣϯͷධՁํ๏ʹ͍ͭͯ

  10. ධՁํ๏ʛ֓ཁ 10 w ༧ଌ֬཰ͱϥϕϧΛൺֱ͢Δ w άϧʔϓ෼͚Λߦ͍ɼਖ਼ղϥϕϧͷස౓ͱൺֱ w ਖ਼ղͷ֬཰Λਪఆ͢Δ w #SJFS4DPSF

    4QJFHFMIBMUFS౷ܭྔ w )PTNFS-FNFTIPX౷ܭྔɼ&$&ɼ.$&ɼΧϦϒϨʔγϣϯۂઢ w $PYͷํ๏ɼ&$*ɼ*$*
  11. ධՁํ๏c༧ଌ֬཰ͱϥϕϧͷൺֱ 11 ༧ଌ֬཰       ༧ଌϥϕϧ

          ਖ਼ղϥϕϧ      
  12. 12 ༧ଌ֬཰       ਖ਼ղϥϕϧ 

         ධՁํ๏c༧ଌ֬཰ͱϥϕϧͷൺֱ
  13. 13 w #SJFS4DPSF w 4QJFHFMIBMUFSUFTU w ༧ଌ֬཰ͱϥϕϧͷ.4& ฏۉೋ৐ޡࠩ w ༏Ґʹྑ͘ͳ͍ͱ൑அ͢ΔͨΊͷݕఆ౷ܭྔ

    w ෼ྨͱͯ͠ͷධՁɹͱɹΧϦϒϨʔγϣϯͱͯ͠ͷධՁɹ͕͍ࠞͬͯ͟Δ w ෇ۙͱ෇ۙͷ෼ྨతʹਖ਼͍͠༧ଌ͕ྑ͍ͱ͞ΕΔ ධՁํ๏c༧ଌ֬཰ͱϥϕϧͷൺֱ
  14. 14 ༧ଌ֬཰ ༧ଌϥϕϧ ਖ਼ղϥϕϧ      

                ධՁํ๏cάϧʔϓ෼͚
  15. 15 ༧ଌ֬཰ ਖ਼ղϥϕϧ       

               ධՁํ๏cάϧʔϓ෼͚
  16. 16 w )PTNFS-FNFTIPX౷ܭྔʢ)-౷ܭྔʣ w ᶃൣғҰఆ w ᶄݸ਺Ұఆ w ΧϦϒϨʔγϣϯۂઢ w

    &$&ɼ.$& w άϧʔϓ಺ͷ༧ଌ֬཰ͷฏۉͱස౓ͷฏۉઈରޡࠩɼઈରޡࠩͷ࠷େ஋ w άϧʔϓ಺ͷ༧ଌ֬཰ͷฏۉͱස౓Λάϥϑʹͨ͠΋ͷ w ༏Ґʹྑ͘ͳ͍ͱ൑அ͢ΔͨΊͷݕఆ౷ܭྔ w ਖ਼͍͠άϧʔϓ෼͚͕େ੾ ධՁํ๏cάϧʔϓ෼͚
  17. 17 ༧ଌ֬཰ ਖ਼ղϥϕϧ       

               ධՁํ๏cάϧʔϓ෼͚ɼൣғҰఆ
  18. 18 ༧ଌ֬཰ ਖ਼ղϥϕϧ       

               ධՁํ๏cάϧʔϓ෼͚ɼൣғҰఆ
  19. 19         

                   w όϥϯεͷྑ͍֬཰ਪఆΛ͢Δσʔλʹ༗ޮ ༧ଌ֬཰ ਖ਼ղϥϕϧ ස౓ ฏۉ w όϥϯεͷѱ͍σʔλͩͱ͋Δάϧʔϓʹσʔλ͕ೖΒͳ͍͜ͱ΋ ධՁํ๏cάϧʔϓ෼͚ɼൣғҰఆ
  20. 20 ༧ଌ֬཰ ਖ਼ղϥϕϧ       

         ධՁํ๏cάϧʔϓ෼͚ɼݸ਺Ұఆ
  21. 21 ༧ଌ֬཰ ਖ਼ղϥϕϧ       

         ධՁํ๏cάϧʔϓ෼͚ɼݸ਺Ұఆ
  22. 22         

             w શͯͷάϧʔϓʹσʔλ͕ೖΔͨΊۃ୺ͳ֬཰ਪఆΛ͢Δσʔλʹ΋༗ޮ ʢΠϯόϥϯεσʔλʣ ༧ଌ֬཰ ਖ਼ղϥϕϧ ස౓ ฏۉ ධՁํ๏cάϧʔϓ෼͚ɼݸ਺Ұఆ
  23. 23 ༧ଌ֬཰ ༧ଌϥϕϧ ਖ਼ղϥϕϧ      

                ਪఆਖ਼ղ֬཰       f ධՁํ๏cਖ਼ղ֬཰ͷਪఆ
  24. 24 w $PYͷํ๏ w ධՁ͢Δσʔλͷ༧ଌ֬཰ͷϩδεςΟοΫճؼͰͷ౰ͯ͸·ΓΛݟ͍ͯΔ w &$* w ධՁ͢Δσʔλͷ༧ଌ֬཰ͷϩδεςΟοΫճؼͰͷ౰ͯ͸·ΓΛݟ͍ͯΔ w

    ࣗ༝౓ͷߴ͍ඇઢܗؔ਺Λ༻͍ɼ֎Ε஋ʹ΋ॊೈͳճؼ w *$* w ϊϯύϥϝτϦοΫճؼͰɼ༧ଌ֬཰͔ΒϥϕϧΛճؼ ධՁํ๏cਖ਼ղ֬཰ͷਪఆ w ਖ਼ղσʔλͱͷ௚઀ͷൺֱͰ͸ͳ͍ʂ
  25. 25 ༧ଌ֬཰ ̂ p      

    ༧ଌࢠ ̂ lp ln ̂ p 1 − ̂ p ϩδοτม׵       ਖ਼ղϥϕϧ       ϩδεςΟοΫճؼ ̂ o = 1 1 + exp{ − (a ⋅ ̂ lp + b)} w ֶश͞ΕͨϞσϧͷ༧ଌࢠΛ࢖ͬͯͲͷఔ౓ϩδεςΟοΫճؼͰදݱͰ͖Δ͔ w ϩδεςΟοΫճؼ͕ਖ਼͍͠Ϟσϧɹͱ͍͏Ծఆ w ͕ʹۙ͘ɼ ͕ʹ͍ۙ a b ˠྑ͍֬཰ਪఆ ධՁํ๏cਖ਼ղ֬཰ͷਪఆɼ$PYͷํ๏
  26. 26 ༧ଌ֬཰ ̂ p      

    ༧ଌࢠ ̂ lp ln ̂ p 1 − ̂ p ϩδοτม׵       ਖ਼ղϥϕϧ       ϩδεςΟοΫ(".ճؼ ̂ o = 1 1 + exp{ − (a ⋅ s( ̂ lp) + b)} w ϩδεςΟοΫճؼ͕ਖ਼͍͠Ϟσϧɹͱ͍͏Ծఆ ਪఆਖ਼ղ֬཰ ̂ o       w ༧ଌ֬཰ ͱ ͷฏۉೋ৐ޡࠩ ̂ p ̂ o w εϓϥΠϯ ʹΑΓ֎Ε஋ʹ΋ॊೈͳճؼ s( ⋅ ) ධՁํ๏cਖ਼ղ֬཰ͷਪఆɼ&$*
  27. 27 ༧ଌ֬཰ ̂ p      

    ਖ਼ղϥϕϧytrue       ϊϯύϥϝτϦοΫճؼ f w ༧ଌ֬཰Ͱਖ਼ղϥϕϧΛճؼ͢ΔΑ͏ ͳؔ਺ Λֶश f ਪఆਅͷ֬཰ ̂ o       w ͱ͠ɼਪఆਅͷ֬཰ ΛٻΊΔɽ o = f( ̂ p) ̂ o f( ̂ p) ධՁํ๏cਖ਼ղ֬཰ͷਪఆɼ*$*
  28. 28 ༧ଌ֬཰ ਪఆਖ਼ղ֬཰ w ༧ଌ֬཰Ͱਖ਼ղϥϕϧΛճؼɼؔ਺ ʢۂઢʣΛ༻͍ɼ͜ΕΛਪఆਖ਼ղ ֬཰ͱ͢Δ f w ϊϯύϥϝτϦοΫճؼͷͨΊͲͷ༷ͳϞσϧ͕ྑ͍͔ͳͲஔ͘Ծఆ

    ͕ͳ͍ ධՁํ๏cਖ਼ղ֬཰ͷਪఆɼ*$*
  29. ࣮ݧᶃධՁํ๏ͷ࣮ݧ

  30. ᶃධՁํ๏ͷ࣮ݧc֓ཁ 30 w ໨తɿ౴͑ͷΘ͔Δʢਖ਼ղ֬཰ʣਓ޻σʔλͰධՁࢦඪͷΑ͞ΛΈΔ w σʔλɿ௨Γ w ࣮ݧͨ͠ධՁࢦඪ #SJFS4DPSF 4QJFMHFIBMUFS౷ܭྔ

    )-౷ܭྔ ) $ ɼ&$&ɼ.$&ʢ$ʣΧϦϒϨʔγϣϯۂઢʢ$ʣ $PYɼ&$*ɼ*$* w ϩδεςΟοΫճؼ͕ྑ͍ϞσϧͱԾఆ͢Δσʔλɼͦ͏Ͱͳ͍σʔλ w σʔλൺ཰ɼɼ w Ϟσϧɿ ϩδεςΟοΫճؼɼϥϯμϜϑΥϨετʢ3'ʣɼଟ૚ύʔηϓτϩϯʢ.-1ʣɼ MJHIU(#.ʢ-(#.ʣ w USBJOσʔλͰֶशɼUFTUσʔλͰධՁ
  31. ᶃධՁํ๏ͷ࣮ݧc֓ཁ 31 w ໨తɿ౴͑ͷΘ͔Δʢਖ਼ղ֬཰ʣਓ޻σʔλͰධՁࢦඪͷΑ͞ΛΈΔ w σʔλɿ௨Γ w ࣮ݧͨ͠ධՁࢦඪ #SJFS4DPSF 4QJFHFMIBMUFS౷ܭྔɹ෼ྨਫ਼౓ʹґଘ

    )-౷ܭྔ ) $ ɼ&$&ɼ.$&ʢ$ʣΧϦϒϨʔγϣϯۂઢʢ$ʣ $PYɼ&$*ɼ*$* w ϩδεςΟοΫճؼ͕ྑ͍ϞσϧͱԾఆ͢Δσʔλɼͦ͏Ͱͳ͍σʔλ w σʔλൺ཰ɼɼ w Ϟσϧɿ w USBJOσʔλͰֶशɼUFTUσʔλͰධՁ ϩδεςΟοΫճؼɼϥϯμϜϑΥϨετʢ3'ʣɼଟ૚ύʔηϓτϩϯʢ.-1ʣɼ MJHIU(#.ʢ-(#.ʣ
  32. 32 ᶃධՁํ๏ͷ࣮ݧc݁Ռɼάϧʔϓ෼͚ 3BOL     ϩδεςΟοΫ 3' .-1

    -(#. ਖ਼͍͠ॱҐ &$& ݸ਺ )-Q஋ʢൣғʣ )-Q஋ʢݸ਺ʣ w Πϯόϥϯεσʔλ͸ݸ਺͕Ұఆͷάϧʔϓ෼͚͕ྑ͍ w ϩδεςΟοΫճؼ͕ྑ͍
  33. w ର֯ઢɹɹɹʹͷΔ΄Ͳྑ͍ʢΧϦϒϨʔγϣϯ͞Ε͍ͯΔʣ 33 w ϩδεςΟοΫճؼ͕ྑ͍ ϩδεςΟοΫ   3' 

     .-1   -(#.   άϧʔϓ಺༧ଌ֬཰ͷฏۉ άϧʔϓ಺ස౓ w ఆੑతʹ΋ΧϦϒϨʔγϣϯͷධՁΛͰ͖͍ͯΔ Ϟσϧ ਖ਼ղ֬཰ͱͷޡࠩ ᶃධՁํ๏ͷ࣮ݧc݁Ռɼάϧʔϓ෼͚
  34. 34 w ϩδεςΟοΫճؼ͕ྑ͍ w $PYͷํ๏ɼ&$*͸ϩδεςΟοΫճؼΛྑ͍ͱ͢ΔσʔλͳͷͰਖ਼͘͠ධՁ w $PY͸܏͖Bɼ੾ยCΛಉ࣌ʹݟΔඞཁ 3BOL  

      ϩδεςΟοΫ 3' .-1 -(#. ਖ਼͍͠ॱҐ $PYB $PYC &$* ᶃධՁํ๏ͷ࣮ݧc݁Ռɼ$PY &$*
  35. 35 w ϩδεςΟοΫճؼ͕ྑ͍ w *$*͸ྑ͘ͳ͍ͱ͢Δ΋ͷ͸ଊ͑ΒΕΔ 3BOL    

    ϩδεςΟοΫ 3' .-1 -(#. ਖ਼͍͠ॱҐ *$* ᶃධՁํ๏ͷ࣮ݧc݁Ռɼ*$*
  36. 36 w ϩδεςΟοΫճؼ͕ྑ͘ͳ͍ w ਖ਼͘͠ͳ͍ධՁ ϩδεςΟοΫճؼΛྑ͘ͳ͍ͱ͢ΔσʔλͳͷͰ ᶃධՁํ๏ͷ࣮ݧc݁Ռɼ$PY &$* 3BOL 

       ϩδεςΟοΫ 3' .-1 -(#. ਖ਼͍͠ॱҐ $PYB $PYC &$*
  37. 37 w ਖ਼͘͠ͳ͍ධՁˠΠϯόϥϯεσʔλͷͨΊ 3BOL     ϩδεςΟοΫ 3'

    .-1 -(#. ਖ਼ղ֬཰ͱͷޡࠩ *$* ᶃධՁํ๏ͷ࣮ݧc݁Ռɼ*$* w ϩδεςΟοΫճؼ͕ྑ͘ͳ͍
  38. 38 w ෇ۙͷϥϕϧ͕গͳ͔ͬͨͨΊɼϊϯύϥϝτϦοΫճؼ͕ʹҾ͖ͣ ΒΕΔɹˠશͯͷ༧ଌ w *$*͸Πϯόϥϯεσʔλ޲͖Ͱ͸ͳ͍ ༧ଌ֬཰ ਪఆਖ਼ղ֬཰ ᶃධՁํ๏ͷ࣮ݧc݁Ռɼਖ਼ղ֬཰ਪఆ w

    ϩδεςΟοΫճؼ͕ྑ͘ͳ͍
  39. ᶃΧϦϒϨʔγϣϯͷධՁํ๏ʛ·ͱΊ 39 ྑ͍఺ ྑ͘ͳ͍఺ BrierɼSpiegeIhalterɼMAE ܭࢉͷ؆୯͞ ෼ྨͱͯ͠ͷྑ͞ʹد༩ HL౷ܭྔ ECE MCE

    άϧʔϓ෼͚͕ਖ਼͚͠Ε͹ ΠϯόϥϯεσʔλͰ΋ ྑ͍ධՁࢦඪ άϧʔϓ෼͚ʹዞҙੑ ΧϦϒϨʔγϣϯۂઢ ࢹ֮తʹධՁͰ͖Δ άϧʔϓ෼͚ʹዞҙੑ Coxͷํ๏ɼECI ϩδεςΟοΫճؼʹରͯ͠ ౰ͯ͸·Γͷྑ͞ΛධՁՄೳ ϩδεςΟοΫճؼ্͕ख͍͔͘ͳ ͍σʔλͷ৔߹ਖ਼͍͠ධՁෆՄೳ ਖ਼ղσʔλͱͷ௚઀ൺֱͰͳ͍ ICI ϊϯύϥϝτϦοΫճؼͳͷ Ͱɼσʔλʹஔ͘Ծఆ͕ͳ͍ Πϯόϥϯεσʔλͷͱ͖ਖ਼͍͠ϊ ϯύϥϝτϦοΫճؼ͕ࠔ೉ ਖ਼ղσʔλͱͷ௚઀ൺֱͰ͸ͳ͍ w ධՁࢦඪʹஔ͔Ε͍ͯΔԾఆΛݟۃΊɼద੾ͳ࢖͍ํΛ
  40. ຊൃදͷ಺༰ʢ࠶ܝʣ 40 ༧ଌ֬཰  ग़ྗ ༧ଌϥϕϧ  ᶃධՁํ๏ ֱਖ਼͞Εͨ༧ଌ֬཰ 

    ᶄֱਖ਼ํ๏ ᶃΧϦϒϨʔγϣϯͷධՁํ๏ w ͖ͪΜͱͨ֬͠཰ਪఆ͕Ͱ͖͍ͯΔ͔ ᶄ֬཰ֱਖ਼ํ๏ w ΧϦϒϨʔγϣϯతʹྑ͍֬཰΁ֱਖ਼͢Δํ๏ ਖ਼ղϥϕϧ  ਖ਼ղ֬཰ Θ͔Βͳ͍ ਖ਼ղσʔλ
  41. ΧϦϒϨʔγϣϯͷֱਖ਼ํ๏ʹ͍ͭͯ

  42. ᶄ֬཰ͷֱਖ਼ํ๏ 42 w 1MBUUTDBMJOH w *TPUPOJDSFHSFTTJPO w TJHNPJEؔ਺ʹ౰ͯ͸ΊΔύϥϝτϦοΫͳֱਖ਼ํ๏ w άϧʔϓ෼͚ʹج͍ͮͨϊϯύϥϝτϦοΫͳֱਖ਼ํ๏

  43. ᶄ֬཰ͷֱਖ਼ํ๏ʛ1MBUUTDBMJOH 43 w TJHNPJEؔ਺ʹ౰ͯ͸ΊΔύϥϝτϦοΫͳֱਖ਼ํ๏ pcal = 1 1 + exp(A

    ̂ p + B) ֱਖ਼͞Εͨ֬཰ w "ͱ#Λֶशσʔλ͔Βܾఆ ˠ ࣮σʔλͰ͸ਖ਼ղ֬཰͕Θ͔Βͳ͍ ༧ଌ֬཰ ਖ਼ղ֬཰ ֱਖ਼֬཰ w Ϟσϧͷग़ྗͷ༧ଌ֬཰ͱਅͷ֬཰͕TJHNPJEؔ਺ͷΑ͏ʹͳ͍ͬͯΔͱ༗ޮ
  44. 44 ΧϦϒϨʔγϣϯۂઢΛݟͯΈΔ TJHNPJEؔ਺Β͍͠ ༧ଌ֬཰ ස౓ ᶄ֬཰ͷֱਖ਼ํ๏ʛ1MBUUTDBMJOH w TJHNPJEؔ਺ʹ౰ͯ͸ΊΔύϥϝτϦοΫͳֱਖ਼ํ๏ pcal =

    1 1 + exp(A ̂ p + B) ֱਖ਼͞Εͨ֬཰ w "ͱ#Λֶशσʔλ͔Βܾఆ w Ϟσϧͷग़ྗͷ༧ଌ֬཰ͱਅͷ֬཰͕TJHNPJEؔ਺ͷΑ͏ʹͳ͍ͬͯΔͱ༗ޮ
  45. 45 w *TPUPOJDSFHSFTTJPO w άϧʔϓ෼͚ʹج͍ͮͨϊϯύϥϝτϦοΫͳֱਖ਼ํ๏ w Ϟσϧͷग़ྗͷ༧ଌ֬཰ͱਖ਼ղ֬཰ͷؔ܎͕Α͘Θ͔Βͳ͍ͱ͖ ༧ଌ֬཰ 0.1 0.3

    0.4 0.5 0.6 0.7 0.8 ϥϕϧ 0 1 0 1 1 1 0 w ༧ଌ֬཰ͱϥϕϧͷॱংؔ܎Λਖ਼͘͢͠ΔΑ͏ʹάϧʔϓ෼͚ ᶄ֬཰ͷֱਖ਼ํ๏ʛ*TPUPOJDSFHSFTTJPO
  46. 46 w *TPUPOJDSFHSFTTJPO ༧ଌ֬཰ 0.1 0.3 0.4 0.5 0.6 0.7

    0.8 ϥϕϧ 0 1 0 1 1 1 0 0 0.5 0.5 1 1 0.5 0.5 w άϧʔϓ෼͚ʹج͍ͮͨϊϯύϥϝτϦοΫͳֱਖ਼ํ๏ w ༧ଌ֬཰ͱϥϕϧͷॱংؔ܎Λਖ਼͘͢͠ΔΑ͏ʹάϧʔϓ෼͚ w Ϟσϧͷग़ྗͷ༧ଌ֬཰ͱਖ਼ղ֬཰ͷؔ܎͕Α͘Θ͔Βͳ͍ͱ͖ ᶄ֬཰ͷֱਖ਼ํ๏ʛ*TPUPOJDSFHSFTTJPO
  47. 47 w *TPUPOJDSFHSFTTJPO ༧ଌ֬཰ 0.1 0.3 0.4 0.5 0.6 0.7

    0.8 ϥϕϧ 0 1 0 1 1 1 0 0 0.5 0.5 1 1 0.5 0.5 0 0.5 0.5 1 0.75 0.75 0.5 w άϧʔϓ෼͚ʹج͍ͮͨϊϯύϥϝτϦοΫͳֱਖ਼ํ๏ w ༧ଌ֬཰ͱϥϕϧͷॱংؔ܎Λਖ਼͘͢͠ΔΑ͏ʹάϧʔϓ෼͚ w Ϟσϧͷग़ྗͷ༧ଌ֬཰ͱਖ਼ղ֬཰ͷؔ܎͕Α͘Θ͔Βͳ͍ͱ͖ ᶄ֬཰ͷֱਖ਼ํ๏ʛ*TPUPOJDSFHSFTTJPO
  48. 48 w *TPUPOJDSFHSFTTJPO ༧ଌ֬཰ 0.1 0.3 0.4 0.5 0.6 0.7

    0.8 ϥϕϧ 0 1 0 1 1 1 0 0 0.5 0.5 1 1 0.5 0.5 0 0.5 0.5 1 0.75 0.75 0.5 ֱਖ਼֬཰ 0 0.5 0.5 0.75 0.75 0.75 0.75 w άϧʔϓ෼͚ʹج͍ͮͨϊϯύϥϝτϦοΫͳֱਖ਼ํ๏ w ༧ଌ֬཰ͱϥϕϧͷॱংؔ܎Λਖ਼͘͢͠ΔΑ͏ʹάϧʔϓ෼͚ w Ϟσϧͷग़ྗͷ༧ଌ֬཰ͱਖ਼ղ֬཰ͷؔ܎͕Α͘Θ͔Βͳ͍ͱ͖ ᶄ֬཰ͷֱਖ਼ํ๏ʛ*TPUPOJDSFHSFTTJPO
  49. 49 w *TPUPOJDSFHSFTTJPO ༧ଌ֬཰ 0.1 0.3 0.4 0.5 0.6 0.7

    0.8 ϥϕϧ 0 1 0 1 1 1 0 0 0.5 0.5 1 1 0.5 0.5 0 0.5 0.5 1 0.75 0.75 0.5 ֱਖ਼֬཰ 0 0.5 0.5 0.75 0.75 0.75 0.75 ස౓ w άϧʔϓ෼͚ʹج͍ͮͨϊϯύϥϝτϦοΫͳֱਖ਼ํ๏ w ༧ଌ֬཰ͱϥϕϧͷॱংؔ܎Λਖ਼͘͢͠ΔΑ͏ʹάϧʔϓ෼͚ w Ϟσϧͷग़ྗͷ༧ଌ֬཰ͱਖ਼ղ֬཰ͷؔ܎͕Α͘Θ͔Βͳ͍ͱ͖ ᶄ֬཰ͷֱਖ਼ํ๏ʛ*TPUPOJDSFHSFTTJPO
  50. 50 w *TPUPOJDSFHSFTTJPO ༧ଌ֬཰ 0.1 0.3 0.4 0.5 0.6 0.7

    0.8 ϥϕϧ 0 1 0 1 1 1 0 0 0.5 0.5 1 1 0.5 0.5 0 0.5 0.5 1 0.75 0.75 0.5 ֱਖ਼֬཰ 0 0.5 0.5 0.75 0.75 0.75 0.75 ස౓     w άϧʔϓ෼͚ʹج͍ͮͨϊϯύϥϝτϦοΫͳֱਖ਼ํ๏ w ༧ଌ֬཰ͱϥϕϧͷॱংؔ܎Λਖ਼͘͢͠ΔΑ͏ʹάϧʔϓ෼͚ w Ϟσϧͷग़ྗͷ༧ଌ֬཰ͱਖ਼ղ֬཰ͷؔ܎͕Α͘Θ͔Βͳ͍ͱ͖ ᶄ֬཰ͷֱਖ਼ํ๏ʛ*TPUPOJDSFHSFTTJPO
  51. ࣮ݧᶄֱਖ਼ํ๏ͷ࣮ݧ

  52. ᶄֱਖ਼ํ๏ͷ࣮ݧʛ֓ཁ 52 w ໨తɿ֬཰ֱਖ਼ख๏ͷޮՌΛਓ޻σʔλͰ֬ೝ͢Δ w ධՁ ϩδεςΟοΫճؼɼϥϯμϜϑΥϨετʢ3'ʣɼଟ૚ύʔηϓτϩϯʢ.-1ʣɼ MJHIU(#.ʢ-(#.ʣ w Ϟσϧ

    ਖ਼ղ֬཰ͱͷޡࠩ ༧ଌ֬཰ͱਖ਼ղ֬཰ͷؔ܎ ʴ1MBUUTDBMJOH JTPUPOJDSFHSFTTJPO w σʔλɿ௨Γ w ϩδεςΟοΫճؼ͕ྑ͍ϞσϧͱԾఆ͢Δσʔλɼͦ͏Ͱͳ͍σʔλ w σʔλൺ཰ɼɼ
  53. 53 w ϩδεςΟοΫճؼ͕ྑ͍ ྑ͍ ѱ͍ ਖ਼ղ֬཰ͱͷޡࠩʢUFTUʣ ϩδεςΟοΫ   ϩδεςΟοΫ

    1MBUU   ϩδεςΟοΫ JTPUPOJD   3'   3' 1MBUU   3' JTPUPOJD   .-1   .-1 1MBUU   .-1 JTPUPOJD   -(#.   -(#. 1MBUU   -(#. JTPUPOJD   w JTPUPOJD͕શମతʹྑ͍݁Ռɼ1MBUUͰ΋ɼ΋ͱΑΓྑ͍݁ՌʹͳΔ ᶄֱਖ਼ํ๏ͷ࣮ݧʛ݁Ռ
  54. 54 ༧ଌ֬཰ ਖ਼ղ֬཰ w ϩδεςΟοΫճؼ͕ྑ͍ w 1MBUU4DBMJOH͸3'ͰΑ͘ಇ͍͍ͯΔ ༧ଌ֬཰ͱਖ਼ղ֬཰͕TJHNPJEత w JTPUPOJDSFHSFTTJPO͸શମతʹྑ͍ಇ͖

    ᶄֱਖ਼ํ๏ͷ࣮ݧʛ݁ՌɼJTPUPOJDɼ1MBUU⭕
  55. 55 w ϩδεςΟοΫճؼ͕ྑ͍ ༧ଌ֬཰ ස౓ 3'ͷUSBJOͷΧϦϒϨʔγϣϯۂઢ w 1MBUU4DBMJOH͸3'ͰΑ͘ಇ͍͍ͯΔ ༧ଌ֬཰ͱਖ਼ղ֬཰͕TJHNPJEత ᶄֱਖ਼ํ๏ͷ࣮ݧʛ݁ՌɼJTPUPOJDɼ1MBUU⭕

  56. 56 w ϩδεςΟοΫճؼ͕ྑ͘ͳ͍ w Ϟσϧͷ෼ྨਫ਼౓ʢ֬཰ʹର͢Δϥϕϧͷॱংؔ܎ʣ͕ѱ͍ɹˠJTPUPOJD✖ ਖ਼ղ֬཰ "6$ʢUSBJO࣌ʣ   

     ༧ଌ֬཰ ᶄֱਖ਼ํ๏ͷ࣮ݧʛ݁ՌɼJTPUPOJD✖
  57. 57 ༧ଌ֬཰ ਖ਼ղ֬཰ w ϩδεςΟοΫճؼ͕ྑ͘ͳ͍ w ۃ୺ͳ༧ଌɹˠTJHNPJEؔ਺ʹpU͠ͳ͍ͨΊɼ1MBUUTDBMJOH✖ ᶄֱਖ਼ํ๏ͷ࣮ݧʛ݁Ռɼ1MBUU✖

  58. 58 w 1MBUU4DBMJOH w *TPUPOJDSFHSFTTJPO • sigmoid΁ͷ౰ͯ͸ΊͳͷͰɼ༧ଌ֬཰ͱਖ਼ղ֬཰ͷؔ܎ʢ࣮σʔ λͰ͸ΧϦϒϨʔγϣϯۂઢͳͲʣΛݟͯΈΔ͜ͱ͕େ੾ • εέʔϧΛมߋ͢Δ͚ͩͳͷͰɼ෼ྨਫ਼౓΁ͷӨڹ͸ͳ͍

    • Ϟσϧ͔Βͷ༧ଌ֬཰ʹैͬͯዞҙੑͳ͘άϧʔϓ෼͚Ͱ͖Δ • ෼ྨਫ਼౓͕ѱ͘ͳΔ͜ͱ΋͋Δʢྑ͘ͳΔ͜ͱ΋ʣ • ෼ྨਫ਼౓͕ѱ͍΋ͷʹ͸͏·͘ಇ͔ͳ͍ • ۃ୺ͳ༧ଌΛ͢Δ΋ͷʹ͸޲͔ͳ͍ ᶄֱਖ਼ํ๏ͷ࣮ݧʛ·ͱΊ
  59. ·ͱΊ 59 w ֬཰ਪఆͷྑ͞ʢΧϦϒϨʔγϣϯʣͷධՁͱֱਖ਼ํ๏ʹ͍ͭͯௐࠪɼ ౴͑ͷΘ͔Δਓ޻σʔλͰৼΔ෣͍ɼಛ௃Λ֬ೝͨ͠ɽ w ධՁํ๏ʹ͍ͭͯ w ֱਖ਼ํ๏ʹ͍ͭͯ w

    ධՁࢦඪʹͲͷΑ͏ͳԾఆ͕͋Δ͔Λ͖ͪΜͱݟఆΊ্ͨͰ༻͍Δʢද Λࢀরʣ w *TPUPOJDSFHSFTTJPO͸෼ྨਫ਼౓͕͋Δఔ౓ྑ͍΋ͷʹ͸͏·͘ಇ͘ w 1MBUU4DBMJOH͸ࢄ෍ਤɼΧϦϒϨʔγϣϯۂઢͳͲͰɼ༧ଌ֬཰ͱਖ਼ղ ֬཰ͷ܏޲Λଊ͑ͯ༻͍Δ΂͖
  60. ࢀߟจݙ 60 w ΧϦϒϨʔγϣϯͷධՁํ๏ʹ͍ͭͯ w $PYͷํ๏ w &*$ w *$*

    1FUFS$"VTUJOBOE&XPVU84UFZFSCFSH5IF*OUFHSBUFE$BMJCSBUJPO*OEFY *$* BOESFMBUFE NFUSJDTGPSRVBOUJGZJOHUIFDBMJCSBUJPOPGMPHJTUJDSFHSFTTJPONPEFMT4UBUJTUJDTJO.FEJDJOF  +VMZ ,7BO)PPSEF 47BO)V⒎FM %5JNNFSNBO 5#PVSOF BOE#7BO$BMTUFS"TQMJOF CBTFEUPPMUPBTTFTTBOEWJTVBMJ[FUIFDBMJCSBUJPOPGNVMUJDMBTTSJTLQSFEJDUJPOT+PVSOBM PG#JPNFEJDBM*OGPSNBUJDT 7PM QQr "QSJM
  61. ࢀߟจݙ 61 w ΧϦϒϨʔγϣϯͷֱਖ਼ํ๏ʹ͍ͭͯ w #BZFTJBO#JOOJH2VBOUJMF w 1MBUU4DBMJOH w *TPUPOJDSFHSFTTJPO

    .BIEJ1BLEBNBO/BFJOJ (SFHPSZ$PPQFS BOE.JMPT)BVTLSFDIU0CUBJOJOHXFMMDBMJCSBUFE QSPCBCJMJUJFTVTJOHCBZFTJBOCJOOJOH7PM QQr  #JBODB;BESP[OZBOE$IBSMFT&MLBO5SBOTGPSNJOHDMBTTJpFSTDPSFTJOUP BDDVSBUFNVMUJDMBTTQSPCBCJMJUZFTUJNBUFT*O1SPDFFEJOHTPGUIF&JHIUI"$. 4*(,%%*OUFSOBUJPOBM$POGFSFODFPO,OPXMFEHF%JTDPWFSZBOE%BUB.JOJOH ,%%`Q &ENPOUPO "MCFSUB $BOBEB "$.1SFTT +PIO$1MBUU1SPCBCJMJTUJD0VUQVUTGPS4VQQPSU7FDUPS.BDIJOFTBOE$PNQBSJTPOTUP 3FHVMBSJ[FE-JLFMJIPPE.FUIPET*O"EWBODFTJO-BSHF.BSHJO$MBTTJpFST QQr .*51SFTT 
  62. "QQFOEJY

  63. ᶃᶄਓ޻σʔλͷൃੜํ๏ 63 w ಛ௃ྔɼX ∼ (0,1), X ∈ ℕ100 w

    ϩδεςΟοΫճؼ͕Ϟσϧͱͯ͠ྑ͍ͱ͢Δσʔλ w ઢܗ༧ଌࢠ ͱ͢Δɽʢ ͸ܾΊଧͪʣ li = aXi + b a, b w ਖ਼ղ֬཰ Λઢܗ༧ଌࢠͷϩδεςΟοΫม׵ͨ͠΋ͷͱ͢Δɼ͢ͳΘͪ pi pi = logistic(li ) = ln exp li 1 + exp li w ϩδεςΟοΫճؼ͕Ϟσϧͱͯ͠ྑ͍ͱ͠ͳ͍σʔλ w ઢܗ༧ଌࢠ ͱ͢Δɽʢ ͸ܾΊଧͪʣ li = aXi + b a, b w ਖ਼ղ֬཰ Λ Λύϥϝʔλʹ΋ͭϕʔλ෼෍͔Βൃੜͤ͞Δ pi αi , βi w αi = logistic(li ), βi = logistic(li ) w ϥϕϧ ͸ਖ਼ղ֬཰ Λύϥϝʔλʹ΋ͭϕϧψʔΠ෼෍͔Βൃੜͤ͞Δɽ yi pi yi = Bernoulli(pi )
  64. ଞͷֱਖ਼ख๏##2 64 w #BZFTJBO#JOOJOH2VBOUJMF w ݸ਺͕ҰఆͷάϧʔϓΛݸ਺ΛมԽ༷ͤͯ͞ʑ༻ҙ    

                                                                                             ϞσϧΤϏσϯε     w ϞσϧΤϏσϯεʢ#%FVɼ#*$ɼ"*$ͳͲʣʹج͍ͮͯॏΈ෇͚ ྫ  ͷ࣌ ̂ p = 0.2  ̂ pcal = 0.25 × 0.6 + 0.33 × 0.1 + 0.5 × 0.2 + . . . = 0.194 ʜ
  65. ᶃ࣮ݧc༧ଌ֬཰ ͱϥϕϧ Λൺֱ͢Δ ̂ pi ytrue,i 65 ϩδεςΟοΫ ճؼ 3'

    .-1 -(#. #SJFS4DPSF     4QJFHFMIBMUFS Q஋     ."&     ਅͷ֬཰ͱͷ ޡࠩ         "6$     w ݁Ռ w ݁Ռ͸෼ྨਫ਼౓ʹ΄΅ґଘ w ͨͩΧϦϒϨʔγϣϯͱͯ͠ͷྑ͞΋෼ྨਫ਼౓ʹؔ܎͋Δ ྑ͍ ѱ͍ w " ϩδεςΟοΫճؼ͕ྑ͍
  66. ᶃධՁํ๏ͷ࣮ݧc݁Ռɼάϧʔϓ෼͚ 66 ϩδεςΟοΫ 3' .-1 -(#. )-ʢൣғʣ Q஋  

        )-ʢݸ਺ʣ Q஋     &$& ݸ਺         ਖ਼ղ֬཰ͱͷ ޡࠩ         w ϩδεςΟοΫճؼ͕ྑ͍ w Πϯόϥϯεσʔλ͸ݸ਺͕Ұఆͷάϧʔϓ෼͚͕ྑ͍ ྑ͍ ѱ͍
  67. 67 ϩδεςΟοΫ 3' .-1 -(#. $PYB    

    $PYC         &$*         ਖ਼ղ֬཰ͱͷ ޡࠩ         w ϩδεςΟοΫճؼ͕ྑ͍ ྑ͍ ѱ͍ w $PYͷํ๏ɼ&$*͸ϩδεςΟοΫճؼΛྑ͍ͱ͢ΔσʔλͳͷͰਖ਼͘͠ධՁ w $PY͸܏͖Bɼ੾ยCΛಉ࣌ʹݟΔඞཁ ᶃධՁํ๏ͷ࣮ݧc݁Ռɼਖ਼ղ֬཰ਪఆ
  68. 68 ϩδεςΟοΫ 3' .-1 -(#. *$*    

       ਖ਼ղ֬཰ͱͷ ޡࠩ         w ϩδεςΟοΫճؼ͕ྑ͍ ྑ͍ ѱ͍ w *$*͸ྑ͘ͳ͍ͱ͢Δ΋ͷ͸ଊ͑ΒΕΔ ᶃධՁํ๏ͷ࣮ݧc݁Ռɼਖ਼ղ֬཰ਪఆ
  69. 69 ϩδεςΟοΫ 3' .-1 -(#. $PYB    

    $PYC     &$*         ਖ਼ղ֬཰ͱͷ ޡࠩ         w ϩδεςΟοΫճؼ͕ྑ͘ͳ͍ ྑ͍ ѱ͍ w $PYɼ&$*͸ਖ਼͘͠ͳ͍ධՁ ϩδεςΟοΫճؼΛྑ͘ͳ͍ͱ͢ΔσʔλͳͷͰ ᶃධՁํ๏ͷ࣮ݧc݁Ռɼਖ਼ղ֬཰ਪఆ
  70. 70 ϩδεςΟοΫ 3' .-1 -(#. *$*    

        ਖ਼ղ֬཰ͱͷ ޡࠩ         w ϩδεςΟοΫճؼ͕ྑ͘ͳ͍ ྑ͍ ѱ͍ w *$*͸ਖ਼͘͠ͳ͍ධՁ w ΠϯόϥϯεσʔλͷͨΊ ᶃධՁํ๏ͷ࣮ݧc݁Ռɼਖ਼ղ֬཰ਪఆ
  71. ᶃ࣮ݧcάϧʔϓ෼͚Λߦ͏ 71 ϩδεςΟοΫ ճؼ 3' .-1 -(#. )-) Q஋ 

        )-$ Q஋      &$& $        ਅͷ֬཰ͱͷ ฏۉೋ৐ޡࠩ     w ݁Ռ w " ϩδεςΟοΫճؼ͕ྑ͘ͳ͍ w όϥϯεσʔλͰ͸)ʢൣғҰఆʣͰ΋ྑ͍ධՁ ྑ͍ ѱ͍ ൣғ ݸ਺ ݸ਺
  72. ᶃᶄ࣮ݧcਖ਼ղ֬཰ͱ༧ଌ֬཰ͷؔ܎ 72 w ϩδεςΟοΫճؼΛྑ͍ͱ͢Δ

  73. ᶃᶄ࣮ݧcਖ਼ղ֬཰ͱ༧ଌ֬཰ͷؔ܎ 73 w ϩδεςΟοΫճؼΛྑ͍ͱ͢Δ

  74. ᶃᶄ࣮ݧcਖ਼ղ֬཰ͱ༧ଌ֬཰ͷؔ܎ 74 w ϩδεςΟοΫճؼΛྑ͍ͱ͢Δ

  75. ᶃᶄ࣮ݧcਖ਼ղ֬཰ͱ༧ଌ֬཰ͷؔ܎ 75 w ϩδεςΟοΫճؼΛྑ͍ͱ͠ͳ͍

  76. 76 ᶃᶄ࣮ݧcਖ਼ղ֬཰ͱ༧ଌ֬཰ͷؔ܎ w ϩδεςΟοΫճؼΛྑ͍ͱ͠ͳ͍

  77. 77 ᶃᶄ࣮ݧcਖ਼ղ֬཰ͱ༧ଌ֬཰ͷؔ܎ w ϩδεςΟοΫճؼΛྑ͍ͱ͠ͳ͍

  78. ᶃᶄ࣮ݧcશΧϦϒϨʔγϣϯϓϩοτ 78 w ϩδεςΟοΫճؼΛྑ͍ͱ͢Δ

  79. ᶃᶄ࣮ݧcશΧϦϒϨʔγϣϯϓϩοτ 79 w ϩδεςΟοΫճؼΛྑ͍ͱ͢Δ

  80. ᶃᶄ࣮ݧcશΧϦϒϨʔγϣϯϓϩοτ 80 w ϩδεςΟοΫճؼΛྑ͍ͱ͢Δ

  81. ᶃᶄ࣮ݧcશΧϦϒϨʔγϣϯϓϩοτ 81 w ϩδεςΟοΫճؼΛྑ͍ͱ͠ͳ͍

  82. ᶃᶄ࣮ݧcશΧϦϒϨʔγϣϯϓϩοτ 82 w ϩδεςΟοΫճؼΛྑ͍ͱ͠ͳ͍

  83. ᶃᶄ࣮ݧcશΧϦϒϨʔγϣϯϓϩοτ 83 w ϩδεςΟοΫճؼΛྑ͍ͱ͠ͳ͍