BADオープンデータ供養寺 〜本当にあったデータの怖い話〜

Code for Japan Summit 2020のセッション「BADオープンデータ供養寺 〜本当にあったデータの怖い話〜」におけるイントロダクション資料です。
https://summit2020.code4japan.org/program/?id=149

Transcript

1. ό
   ỽ
   υ
   Φ
   ồ
   ϓ
   ϯ
   σ
   ồ
   λ
   ڙ
   ཆ
   ࣉ
   本
   当
   #
   $
   %
   &
   !
   "
   #
   '
   怖
   )
   話
   

   View Slide

2. ό
   ỽ
   υ
   Φ
   ồ
   ϓ
   ϯ
   σ
   ồ
   λ
   ڙ
   ཆ
   ࣉ
   ͸
   ỏ
   ͜
   ͷ
   ੈ
   Λ
   ͞
   ·
   Α
   ͏
   ό
   ỽ
   υ
   Φ
   ồ
   ϓ
   ϯ
   σ
   ồ
   λ
   Λ
   ڙ
   ཆ
   ớ
   ử
   σ
   ồ
   λ
   Ϋ
   Ϩ
   ϯ
   δ
   ϯ
   ά
   Ờ
   ͠
   ͯ
   ỏ
   ά
   ỽ
   υ
   σ
   ồ
   λ
   ʹ
   ੜ
   ·
   Ε
   ม
   Θ
   Β
   ͤ
   Δ
   ํ
   ๏
   Λ
   ڞ
   ༗
   ͢
   Δ
   ৔
   ॴ
   Ͱ
   ͢
   Ố
   

   View Slide

3. ό
   ỽ
   υ
   Φ
   ồ
   ϓ
   ϯ
   σ
   ồ
   λ
   ͱ
   ͸
   u
   ෼
   ੳ
   Λ
   ͠
   ͨ
   Γ
   ỏ
   α
   ồ
   Ϗ
   ε
   Λ
   ࡞
   ỳ
   ͨ
   Γ
   ͠
   Α
   ͏
   ͱ
   ͠
   ͨ
   ࣌
   ʹ
   ỏ
   ࢖
   ༻
   Մ
   ೳ
   ͳ
   ܗ
   ࣜ
   ʹ
   ͳ
   ỳ
   ͯ
   ͍
   ͳ
   ͍
   Φ
   ồ
   ϓ
   ϯ
   σ
   ồ
   λ
   u
   ࢖
   ͑
   Δ
   Α
   ͏
   ʹ
   ͢
   Δ
   ʹ
   ͸
   ๲
   େ
   ͳ
   ख
   ؒ
   ͕
   ͔
   ͔
   Δ
   u
   த
   ʹ
   ͸
   σ
   ồ
   λ
   ͷ
   ղ
   ऍ
   ʹ
   ࢧ
   ো
   Λ
   ͖
   ͨ
   ͢
   Α
   ͏
   ͳ
   ڟ
   ѱ
   ͳ
   ΋
   ͷ
   ΋
   ͋
   Γ
   ỏ
   ؾ
   ෇
   ͔
   ͣ
   ʹ
   ࢖
   ỳ
   ͯ
   ͠
   ·
   ͏
   ͱ
   ൵
   ࢂ
   

   View Slide

4. #"%σʔλ͕͋Δͱ
   αʔϏεશମʹ࠷ޙ·ͰӨڹ͕࢒Δ
   #"%σʔλΛ࢖ͬͯαʔϏεΛ࣮ݱ͢Δͱɺ్தͷαʔϏεΛͲΜͳʹ඼
   ࣭ߴ͘࡞ͬͯ΋ɺ࠷ޙ·Ͱ#"%σʔλͷӨڹΛड͚ଓ͚Δ͜ͱʹͳΔ
   ISO/IEC 25024:2015 Systems and software engineering -- Measurement of data qualityより翻訳
   σʔλઃܭ σʔλऩू
   σʔλ౷߹
   ֎෦σʔλ
   औಘ
   σʔλ
   ॲཧ
   ެ։
   ͦͷଞͷ
   ར༻
   σʔλ஝ੵ
   ࡟আ
   BADデータ
   

   View Slide

5. ࣄྫɿ๭ళฮ."1
   • ๭ΩϟϯϖʔϯʹࢀՃ͍ͯ͠ΔళฮΛ஍ਤ্ʹදࣔ͢Δ
   αʔϏε͕ެ։͞Ε͕ͨʜ
   2020/10/13 データの品質、どう測る？ 5
   εφοΫګࢠ
   εφοΫګࢠ
   εφοΫګࢠ
   εφοΫګࢠ
   εφοΫګࢠ
   ಉ͡ళฮ໊͕ෳ਺
   ࣮ࡍͷҐஔͱͣΕͨ৔ॴʹϐϯ͕
   ཱͬͯ͠·ͬͨΓʢಓ࿏্ͱ͔ʣ
   ஍ਤදࣔͷΞϓϦέʔγϣϯͷ
   6*69Λ޻෉ͨ͠ͱ͜ΖͰ
   αʔϏε඼࣭͸޲্͠ͳ͍
   

   View Slide

6. αʔϏεͷཪଆͰى͍ͬͯͨ͜
   Մೳੑͷ͋Δσʔλͷ໰୊
   • ෳ਺ͷσʔλιʔε༝དྷͷళฮ৘ใͷʮ໊دͤʯ͕׬શʹग़དྷ͍ͯͳ͔ͬ
   ͨʢ໊دͤɿಉ͡ର৅Λࣔ͢σʔλ͕ॏෳ͠ͳ͍Α͏ʹॲཧ͢Δ͜ͱʣ
   2020/10/13 データの品質、どう測る？ 6
   ళฮσʔλ
   ࣄۀऀ ౷߹൛ళฮσʔλ
   ໊دͤʹ
   ࣦഊͯ͠
   ॏෳൃੜ
   αʔϏε
   

   View Slide

7. ࢀߟɿ໊دͤ͸ҙ֎ͱ໽հ
   • ໊دͤͷडୗαʔϏε౳Ͱ͸͔ͳΓߴ౓ͳϩδοΫΛ૊ΜͰ͍ͨΓ͢Δ
   2020/10/13 データの品質、どう測る？ 7
   ళฮ໊͚ͩͰ͸ແཧ ళฮ໊ॅॴʁ ళฮ໊ి࿩൪߸ʁ
   εφοΫګࢠ
   දه༳Ε͕͋ͬͨΓ
   ͢ͳͬ͘ګࢠ
   εφοΫ͖ΐ͏͜
   ಉ໊͡લͷผళฮ͕͋ͬͨΓ
   εφοΫګࢠ
   εφοΫګࢠ
   ౦ژ౎ઍ୅ా۠բ͕ؔ̏ʵ̏ʵ̍
   ౦ژ౎ઍ୅ా۠բ͕ؔ
   ౦ژ౎բ͕ؔ̏ʵ̏ʵ̍
   ઍ୅ా۠բ͕ؔ̏ʵ̏ʵ̍
   ߓ۠բ͕ؔ̏ʵ̏ʵ̍
   ౦ژ౎ઍ୅ా۠բ͕ؔࡾஸ໨൪߸
   ౦ژ౎ઍ୅ా۠բ͕ؔࡾஸ໨̏ʵ̍
   ౦ژ౎ઍ୅ా۠բ͕ؔ̏ஸ໨൪߸
   ౦ژ౎ઍ୅ా۠բ͕ؔ̏ஸ໨̏ʵ̍
   ౦ژ౎ઍ୅ా۠բ͕ؔஸ໨̏ʵ̍
   දه͕Կύλʔϯ΋͋ΔͷͰ
   ·ͣॅॴͷॲཧ͕ඞཁ
   
   Ҡసͷؔ܎ͰมΘ͍ͬͯͨΓ
   ʢσʔλιʔε͝ͱͷ
   ऩूͷλΠϛϯάͷҧ͍ʣ
   
   ࢢ֎ہ൪͋Γͳ͠ͷࠞࡏ
   
   
   

   View Slide

8. #"%σʔλ͕΋ͨΒ͢ܦࡁଛࣦ
   ར༻ऀଆͰ౎౓Ճ޻ίετ͕͔͔Δ
   2020/10/13 データの品質、どう測る？ 8
   

   View Slide

9. ެ։ݩͰ(00%σʔλʹม׵ͯ͠ެ։
   2020/10/13 データの品質、どう測る？ 9
   ࣾձશମͰແବͳίετΛݮΒͤΔ
   

   View Slide

10. ủ
    ڙ
    ཆ
    Ứ
    ͱ
    ͍
    ͏
    ί
    ϯ
    η
    ϓ
    τ
    u
    ό
    ỽ
    υ
    σ
    ồ
    λ
    ͸
    ୭
    ͔
    Λ
    ۤ
    ͠
    Ί
    Α
    ͏
    ͱ
    ҙ
    ਤ
    ͠
    ͯ
    ࡞
    Β
    Ε
    ͨ
    ༁
    Ͱ
    ͸
    ͋
    Γ
    ·
    ͤ
    Μ
    u
    ࡞
    ੒
    ऀ
    ͸
    ỏ
    ద
    ੾
    ͳ
    σ
    ồ
    λ
    ܗ
    ࣜ
    ͕
    Ͳ
    ͷ
    Α
    ͏
    ͳ
    ΋
    ͷ
    ͔
    ஌
    Β
    ͳ
    ͔
    ỳ
    ͨ
    Մ
    ೳ
    ੑ
    ͕
    ͋
    Γ
    ·
    ͢
    u
    ͠
    ͔
    ͠
    ỏ
    ό
    ỽ
    υ
    σ
    ồ
    λ
    ͸
    ೋ
    ౓
    ͱ
    ͜
    ͷ
    ੈ
    Λ
    ኲ
    ኾ
    Θ
    ͳ
    ͍
    Α
    ͏
    ʹ
    ੒
    ෹
    ͞
    ͤ
    Δ
    ඞ
    ཁ
    ͕
    ͋
    Γ
    ·
    ͢
    

    View Slide

11. ό
    ỽ
    υ
    Φ
    ồ
    ϓ
    ϯ
    σ
    ồ
    λ
    ڙ
    ཆ
    ࣉ
    本
    当
    #
    $
    %
    &
    !
    "
    #
    '
    怖
    )
    話
    

    View Slide

12. Ұ
    ỏ
    ͜
    Μ
    ͳ
    ό
    ỽ
    υ
    Φ
    ồ
    ϓ
    ϯ
    σ
    ồ
    λ
    ͸
    ݏ
    ͩ
    ݹ
    ઒
    ହ
    ਓ
    ೋ
    ỏ
    ࡛
    ۄ
    ͷ
    ढ
    Θ
    Ε
    ͨ
    ۄ
    ؔ
    ࣏
    ೭
    ࡾ
    ỏ
    ͜
    Μ
    ͳ
    ࣉ
    ͸
    ݏ
    ͩ
    ฏ
    ຊ
    ݈
    ೋ
    ࢛
    ỏ
    ό
    ỽ
    υ
    Φ
    ồ
    ϓ
    ϯ
    σ
    ồ
    λ
    ͋
    Ε
    ΍
    ͜
    Ε
    ΍
    ྛ
    ਖ਼
    ༸
    ޒ
    ỏ
    Ϛ
    Π
    φ
    ϯ
    ό
    ồ
    ͱ
    ͍
    ͏
    ό
    ỽ
    υ
    σ
    ồ
    λ
    େ
    ࢁ
    ਫ
    ൕ
    ࿡
    ỏ
    ೲ
    ඼
    ෺
    ͕
    ό
    ỽ
    υ
    σ
    ồ
    λ
    ˑ
    ઍ
    ༿
    େ
    ӈ
    ࣣ
    ỏ
    ࣮
    ࡍ
    ʹ
    ͋
    ỳ
    ͨ
    ί
    ồ
    υ
    ͷ
    ࿩
    ߴ
    ໦
    ༞
    հ
    本
    当
    #
    $
    %
    &
    !
    "
    #
    '
    怖
    )
    話
    

    View Slide

13. σ
    ỹ
    ε
    Χ
    ỽ
    γ
    ἀ
    ϯ
    本
    当
    #
    $
    %
    &
    !
    "
    #
    '
    怖
    )
    話
    Ұ
    ỏ
    σ
    ồ
    λ
    ఏ
    ڙ
    ऀ
    ͸
    Կ
    Λ
    ͢
    ΂
    ͖
    ͔
    ʁ
    ඼
    ࣭
    ͷ
    ߴ
    ͍
    σ
    ồ
    λ
    Λ
    ࡞
    Δ
    ͨ
    Ί
    ͷ
    औ
    Γ
    ૊
    Έ
    ౳
    ೋ
    ỏ
    σ
    ồ
    λ
    ར
    ༻
    ऀ
    ͸
    Կ
    Λ
    ͢
    ΂
    ͖
    ͔
    ʁ
    σ
    ồ
    λ
    ʹ
    ؚ
    ·
    Ε
    Δ
    Τ
    ϥ
    ồ
    Λ
    ൃ
    ݟ
    ͢
    Δ
    ͨ
    Ί
    ͷ
    ޻
    ෉
    ౳
    

    View Slide

14. Α
    Γ
    ྑ
    ͍
    Φ
    ồ
    ϓ
    ϯ
    σ
    ồ
    λ
    Λ
    Έ
    Μ
    ͳ
    Ͱ
    ࡞
    ỳ
    ͯ
    ߦ
    ͖
    ·
    ͠
    Ỷ
    ͏
    

    View Slide