NGレシート検知モデルの作成

モバイル端末で画像分類を行った話。
使用技術：Python, Xcode, CoreML, MobileNet

1. ©︎ WED, Inc. WEDגࣜձࣾ ʛ ੴ઒࿨थ NGϨγʔτ
 ݕ஌Ϟσϧͷ࡞੒
2. 2 ࣗݾ঺հ ੴ઒࿨थ ུྺ 2024೥3݄ ໊ݹ԰େֶେֶӃ ଔۀ ಉ೥4݄ɹ WEDגࣜձࣾ ೖࣾ ৬छ ػցֶशΤϯδχΞ झຯ • Ṗղ͖ɺύζϧ • ిࢠϐΞϊ
4. 4 ϨγʔτOCR ࡱӨ OCR ςΩετ ingenoël ϥϯδΣϊΤϧΠΦϯ Ϟʔϧژ౎ܡ઒ళ ژ౎ࢢೆ۠ٱੈߴాொ 376-1 ΠΦϯ075-925-0502Ϟʔ ϧژ౎ܡ઒1f ຖ౓͋Γ͕ͱ͏͍͟͝· ͢ɻ 2014೥06݄18೔(Ր)11:51 31wb500800zz ֎ϫίʔϧόʔήϯ
5. 5 ϨγʔτOCR ࡱӨ OCR ςΩετ 😢 OCRͷલஈ֊Ͱɺෆ઱໌ͳը૾Λ஄͖͍ͨ
6. 6 ΍Γ͍ͨ͜ͱ ࡱӨ NGϨγʔτ ݕ஌ ωΠςΟϒ Ϋϥ΢υ OCR OK NG
7. 7 ஄͖͍ͨϨγʔτ • ͦ΋ͦ΋Ϩγʔτ͡Όͳ͍ • ΅΍͚͍ͯΔ • ҉͗͢Δ • άγϟάγϟʹͳͬͯΔ • ࢦͳͲ͕Ϩγʔτʹඃ͍ͬͯΔ
8. 8 ࢖༻ٕज़ CoreML • iOSͰػցֶशΛѻ͏ͨΊͷϑϨʔϜϫʔΫ • SwiftͰॻ͚Δ • ը૾ɺݴޠɺԻ੠ͳͲ৭ʑରԠ͍ͯ͠Δ MobileNet V3 • ը૾෼ྨϞσϧ • ϞόΠϧ୺຤Ͱಈ͔ͤΔ͘Β͍ܰྔ ◦ 6.1MB
9. 9 ֶशσʔλ OCR݁ՌͰจࣈ͕ݕग़͞Εͳ͔ͬͨը૾Λऩू • ΅΍͚͍ͯΔ • ҉͗͢Δ • Ϩγʔτ͡Όͳ͍
10. Ϟσϧͷ࡞੒ 1. PyTorchͰϞσϧΛֶश 2. CoreMLϞσϧʹม׵ 10
11. 11 ωΠςΟϒ࣮૷
12. 12 σϞ https://youtube.com/shorts/3EeoonhU0So?feature=share
13. 13 ग़ྗྫ OK: 1.0 NG: 0.99 NG: 0.99
14. 14 ग़ྗྫ OK: 0.90 OK: 1.0 OK: 1.0
15. 15 ·ͱΊ NGϨγʔτݕ஌ϞσϧΛ࡞੒ • ωΠςΟϒͰಈ͔ͤΔΑ͏ɺܰྔͳϞσϧΛ࠾༻ ݁Ռ • ΅΍͚͍ͯΔը૾ɺ҉͗͢Δը૾ɿ👍 • Ϩγʔτ͡Όͳ͍ը૾ɿ😢 ◦ ֶशσʔλෆ଍ʁ • άγϟάγϟͷϨγʔτɺࢦ͕ඃ͍ͬͯΔϨγʔτ΋NGʹ͍ͨ͠