Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Sign up for free
Menu
Search
Features
All features
Private URLs
Password Protection
Custom URLS
Scheduled publishing
Remove Branding
Restrict embedding
Deck Collections
Notes
Features
All features
Private URLs
Password Protection
Custom URLS
Scheduled publishing
Remove Branding
Restrict embedding
Deck Collections
Notes
Explore
Featured decks
Featured speakers
Programming
Technology
Storyboards
Explore
Featured decks
Featured speakers
Programming
Technology
Storyboards
Pricing
Search
Sign in
Sign up for free
AI-OCRはどうやって精度を計測しているか
Search
hikiaki
October 29, 2019
Business
1.5k
0
Share
Embed
Copy iframe code
Copy JS code
Copy link
Start on current slide
AI-OCRはどうやって精度を計測しているか
hikiaki
October 29, 2019
Transcript
27 slides
AI-OCR は × 2019/10/29 RPA勉強&LT会! RPALT⼥⼦部 vol.4 株式会社アジラ 引間 明⼦
Akiko Hikima どうやって精度を計測しているか
#RPALT Introduction ⽣命保険会社の汎⽤機(COBOL)開発、 @cosmeサロン(当時ispot)のweb・app開発、 クラウド (Salesforce)開発、LeapMindを経て、 2019/06からAsillaにJoin。 Asillaではアプリケーション事業部にて、 「やさしい」AI-OCR JijillaのPMをやってます。
実は、AgritechがやりたくてAsillaにJoinしまし た。Drone⾶ばしたい! 引間 明⼦ Akiko Hikima Presented by @aki8h3
#RPALT Whatʼs asilla? 画像認識技術を中⼼とした ソリューションを開発・提供する AIスタートアップ企業。 【第⼀回⼈⼯知能EXPO】株式会社アジラの⾏動認識技術デモ 2017年6⽉ 第⼀回⼈⼯知能EXPOに 「⾏動認識技術」を出展
2018年10⽉ ⼿書き⽂字OCRを 「AIビジネス展2018」 にて発表 2019年度、 経産省の【J-Startup】 に選定していただきました。 特許番号 6525181 ⾏動推定装置 特許番号 6525180 対象数特定装置 特許番号 6525179 ⾏動推定装置(背景) ⼿書き・活字に対応の AI-OCR【ジジラ】SaaS版を 2019年7⽉リリース。 ⾏動認識技術に関する特許を取得し、 画像認識技術に関する特許も出願準備中 Presented by 各種⼿書き帳票・活字帳票を読み取り、 テキスト化する⽂字認識ソリューション
#RPALT Presented by アジラは アジアのゴジラに なりたい!
#RPALT Presented by アジラが開発した ⽂字認識サービス 字々ラ!?ジジラ!!
#RPALT Presented by 体感として、 公開している精度(この場合は90%とします)を 感じない 導⼊後に出るAI-OCRへの不満 お悩み
#RPALT Presented by そもそも精度ってどうやって計測するの?? 導⼊後に出るAI-OCRへの不満 お悩み
#RPALT Presented by 1. CER(Character Error Rate) 精度はどうやって計測するの? ⽂字を1⽂字ずつ⽐較して計算する 2.
WER(Words Error Rate) 単語の単位で⽐較して計算する CERとWER、2つの主流な計測⼿法があります
#RPALT Presented by CER=wrong character/total character (不正解⽂字数/合計⽂字数) 合計⽂字数に対する、不正解⽂字数の割合で 算出します (認識)精度=1-CER
精度はどうやって計測するの? CER(Character Error Rate)=⽂字誤り率
#RPALT Presented by 精度はどうやって計測するの? を ”いんご” と認識した場合 (認識)精度=1-(1/3) ※ 1-(不正解⽂字数/合計⽂字数)
の認識精度は、66.67% 例)
#RPALT Presented by 1. りんご ・・・ 1-(3/3) = 100% 2.
りんこ ・・・ 1-(1/3) = 66.67% 3. りん ・・・ 1-(1/3) = 66.67% 4. レノんご ・・・ 1-(2/4) = 50% 5. いりんご ・・・ 1-(1/4) = 75% 精度はどうやって計測するの? 例) 認識結果 精度
#RPALT Presented by 精度はどうやって計測するの? サービス全体の精度=n⼈×n種類の帳票の 1-CER n⼈が⼿書き n種類の帳票の ⽂字数 1-(不正解⽂字数
-合計⽂字数)
#RPALT Presented by 精度はどうやって計測するの? 精度とは、あくまで精度計測⽤の帳票で計測した数値であるため、 ⾃社で同等の数値が出るとは限らない 精度計測⽤の帳票 ⾃社の帳票 数字多め? 表あり?
⽂字⼩さめ? 全⾓⽂字多め? 表なし ⽂字⼤きめ? 条件も全然違う
#RPALT Presented by 10件中9件が正解 10件全ての⽂字が9割の確率で認識出来る 精度はどうやって計測するの? 1枚の帳票に認識対象の項⽬が10件あった場合 ここに開発者側とユーザー側の認識の差がある 精度90%とは?
#RPALT Presented by 精度はどうやって計測するの? 帳票を スキャンして ジジって 確認 AI-OCRの⼀般的な運⽤フロー
#RPALT Presented by 精度はどうやって計測するの? 精度90%と聞いていたので、 9/10件は確認しなくて良いと思っていたのに… 結局全部確認しなくちゃいけないの!!??
#RPALT Presented by 精度はどうやって計測するの? 全部確認が必要ですが、 全部でもない!! と⾔うのが本当のところ どゆこと!!??
#RPALT Presented by 精度はどうやって計測するの? AI-OCRはたくさんのデータで学習をして、 たくさんのデータでテストをしています 苦⼿な点を明確にルール化 しやすい!
#RPALT Presented by 精度はどうやって計測するの? 例えば 君の場合 なぜか郵便記号「〒」が 認識出来ない カタカタの「テ」と 認識してしまう
似た⽂字の誤認識問題は あるある!
#RPALT Presented by 精度はどうやって計測するの? この場合 君は毎回「テ」と認識します そのため、住所で、後続が数字の場合は「テ」を「〒」へ置換する と⾔うルールが出来ます ルール化出来れば、補正辞書が使えます AI-OCRベンダーに⾔えば、おそらく後処理で対応してくれます
ボクらも 精度上げたい
#RPALT Presented by たくさんのデータがあるからこそ、苦⼿な点が明確になっている 使えば使うほど、苦⼿な点を把握出来るので 確認にかかる時間は少なくなります 精度はどうやって計測するの? ⼤変なのは 把握するまで!!??
#RPALT Presented by 各社のAI-OCRサービスは、絶対強みと弱みがあります 精度に惑わされず、⾃社の帳票に合わせて、 きちんとベンダー選定をすることが⼤事です 精度はどうやって計測するの? 強みと弱み!!??
#RPALT Presented by 私はしばしば数字に惑わされる。 ⾃分⾃⾝に当てはめる場合はなおさらだ。 ディズレイリの⾔葉「嘘には三種類ある:嘘、 まっかな嘘、そして統計」が正当性と説得⼒を もって通⽤してしまうんだ。 マーク・トウェイン トム・ソーヤーの冒険の
著者だぞう!!
#RPALT Presented by 出典元: ASIA FUTURE https://www.asia-future.com/statistics
#RPALT Presented by Plese join slack for Jijilla!! ジジラくんへの質問
#RPALT ちなみに Powered by いらすとや ではない ジジラくん募集中です!! Presented by 誰かデザインして!
None
More Decks by hikiaki
See All by hikiaki
DIGITAL WORLD ONLINE 2021 WINTER 4日前祭 コロナ撲滅DX
hikiaki
0
530
LINEで叶える、ニューノーマルな経理のカタチ
hikiaki
0
230
Introduction of LINE API at 20200930 freee×IBM×LINE勉強会
hikiaki
0
700
面倒な申請処理もLINEで自動化!eKYCforLINEBRAIN
hikiaki
0
540
Panas○nicの女子家電をドローンで飛ばしたい
hikiaki
0
710
AI-OCRはどうやって文字を読み取るのか.pdf
hikiaki
0
720
AI-OCRはどうやって文字を読み取るのか
hikiaki
0
630
AI-OCRベンダーがもの申す!AI-OCRの役割を理解していますか?
hikiaki
0
1.4k
AI-OCRとRPAの関係性
hikiaki
0
760
Other Decks in Business
See All in Business
20261024_スクラム祭り三島
kgnkhkr
1
570
ソニックガーデン経営組織論(2026/11版)
kuranuki
2
320
20261022_【DCC】トークン化国債・オンチェーンレポWG_中間整理_本紙
progmat
0
1.5k
Wantedly, Inc. 会社説明資料/Wantedly Recruitment Brochure
wantedly
2
56k
【UMed】Company Deck_261026
ryushu
0
410
Give people back the work they were hired to do
ediel
0
220
せたがや家の終活ナビ 登録事業者さま向け 参加ガイド
microbaseinc
0
200
事業本部紹介資料_261101
mwktp
0
160
【Progmat】Monthly-ST-Market-Report-2026-Oct.
progmat
0
610
Session 5 - Teknik Lobby dan Negosiasi
adeputra13
0
520
スマートキャンプ株式会社 会社紹介資料 / companydeck
smartcamp
1
6.1k
A Management Theory for the Age of AI - What Could Your Organisation Become?
stuartwintertear
0
120
Featured
See All Featured
エンジニアに許された特別な時間の終わり
watany
109
250k
Building a A Zero-Code AI SEO Workflow
portentint
PRO
0
830
What's in a price? How to price your products and services
michaelherold
247
13k
SEO for Brand Visibility & Recognition
aleyda
0
4.9k
HU Berlin: Industrial-Strength Natural Language Processing with spaCy and Prodigy
inesmontani
PRO
0
810
Crafting Experiences
bethany
1
440
Lightning talk: Run Django tests with GitHub Actions
sabderemane
0
320
The Illustrated Guide to Node.js - THAT Conference 2024
reverentgeek
1
610
Claude Code のすすめ
schroneko
67
230k
So, you think you're a good person
axbom
PRO
2
2.3k
AI Search: Implications for SEO and How to Move Forward - #ShenzhenSEOConference
aleyda
1
1.4k
Agile Actions for Facilitating Distributed Teams - ADO2019
mkilby
0
340