Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
AmazonTextractの信頼スコアはどれくらい信頼できるのか
Search
n-oshiumi
July 31, 2019
Technology
0
800
AmazonTextractの信頼スコアはどれくらい信頼できるのか
RPA COMMUNITYのRPALT vol.12の資料です。
n-oshiumi
July 31, 2019
Tweet
Share
More Decks by n-oshiumi
See All by n-oshiumi
UiPathの単体テストのお話
oshiumi
0
880
疑問・知識・経験をもっとオープンに
oshiumi
0
820
最近なーんとなく考えていること。○○vs○○
oshiumi
0
320
Other Decks in Technology
See All in Technology
Grafana MCPサーバーによるAIエージェント経由でのGrafanaダッシュボード動的生成
hamadakoji
1
1k
Browser
recruitengineers
PRO
8
2.2k
トヨタ生産方式(TPS)入門
recruitengineers
PRO
6
1.4k
AI時代に非連続な成長を実現するエンジニアリング戦略
sansantech
PRO
3
930
ガチな登山用デバイスからこんにちは
halka
1
200
Flutterでキャッチしないエラーはどこに行く
taiju59
0
210
【Grafana Meetup Japan #6】Grafanaをリバプロ配下で動かすときにやること ~ Grafana Liveってなんだ ~
yoshitake945
0
220
【 LLMエンジニアがヒューマノイド開発に挑んでみた 】 - 第104回 Machine Learning 15minutes! Hybrid
soneo1127
0
250
250905 大吉祥寺.pm 2025 前夜祭 「プログラミングに出会って20年、『今』が1番楽しい」
msykd
PRO
1
220
つくって納得、つかって実感! 大規模言語モデルことはじめ
recruitengineers
PRO
32
12k
実践アプリケーション設計 ②トランザクションスクリプトへの対応
recruitengineers
PRO
4
1.2k
PRDの正しい使い方 ~AI時代にも効く思考・対話・成長ツールとして~
techtekt
PRO
0
340
Featured
See All Featured
Documentation Writing (for coders)
carmenintech
73
5k
BBQ
matthewcrist
89
9.8k
Fantastic passwords and where to find them - at NoRuKo
philnash
52
3.4k
Thoughts on Productivity
jonyablonski
69
4.8k
The Success of Rails: Ensuring Growth for the Next 100 Years
eileencodes
46
7.6k
Practical Tips for Bootstrapping Information Extraction Pipelines
honnibal
PRO
23
1.4k
Put a Button on it: Removing Barriers to Going Fast.
kastner
60
4k
A designer walks into a library…
pauljervisheath
207
24k
Helping Users Find Their Own Way: Creating Modern Search Experiences
danielanewman
29
2.8k
The Power of CSS Pseudo Elements
geoffreycrofte
77
5.9k
The Web Performance Landscape in 2024 [PerfNow 2024]
tammyeverts
9
790
The Pragmatic Product Professional
lauravandoore
36
6.8k
Transcript
Amazon Textract(OCR)の 信頼スコアを徹底調査してみた! アジアクエスト株式会社 鴛海直輝(おしうみなおき)
自己紹介 鴛海 直輝(おしうみ なおき) ▪本読む ▪ストリートダンスする ▪ Laravelでwebアプリ作る 2019年4月に新卒で入社し、 UiPathを用いていろいろ経験中
今日はRPALT初登壇!!
目次 1. Amazon Textractとは 2. 信頼スコアはどれほど信頼できるのか 3. まとめ
1. Amazon Textractとは
1. Amazon Textractとは 【概要】 AmazonのOCRサービス 2019年5月に一般公開された 【特徴】 ・クラウド上で動く ・APIも使える ・値段が安い!(従量課金制)
・AIでフォームや表を読み取ることができる ・信頼スコアが分かる ・手書きは対応していない ・まだ日本語対応されていない
とにかく安い! API 料金 Detect Document API (文字を読み取る) 約0.16円 / ページ
Analyze Document API (文字とフォームを読み取る) 約1.62円 / ページ Analyze Document API (文字と表を読み取る) 約5.39 円 / ページ Analyze Document API (文字とフォームと表を読み取る) 約7.01円 / ページ ※100万ページまでの料金
「信頼スコア」とは ▪OCRで読み取ったテキストの正確性を表す ▪0~100の間の数字 Amazon Textract テキスト :kasutera 信頼スコア:96.8 ※画像です
信頼スコアで目視確認が楽になる!? 【今】 OCRで紙資料を 読み取る RPAで処理する 目視で確認する 信頼スコアが特定の値を下回ったら警告を出すようにす れば、目視確認が楽になる OK
信頼スコアで目視確認が楽になる!? 【これから】 OCRで紙資料を 読み取る RPAで処理する 目視で確認する 信頼スコアが特定の値を下回ったら警告を出すようにす れば、目視確認が楽になる OK 特定の点数以下
の場合のみ
2. 信頼スコアは信頼できるのか
信頼スコアの検証方法 Amazon Textract テキスト :kasutera 信頼スコア:96.8 ※画像です 正確
Amazon Textractの信頼スコア Amazon Textract テキスト :Customer IO 信頼スコア:82.6 ※画像です 不正確
信頼スコアの検証方法 画像を読み込ませる ①単語が正確な場合 ②単語が不正確な場合 2つに分類して信頼スコアを記録 【レスポンス】 ・単語 ・信頼スコア
単語が正確な場合の検証結果 ①90点以上が約80%を占める 単語が正確な場合の信頼スコア ②50~70点台が約15%を占める 【特徴】 ▪文字サイズが小さい ▪英数字1文字
単語が不正確な場合の検証結果 ①80点以上が約79%を占める 単語が不正確な場合の信頼スコア 【特徴】 ▪1文字だけ間違っている Customer IO
単語が不正確な場合の検証結果 ①80点以上が約79%を占める 単語が不正確な場合の信頼スコア
3. まとめ
信頼スコアの傾向 【単語が正確な場合】 ①90点以上が8割 ②50~70点台が約15%を占める 【単語が不正確な場合】 ③80点以上が約79%を占める 【②の特徴】 ▪文字サイズが小さい ▪英数字1文字 【③の特徴】
▪1文字だけ間違っている Customer IO
信頼スコアは工夫すれば使える 英数字1文字のところは 信頼スコアを使用しない RPAツール側で Customer IOと読み取っても 正常に処理するよう工夫する
信頼スコアは工夫すれば使える RPAツール側で Customer IOと読み取っても 正常に処理するよう工夫する
OCRの世話をする必要がなくなる! 【これから】 OCRで紙資料を 読み取る RPAで処理する 目視で確認する 信頼スコアが特定の値を下回ったら警告を出すようにす れば、目視確認が楽になる OK 特定の点数以下
の場合のみ