Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
191211 WinActor®画像マッチング~ 傾向と対策 ~ 林 邦洋さん
Search
RPACommunity
December 11, 2019
Technology
0
230
191211 WinActor®画像マッチング~ 傾向と対策 ~ 林 邦洋さん
RPACommunity
December 11, 2019
Tweet
Share
More Decks by RPACommunity
See All by RPACommunity
201023 Automation Anywhere「A2019」を触ってみた Ayy
rpabank
0
930
201023 DX Suiteを触ってみた Ayy
rpabank
0
920
201023 RPA超初心者がWinActorにチャレンジしてみた ユーコさん
rpabank
0
560
201023 PowerPlatform はじめの一歩 みさみささん
rpabank
0
520
201023 アシロボで実際に沼ってみた たまいさん
rpabank
0
590
201018 RPAの本質とトレンド Mitz
rpabank
0
440
201006 僕がいまRPAで伝えたいことのすべて いろはまるさん
rpabank
0
400
201006 UiPath MVP 2019-2020 はなっち!さん
rpabank
0
390
201006 今からでも間に合う!UiPathトーク一気に振り返り たまいさん
rpabank
0
350
Other Decks in Technology
See All in Technology
NewSQL Landscape
oracle4engineer
PRO
5
3.2k
大規模言語モデル (LLM)における低精度数値表現
pfn
PRO
3
810
B2C、B2B プロダクトマネジメントの違い(および思考の罠) / B2C, B2B PM and reduction fallacy
ykmc09
5
2.3k
【TSkaigi】2024/05/11 当日スライド
kimitashoichi
14
3.9k
PHP 9 に備えよ - 動的プロパティ、どうすればいぃ?
taisukearase
0
310
TailwindCSSでUIライブラリを作る際のハマりどころ
shuta13
0
230
汎用ポリシー言語Rego + OPAと認可・検証事例の紹介 / Introduction Rego & OPA for authorization and validation
mizutani
1
150
Laboratories in Science and Technology: Deep Neural Networks
keio_smilab
PRO
3
120
SWC Transformerから見るTypeScript関数記述ベストプラクティス
fujiyamaorange
1
170
TDD - Test Driven Drupal
opdavies
0
3k
回り回って効いてくる副次的効果としての技術広報/techpr
nishiuma
1
180
試作とデモンストレーション / Prototyping and Demonstrations
ks91
PRO
0
160
Featured
See All Featured
Principles of Awesome APIs and How to Build Them.
keavy
121
16k
Ruby is Unlike a Banana
tanoku
96
10k
Put a Button on it: Removing Barriers to Going Fast.
kastner
58
3.1k
Why You Should Never Use an ORM
jnunemaker
PRO
51
8.7k
The Psychology of Web Performance [Beyond Tellerrand 2023]
tammyeverts
15
1.6k
Side Projects
sachag
451
41k
Design by the Numbers
sachag
274
18k
Making the Leap to Tech Lead
cromwellryan
125
8.6k
Stop Working from a Prison Cell
hatefulcrawdad
266
19k
The Art of Programming - Codeland 2020
erikaheidi
43
12k
Reflections from 52 weeks, 52 projects
jeffersonlam
345
19k
How GitHub Uses GitHub to Build GitHub
holman
468
290k
Transcript
WinActor®画像マッチング ~ 傾向と対策 ~ RPA勉強&LT会!RPALT ハンズオン支部 vol.01 2019/12/11 株式会社ネクストジェン チーフストラテジスト
林 邦洋 Ⓒ Nextgen, Inc. WinActor®はエヌ・ティ・ティ・アドバンステクノロジ株式会社の登録商標です
自己紹介 日本電信電話株式会社 グループ各社 株式会社ネクストジェン • Sales • Support
• Verification • Cloud Service • RPA etc. 経歴 Ⓒ Nextgen, Inc. Ⓒ Nextgen, Inc. 2018年~ コンサルティング 2019年~ グループ内推進 RPAへの関与
Ⓒ Nextgen, Inc. • WinActor® 6.xで確認 留意点 バージョンや利用環境の違いで差異が発生する可能性はあります。 • 細かい条件の記載を省略
ツッコミポイントはありますが、わかり易さを優先しました。
Ⓒ Nextgen, Inc. 画像マッチングは 必須アイテム
Ⓒ Nextgen, Inc. • Xpath(ブラウザ) やショートカット キー(アプリ) が利用できない時、 活用 画像マッチングの重要性
• 直観的な操作ができて、管理 系・営業系社員に優しい
Ⓒ Nextgen, Inc. 聞こえてくる感想
Ⓒ Nextgen, Inc. 画像マッチングの感想 多用すると重くなる 最後の手段 有スキル者の感想? 少し手間がかかる
Ⓒ Nextgen, Inc. 画像マッチングの感想 誤解から生まれた感想? エラーが多い LT後
Ⓒ Nextgen, Inc.
画像指定 ※必要に応じマスク(黒塗り) 検索範囲を指定 マッチング範囲を指定 マッチ率を指定
アクションを指定 Ⓒ Nextgen, Inc. 本日のフォーカスポイント 画像指定 ※必要に応じマスク(黒塗り) 検索範囲を指定 マッチング範囲を指定 マッチ率を指定 アクションを指定
凡例 Ⓒ Nextgen, Inc. 検索範囲の指定 マッチング範囲の指定 マスク
本題 Ⓒ Nextgen, Inc. 3 やっちゃダメなこと + 5 推奨すること +
4 気にしなくてよいこと
やっちゃダメ!なこと (3つ) Ⓒ Nextgen, Inc.
Ⓒ Nextgen, Inc. 1. マッチング範囲へのマスク 【やっちゃダメなこと】
WinActor®6.x Ⓒ Nextgen, Inc. 【やっちゃダメなこと】1. マッチング範囲へのマスク ここ
Ⓒ Nextgen, Inc. 2. 検索範囲から マッチング範囲がはみ出る 【やっちゃダメなこと】
WinActor®6.x Ⓒ Nextgen, Inc. 【やっちゃダメなこと】2. 検索範囲からマッチング範囲がはみ出る ここ
Ⓒ Nextgen, Inc. 3. 画像が見えない状態での 画像マッチング利用 【やっちゃダメなこと】
Ⓒ Nextgen, Inc. 【やっちゃダメなこと】3. 画像が見えない状態での画像マッチング利用 ターゲット PgDn/PgUp/←/→ エミュレーションライブラリを使って移動
推奨すること (5つ) Ⓒ Nextgen, Inc.
Ⓒ Nextgen, Inc. 1.「自動テスト」ポップアップの消去 【推奨すること】
Ⓒ Nextgen, Inc. 【推奨すること】1.「自動テスト」ポップアップの消去
Ⓒ Nextgen, Inc. 2.Webブラウザ起動後の拡大率初期化 【推奨すること】
Ⓒ Nextgen, Inc. 【推奨すること】2. Webブラウザ起動後の拡大率初期化 Ctl + 0 エミュレーションライブラリを使って初期化
Ⓒ Nextgen, Inc. (解像度変化への対応策) 3. Webブラウザ画面サイズの指定 【推奨すること】
Ⓒ Nextgen, Inc. 【推奨すること】3. Webブラウザ画面サイズの指定 切替で変化無し Page Down/up 操作に 変更無し
画面最大化 × サイズ指定 画面サイズ・位置指定ライブラリ利用
Ⓒ Nextgen, Inc. 4. 検索範囲は極力指定しない 【推奨すること】
Ⓒ Nextgen, Inc. 【推奨すること】4. 検索範囲は極力指定しない WinActor® 6.x WinActor® 6.x WinActor®
6.x 指定する 指定しない お勧め 同じ画像が存在する 同じ画像が存在しない
Ⓒ Nextgen, Inc. (エラー発見精度を上げる対策) 5. マッチング範囲は必要最小限に 【推奨すること】
Ⓒ Nextgen, Inc. 【推奨すること】5. マッチング範囲は必要最小限に お勧め 実験 WinActor® 6.x (期待値)
WinActor® 6.x 実験 WinActor® 6.x
気にしないで良いこと (4つ) Ⓒ Nextgen, Inc.
Ⓒ Nextgen, Inc. 1. 検索範囲へのマスク(マッチング範囲除く) 【気にしないで良いこと】
Ⓒ Nextgen, Inc. 【気にしないで良いこと】1. 検索範囲へのマスク(マッチング範囲除く) WinActor®6.x
Ⓒ Nextgen, Inc. 2. 検索範囲の広さ 【気にしないで良いこと】
WinActor®6.x Ⓒ Nextgen, Inc. 【気にしないで良いこと】2. 検索範囲の広さ
Ⓒ Nextgen, Inc. 3. 検索範囲の画像変化(マッチング範囲除く) 【気にしないで良いこと】
WinActor®6.x Ⓒ Nextgen, Inc. 【気にしないで良いこと】3. 検索範囲の画像変化(マッチング範囲除く) RPA Community RPA Community
Ⓒ Nextgen, Inc. 4. 検索範囲とマッチング範囲の位置関係 【気にしないで良いこと】
Ⓒ Nextgen, Inc. 【気にしないで良いこと】4. 検索範囲とマッチング範囲の位置関係 WinActor®6.x WinActor®6.x
Ⓒ Nextgen, Inc. 参考 2019/10/23 RPA勉強&LT会!RPALT vol.14 with Knowledge
Place 更なる普及に必要なこと 大企業から中規模企業へ 都市部から周辺地域へ https://speakerdeck.com/kunihirohayashi/geng-narupu-ji-nibi-yao-nakoto
最後に ご静聴有難うございました。