WinActor® 画像マッチング ～傾向と対策～

Transcript

1. WinActor®画像マッチング ～ 傾向と対策 ～ RPA勉強＆LT会！RPALT ハンズオン支部 vol.01 2019/12/11 株式会社ネクストジェン チーフストラテジスト 林 邦洋 Ⓒ Nextgen, Inc. WinActor®はエヌ・ティ・ティ・アドバンステクノロジ株式会社の登録商標です
2. 自己紹介  日本電信電話株式会社 グループ各社  株式会社ネクストジェン • Sales • Support • Verification • Cloud Service • RPA etc. 経歴 Ⓒ Nextgen, Inc. Ⓒ Nextgen, Inc.  2018年～ ｺﾝｻﾙﾃｨﾝｸﾞ  2019年～ ｸﾞﾙｰﾌﾟ内推進 RPAへの関与
3. Ⓒ Nextgen, Inc. • WinActor® 6.xで確認 留意点 バージョンや利用環境の違いで差異が発生する可能性はあります。 • 細かい条件の記載を省略 ツッコミポイントはありますが、わかり易さを優先しました。
4. Ⓒ Nextgen, Inc. 画像マッチングは 必須アイテム
5. Ⓒ Nextgen, Inc. • Xpath（ブラウザ） やショートカット キー(アプリ) が利用できない時、 活用 画像マッチングの重要性 • 直観的な操作ができて、管理 系・営業系社員に優しい
6. Ⓒ Nextgen, Inc. 聞こえてくる感想
7. Ⓒ Nextgen, Inc. 画像マッチングの感想 多用すると重くなる 最後の手段 有スキル者の感想? 少し手間がかかる
8. Ⓒ Nextgen, Inc. 画像マッチングの感想 誤解から生まれた感想? エラーが多い LT後
9. Ⓒ Nextgen, Inc.
10.  画像指定 ※必要に応じマスク（黒塗り）  検索範囲を指定  マッチング範囲を指定  マッチ率を指定  アクションを指定 Ⓒ Nextgen, Inc. 本日のフォーカスポイント  画像指定 ※必要に応じマスク（黒塗り）  検索範囲を指定  マッチング範囲を指定  マッチ率を指定  アクションを指定
11. 凡例 Ⓒ Nextgen, Inc. 検索範囲の指定 マッチング範囲の指定 マスク
12. 本題 Ⓒ Nextgen, Inc. 3 やっちゃダメなこと + 5 推奨すること + 4 気にしなくてよいこと
13. やっちゃダメ！なこと （３つ） Ⓒ Nextgen, Inc.
14. Ⓒ Nextgen, Inc. 1. マッチング範囲へのマスク 【やっちゃダメなこと】
15. WinActor®6.x Ⓒ Nextgen, Inc. 【やっちゃダメなこと】1. マッチング範囲へのマスク ここ
16. Ⓒ Nextgen, Inc. 2. 検索範囲から マッチング範囲がはみ出る 【やっちゃダメなこと】
17. WinActor®6.x Ⓒ Nextgen, Inc. 【やっちゃダメなこと】2. 検索範囲からマッチング範囲がはみ出る ここ
18. Ⓒ Nextgen, Inc. 3. 画像が見えない状態での 画像マッチング利用 【やっちゃダメなこと】
19. Ⓒ Nextgen, Inc. 【やっちゃダメなこと】3. 画像が見えない状態での画像マッチング利用 ターゲット PgDn/PgUp/←/→ エミュレーションライブラリを使って移動
20. 推奨すること （５つ） Ⓒ Nextgen, Inc.
21. Ⓒ Nextgen, Inc. 1.「自動テスト」ポップアップの消去 【推奨すること】
22. Ⓒ Nextgen, Inc. 【推奨すること】1.「自動テスト」ポップアップの消去
23. Ⓒ Nextgen, Inc. 2.Webブラウザ起動後の拡大率初期化 【推奨すること】
24. Ⓒ Nextgen, Inc. 【推奨すること】2. Webブラウザ起動後の拡大率初期化 Ctl + 0 エミュレーションライブラリを使って初期化
25. Ⓒ Nextgen, Inc. （解像度変化への対応策） 3. Webブラウザ画面サイズの指定 【推奨すること】
26. Ⓒ Nextgen, Inc. 【推奨すること】3. Webブラウザ画面サイズの指定 切替で変化無し Page Down/up 操作に 変更無し 画面最大化 × サイズ指定 画面サイズ・位置指定ライブラリ利用
27. Ⓒ Nextgen, Inc. 4. 検索範囲は極力指定しない 【推奨すること】
28. Ⓒ Nextgen, Inc. 【推奨すること】4. 検索範囲は極力指定しない WinActor® 6.x WinActor® 6.x WinActor® 6.x 指定する 指定しない お勧め 同じ画像が存在する 同じ画像が存在しない
29. Ⓒ Nextgen, Inc. （エラー発見精度を上げる対策） 5. マッチング範囲は必要最小限に 【推奨すること】
30. Ⓒ Nextgen, Inc. 【推奨すること】5. マッチング範囲は必要最小限に お勧め 実験 WinActor® 6.x （期待値） WinActor® 6.x 実験 WinActor® 6.x
31. 気にしないで良いこと （４つ） Ⓒ Nextgen, Inc.
32. Ⓒ Nextgen, Inc. 1. 検索範囲へのマスク（マッチング範囲除く） 【気にしないで良いこと】
33. Ⓒ Nextgen, Inc. 【気にしないで良いこと】1. 検索範囲へのマスク（マッチング範囲除く） WinActor®6.x
34. Ⓒ Nextgen, Inc. 2. 検索範囲の広さ 【気にしないで良いこと】
35. WinActor®6.x Ⓒ Nextgen, Inc. 【気にしないで良いこと】2. 検索範囲の広さ
36. Ⓒ Nextgen, Inc. 3. 検索範囲の画像変化（マッチング範囲除く） 【気にしないで良いこと】
37. WinActor®6.x Ⓒ Nextgen, Inc. 【気にしないで良いこと】3. 検索範囲の画像変化（マッチング範囲除く） RPA Community RPA Community
38. Ⓒ Nextgen, Inc. 4. 検索範囲とマッチング範囲の位置関係 【気にしないで良いこと】
39. Ⓒ Nextgen, Inc. 【気にしないで良いこと】4. 検索範囲とマッチング範囲の位置関係 WinActor®6.x WinActor®6.x
40. Ⓒ Nextgen, Inc. 参考  2019/10/23 RPA勉強＆LT会！RPALT vol.14 with Knowledge Place 更なる普及に必要なこと 大企業から中規模企業へ 都市部から周辺地域へ https://speakerdeck.com/kunihirohayashi/geng-narupu-ji-nibi-yao-nakoto
41. 最後に ご静聴有難うございました。