WinActor® 画像マッチング ～傾向と対策～

Transcript

1. WinActor®画像マッチング ～ 傾向と対策 ～ RPA勉強＆LT会！RPALT ハンズオン支部 vol.01 2019/12/11 株式会社ネクストジェン チーフストラテジスト

   林 邦洋 Ⓒ Nextgen, Inc. WinActor®はエヌ・ティ・ティ・アドバンステクノロジ株式会社の登録商標です

2. 自己紹介  日本電信電話株式会社 グループ各社  株式会社ネクストジェン • Sales • Support

   • Verification • Cloud Service • RPA etc. 経歴 Ⓒ Nextgen, Inc. Ⓒ Nextgen, Inc.  2018年～ ｺﾝｻﾙﾃｨﾝｸﾞ  2019年～ ｸﾞﾙｰﾌﾟ内推進 RPAへの関与

3. Ⓒ Nextgen, Inc. • WinActor® 6.xで確認 留意点 バージョンや利用環境の違いで差異が発生する可能性はあります。 • 細かい条件の記載を省略

   ツッコミポイントはありますが、わかり易さを優先しました。

4. Ⓒ Nextgen, Inc. 画像マッチングは 必須アイテム

5. Ⓒ Nextgen, Inc. • Xpath（ブラウザ） やショートカット キー(アプリ) が利用できない時、 活用 画像マッチングの重要性

   • 直観的な操作ができて、管理 系・営業系社員に優しい

6. Ⓒ Nextgen, Inc. 聞こえてくる感想

7. Ⓒ Nextgen, Inc. 画像マッチングの感想 多用すると重くなる 最後の手段 有スキル者の感想? 少し手間がかかる

8. Ⓒ Nextgen, Inc. 画像マッチングの感想 誤解から生まれた感想? エラーが多い LT後

9. Ⓒ Nextgen, Inc.

10.  画像指定 ※必要に応じマスク（黒塗り）  検索範囲を指定  マッチング範囲を指定  マッチ率を指定 

    アクションを指定 Ⓒ Nextgen, Inc. 本日のフォーカスポイント  画像指定 ※必要に応じマスク（黒塗り）  検索範囲を指定  マッチング範囲を指定  マッチ率を指定  アクションを指定

11. 凡例 Ⓒ Nextgen, Inc. 検索範囲の指定 マッチング範囲の指定 マスク

12. 本題 Ⓒ Nextgen, Inc. 3 やっちゃダメなこと + 5 推奨すること +

    4 気にしなくてよいこと

13. やっちゃダメ！なこと （３つ） Ⓒ Nextgen, Inc.

14. Ⓒ Nextgen, Inc. 1. マッチング範囲へのマスク 【やっちゃダメなこと】

15. WinActor®6.x Ⓒ Nextgen, Inc. 【やっちゃダメなこと】1. マッチング範囲へのマスク ここ

16. Ⓒ Nextgen, Inc. 2. 検索範囲から マッチング範囲がはみ出る 【やっちゃダメなこと】

17. WinActor®6.x Ⓒ Nextgen, Inc. 【やっちゃダメなこと】2. 検索範囲からマッチング範囲がはみ出る ここ

18. Ⓒ Nextgen, Inc. 3. 画像が見えない状態での 画像マッチング利用 【やっちゃダメなこと】

19. Ⓒ Nextgen, Inc. 【やっちゃダメなこと】3. 画像が見えない状態での画像マッチング利用 ターゲット PgDn/PgUp/←/→ エミュレーションライブラリを使って移動

20. 推奨すること （５つ） Ⓒ Nextgen, Inc.

21. Ⓒ Nextgen, Inc. 1.「自動テスト」ポップアップの消去 【推奨すること】

22. Ⓒ Nextgen, Inc. 【推奨すること】1.「自動テスト」ポップアップの消去

23. Ⓒ Nextgen, Inc. 2.Webブラウザ起動後の拡大率初期化 【推奨すること】

24. Ⓒ Nextgen, Inc. 【推奨すること】2. Webブラウザ起動後の拡大率初期化 Ctl + 0 エミュレーションライブラリを使って初期化

25. Ⓒ Nextgen, Inc. （解像度変化への対応策） 3. Webブラウザ画面サイズの指定 【推奨すること】

26. Ⓒ Nextgen, Inc. 【推奨すること】3. Webブラウザ画面サイズの指定 切替で変化無し Page Down/up 操作に 変更無し

    画面最大化 × サイズ指定 画面サイズ・位置指定ライブラリ利用

27. Ⓒ Nextgen, Inc. 4. 検索範囲は極力指定しない 【推奨すること】

28. Ⓒ Nextgen, Inc. 【推奨すること】4. 検索範囲は極力指定しない WinActor® 6.x WinActor® 6.x WinActor®

    6.x 指定する 指定しない お勧め 同じ画像が存在する 同じ画像が存在しない

29. Ⓒ Nextgen, Inc. （エラー発見精度を上げる対策） 5. マッチング範囲は必要最小限に 【推奨すること】

30. Ⓒ Nextgen, Inc. 【推奨すること】5. マッチング範囲は必要最小限に お勧め 実験 WinActor® 6.x （期待値）

    WinActor® 6.x 実験 WinActor® 6.x

31. 気にしないで良いこと （４つ） Ⓒ Nextgen, Inc.

32. Ⓒ Nextgen, Inc. 1. 検索範囲へのマスク（マッチング範囲除く） 【気にしないで良いこと】

33. Ⓒ Nextgen, Inc. 【気にしないで良いこと】1. 検索範囲へのマスク（マッチング範囲除く） WinActor®6.x

34. Ⓒ Nextgen, Inc. 2. 検索範囲の広さ 【気にしないで良いこと】

35. WinActor®6.x Ⓒ Nextgen, Inc. 【気にしないで良いこと】2. 検索範囲の広さ

36. Ⓒ Nextgen, Inc. 3. 検索範囲の画像変化（マッチング範囲除く） 【気にしないで良いこと】

37. WinActor®6.x Ⓒ Nextgen, Inc. 【気にしないで良いこと】3. 検索範囲の画像変化（マッチング範囲除く） RPA Community RPA Community

38. Ⓒ Nextgen, Inc. 4. 検索範囲とマッチング範囲の位置関係 【気にしないで良いこと】

39. Ⓒ Nextgen, Inc. 【気にしないで良いこと】4. 検索範囲とマッチング範囲の位置関係 WinActor®6.x WinActor®6.x

40. Ⓒ Nextgen, Inc. 参考  2019/10/23 RPA勉強＆LT会！RPALT vol.14 with Knowledge

    Place 更なる普及に必要なこと 大企業から中規模企業へ 都市部から周辺地域へ https://speakerdeck.com/kunihirohayashi/geng-narupu-ji-nibi-yao-nakoto

41. 最後に ご静聴有難うございました。