DMSCube_LT_初心者だった頃の自分に教えてあげたいこと_その２.pdf

2023年 9月13日株式会社テトラ・コミュニケーションズ初心者だった頃の自分に教えてあげたいことその２

名前：吉田彰宏現職：株式会社テトラ・コミュニケーションズ生命保険会社に特化した業務＆システムコンサルティング及びシステムの開発・構築・運用・保守 DataSpider歴： 2009年～現在オンプレ版を利用することが多く、クラウド版の利用は少々。
会社の資格試験報奨金の対象にDataSpider認定資格が含まれるようになったため、Advanceの受験に再チャレンジを検討中。

DataSpiderを使い始めた時、分からない点を聞ける人が周りにいましたか？

私の場合、お客様、同僚、含めて有識者ゼロ。前任者が作った設計書、スクリプトを読み解くことに。。。。

最初の頃は、無駄に複雑なことをやったりもしていました。しかし、少しずつ「あれ、こんな風にできるんだ」という気づき「こうすれば便利だな」という発見をするようになりました。そういった情報を前回に続き、紹介します。

教えてあげたいこと try～catchのエラーメッセージの拾い方

DataSpiderの便利機能（try～catch） ①の枠内のどこかでエラーが発生すると、 ②に処理が移り、その後、try～catchを抜ける。 ① ② 直感的で分かりやすい！

DataSpiderの便利機能（try～catch）どんな情報を取得できるかも一目瞭然！！変数名を覚える必要がなくて楽チン

DataSpiderの便利機能（try～catch）ある時、エラーが発生！！こんな時のためのアプリケーションログ。中身を確認すると・・・

DataSpiderの便利機能（try～catch）赤枠の３つアイコンのどこかでエラーが発生していることになります。でも・・・、どこで起きている？せっかくログに出力したのに、エラーメッセージを見ても分からない。。。 2023/09/12 09:51:39 [INFO] [スクリプト001] 処理を開始します。
2023/09/12 09:51:39 [ERROR] [スクリプト001] エラーが発生しました。 [com.appresso.ds.vp.mapper.fastconverter.CannotConvertException|2列目でエラー発生: Columnロジック - String型からBigDecimal型に変換できませんでした] 2023/09/12 09:51:39 [INFO] [スクリプト001] 処理を終了します。

DataSpiderの便利機能（try～catch）改善してみようその１問題 try～catchに複数のアイコンを配置するからエラーメッセージの区別がつかなくなってしまっている。対応それならtry～catchを細かく配置すればいいのでは！？

try～catchを改善してみようその１見分けがつきやすいようにアプリケーションログにもメッセージを追加。これならOKなはず。。。

これなら、ひと目でマッピング処理でエラーが起きていると分かる！！ 2023/09/12 09:48:52 [INFO] [スクリプト002] 処理を開始します。 2023/09/12 09:48:52 [ERROR] [スクリプト002]
マッピング処理でエラーが発生しました。 [com.appresso.ds.vp.mapper.fastconverter.CannotConvertException|2列目でエラー発生: Columnロジック - String型からBigDecimal型に変換できませんでした] try～catchを改善してみようその１

待っていたのはtry～catch地獄。。。画面中がtry～catchだらけ。スクリプトも見にくくなり、やたら長くなってしまうことに。 try～catchを改善してみようその１

DataSpiderの便利機能（try～catch）改善してみようその２問題 try～catchの数はできるだけ増やさず、かつ、どのアイコンで発生したエラーであるかをどうやって区別すればよいのか？対応エラーが発生すると、そのアイコンのerror_typeに情報が設定されるはず。そこで判断できるのでは！？

try～catchを改善してみようその２処理フローは一番最初と同じ。やはりtry～catchは少ない方がよいですね。

try～catchを改善してみようその２そのかわりに変数Mapperを頑張ってみた！！

try～catchを改善してみようその２ csv_readのerror_typeが空ではない場合、エラーメッセージを組み立て、スクリプト変数へ設定。その変数の値をログへ出力。 csv_readのerror_typeが空の場合、次のアイコンのerror_typeのチェックに移る。

これなら、ひと目でマッピング処理でエラーが起きていると分かる！！ 2023/09/12 10:07:32 [INFO] [スクリプト003] 処理を開始します。 2023/09/12 10:07:32 [ERROR] [スクリプト003]
エラーが発生しました。[マッピング処理 |com.appresso.ds.vp.mapper.fastconverter.CannotConvertException|2列目でエラー発生: Columnロジック - String型からBigDecimal型に変換できませんでした] 2023/09/12 10:07:32 [INFO] [スクリプト003] 処理を終了します。 try～catchを改善してみようその２

待っていたのは変数Mapper地獄。。。先ほどのたった３つのアイコンでもMapper画面がぐちゃぐちゃに。これ以上のアイコン追加は勘弁してください。ぐちゃぐちゃなため、マッピングミスも発生。 try～catchを改善してみようその２

DataSpiderの便利機能（try～catch）改善してみようその３問題 try～catchの数はできるだけ増やさず、かつ、シンプルなマッピングでどのアイコンで発生したエラーであるかをどうやって区別すればよいのか？対応 DataSpiderにはきっと便利な機能があるはず！！ヘルプを見ながら試行錯誤の旅へ。

try～catchを改善してみようその３ヘルプにはこう書かれているけど、まずは使ってみよう！ずっと無視をしていたけど、君たちは何者？？

try～catchを改善してみようその３処理フローは一番最初と同じ。変数Mapperもシンプルに。結果はいかに。

この方法でも、ひと目でマッピング処理でエラーが起きていると分かる！！ try～catchの数も抑え、マッピングも簡単。求めていたものに、やっとたどり着きました。 2023/09/12 10:46:43 [INFO] [スクリプト004] 処理を開始します。 2023/09/12 10:46:43
[ERROR] [スクリプト004] エラーが発生しました。[mapping|変換/基本/マッピング |com.appresso.ds.vp.mapper.fastconverter.CannotConvertException|2列目でエラー発生: Columnロジック - String型からBigDecimal型に変換できませんでした] 2023/09/12 10:46:43 [INFO] [スクリプト004] 処理を終了します。 try～catchを改善してみようその３ component_name component_type

素朴な疑問先ほどのログにはcomponent_nameにmappingと表示されていたけど、スクリプト内にMapperが複数ある場合は区別がつくの？ try～catchを改善してみようその３ 2023/09/12 10:46:43 [INFO] [スクリプト004] 処理を開始します。
2023/09/12 10:46:43 [ERROR] [スクリプト004] エラーが発生しました。[mapping|変換/基本/マッピング |com.appresso.ds.vp.mapper.fastconverter.CannotConvertException|2列目でエラー発生: Columnロジック - String型からBigDecimal型に変換できませんでした] 2023/09/12 10:46:43 [INFO] [スクリプト004] 処理を終了します。

結果問題なし！！ try～catchを改善してみようその３ 2023/09/12 11:06:43 [INFO] [スクリプト004] 処理を開始します。 2023/09/12
11:06:43 [ERROR] [スクリプト004] エラーが発生しました。[CSVファイルmapping|変換/基本/マッピング|com.appresso.ds.vp.mapper.fastconverter.CannotConvertException|2列目でエラー発生: Columnロジック - String型からBigDecimal型に変換できませんでした] 2023/09/12 11:06:43 [INFO] [スクリプト004] 処理を終了します。 component_nameとはこの名前のこと。

注意点今回紹介したスクリプト、および、実行結果は、パラレルストリーミング処理（PSP）を利用しないことが前提となります。詳しくは、ヘルプのパラレルストリーミング処理仕様制限を参照してください。

今回は過去の私の試行錯誤の内容を紹介しましたが、「こうするともっと良いよ」というものをご存じであれば、お話をぜひ聞かせてください。

ご清聴ありがとうございました。株式会社テトラ・コミュニケーションズ

DMSCube_LT_初心者だった頃の自分に教えてあげたいこと_その２.pdf

DMSCube_LT_初心者だった頃の自分に教えてあげたいこと_その２.pdf

吉田彰宏

More Decks by 吉田彰宏

Other Decks in Technology

Featured

Transcript

2023年 9月13日株式会社テトラ・コミュニケーションズ初心者だった頃の自分に教えてあげたいことその２

DataSpiderを使い始めた時、分からない点を聞ける人が周りにいましたか？

私の場合、お客様、同僚、含めて有識者ゼロ。前任者が作った設計書、スクリプトを読み解くことに。。。。

教えてあげたいこと try～catchのエラーメッセージの拾い方

DataSpiderの便利機能（try～catch） ①の枠内のどこかでエラーが発生すると、 ②に処理が移り、その後、try～catchを抜ける。 ① ② 直感的で分かりやすい！

DataSpiderの便利機能（try～catch）どんな情報を取得できるかも一目瞭然！！変数名を覚える必要がなくて楽チン

DataSpiderの便利機能（try～catch）ある時、エラーが発生！！こんな時のためのアプリケーションログ。中身を確認すると・・・

DataSpiderの便利機能（try～catch）改善してみようその１問題 try～catchに複数のアイコンを配置するからエラーメッセージの区別がつかなくなってしまっている。対応それならtry～catchを細かく配置すればいいのでは！？

try～catchを改善してみようその１見分けがつきやすいようにアプリケーションログにもメッセージを追加。これならOKなはず。。。

これなら、ひと目でマッピング処理でエラーが起きていると分かる！！ 2023/09/12 09:48:52 [INFO] [スクリプト002] 処理を開始します。 2023/09/12 09:48:52 [ERROR] [スクリプト002]

待っていたのはtry～catch地獄。。。画面中がtry～catchだらけ。スクリプトも見にくくなり、やたら長くなってしまうことに。 try～catchを改善してみようその１

try～catchを改善してみようその２処理フローは一番最初と同じ。やはりtry～catchは少ない方がよいですね。

try～catchを改善してみようその２そのかわりに変数Mapperを頑張ってみた！！

これなら、ひと目でマッピング処理でエラーが起きていると分かる！！ 2023/09/12 10:07:32 [INFO] [スクリプト003] 処理を開始します。 2023/09/12 10:07:32 [ERROR] [スクリプト003]

try～catchを改善してみようその３ヘルプにはこう書かれているけど、まずは使ってみよう！ずっと無視をしていたけど、君たちは何者？？

try～catchを改善してみようその３処理フローは一番最初と同じ。変数Mapperもシンプルに。結果はいかに。

素朴な疑問先ほどのログにはcomponent_nameにmappingと表示されていたけど、スクリプト内にMapperが複数ある場合は区別がつくの？ try～catchを改善してみようその３ 2023/09/12 10:46:43 [INFO] [スクリプト004] 処理を開始します。

結果問題なし！！ try～catchを改善してみようその３ 2023/09/12 11:06:43 [INFO] [スクリプト004] 処理を開始します。 2023/09/12

注意点今回紹介したスクリプト、および、実行結果は、パラレルストリーミング処理（PSP）を利用しないことが前提となります。詳しくは、ヘルプのパラレルストリーミング処理仕様制限を参照してください。

今回は過去の私の試行錯誤の内容を紹介しましたが、「こうするともっと良いよ」というものをご存じであれば、お話をぜひ聞かせてください。

ご清聴ありがとうございました。株式会社テトラ・コミュニケーションズ