Goで作成したコンテナ形式のLambdaに New Relicを導入する際の備忘録

Transcript

1. Goで作成したコンテナ形式のLambdaに New Relicを導入する際の備忘録 2025/03/11 Fukuoka.go#21 なんと10周年 @imkaoru
2. 自己紹介 ディップ株式会社 / バイトルアプリAPIチーム所属 社会人もうすぐ3年目のサーバーサイドエンジニア : ) Goのすきなところ：後方互換性 / 明示的で可読性が高い / 標準ライブラリが充実 福岡歴：大学から。一旦東京で社会人して昨年9月に戻ってきました！ Qiita：@imkaoru ／　Kaoru Sato 佐藤 薫
3. Agenda 背景 Lambda拡張を⼊れてみた Go
   Agentも組み込む 所感
4. 背景 01
5. 新規開発したとあるバッチの話です 背景 使⽤技術 Lambda（コンテナ形式） Go ※
   ⼀部リソースは省略
6. 今回は入れた監視周りのお話をします 背景 ※ 一部リソースは省略 使用技術 Lambda（コンテナ形式） Go
7. 実現したい「監視要件」 背景 処理の成功・失敗がわかるように New Reli cにログを出力する そのほかのテレメトリデータは、 大きいシステムでないため不要 できれば、 コストの面で CloudWatchを介さず実現したい ログ取り込みやデータ転送に関 する課金を回避させたい ※ 一部リソースは省略
8. 簡単に導入できるので、ぜひ！！ 背景 今回の構成で監視要件を実現するまでの 流れを時系列で書いてみました 一部詰まったポイントがありましたが 「簡単に導入できる」ので、ぜひご参考 にして頂けますと嬉しいです 😊 ※ 一部リソースは省略
9. Lambda拡張を ⼊れてみた 02
10. newrelic-lambda-extention Lambda拡張を⼊れてみた サーバレス環境に最適化された New
    Relicの拡張レイヤー CloudWatchを介さずにログ転送 可能 レイヤー
    +
    Lambda環境変数だけ で簡単に導⼊できる 【出典：Containerized
    instrumentation(https://docs.newrelic.com/docs/)】
11. 2.
    Lambda環境変数 Lambda拡張を⼊れてみた NEW_RELIC_ACCOUNT_ID アカウントID NEW_RELIC_LICENSE_KEY_SECRET SecretsManagerのシークレット名 NEW_RELIC_EXTENSION_SEND_FUNCTION _LOGS ロギングの有効化 1.
    Dockerfile FROM
    public.ecr.aws/newrelic-lambda- layers-for-docker/newrelic-lambda- layers-lambdaextension:x86
    as
    layer ランタイムと互換性のあるレイヤーを追加 COPY
    --from=layer
    /opt/
    /opt/ 実⾏⽤コンテナにコピーする CMD
    [
    /opt/extensions/newrelic- lambda-extension
    ] Lambdaの実⾏と並⾏して動作させる
12. Lambda拡張を入れてみた New Rel icに ログが出力できていることを確認 🎉
13. Lambda拡張を入れてみた New Rel icに ログが出力できていることを確認 🎉 ・・・！？
14. Lambda拡張を入れてみた New Rel icに ログが出力できていることを確認 🎉 ・・・！？ でも、あれ？ Lambda実行が終わらない 😇
15. 発⽣した問題 Lambda拡張を⼊れてみた ログは出⼒されるものの、設定したタイムアウト上限時間まで実⾏が 終了されない
    ≒
    不要な課⾦時間が発⽣
    してしまう 例えば、タイムアウト上限時間を5分に設定していたとして、処理 ⾃体は15秒で終わっていたとしても5分経つまで実⾏が続く タイムアウトエラーになるわけではなく、正常終了はする 終了のシグナルがない場合は拡張レイヤーが待機し、実際にタイ ムアウトする前に必要なクリーンアップを⾏うため
16. 発生した問題 Lambda拡張を入れてみた ログは出力されるものの、設定したタイムアウト上限時間まで実行が 終了されない ≒ 不要な課金時間が発生してしまう 例えば、タイムアウト上限時間を5分に設定していたとして、処理 自体は15秒で終わっていたとしても5分経つまで実行が続く タイムアウトエラーになるわけではなく、正常終了はする 終了のシグナルがない場合は拡張レイヤーが待機し、実際にタイ ムアウトする前に必要なクリーンアップを行うため そこでNew Relicに 問い合わせしてみました 🥲
17. Go
    Agentも組み込む 03
18. Go Agentも組み込む 結論としては、 「Extensi onのLayer導入のみが実施されており Agentが組み込まれていないことが原因で 期待通りに動作していない ものと思われる」 旨の回答をいただきました 🫡
19. ↓↓↓ Go
    Agentも組み込む
20. 追加した記述 Go
    Agentも組み込む nrlambda.ConfigOption() New
    Relicエージェント固有の設定を⾏う サーバレスモードやトレーサーの有効化など nrlambda.Start(handler.HandleRequest,
    app) 適切にトランザクション管理がされるようになる それにより、処理の終了と共に実⾏が終了するようになった！！
21. ついでに、ログをエンティティに紐付ける Go Agentも組み込む
22. Go Agentも組み込む
23. Go Agentも組み込む
24. Go Agentも組み込む
25. Go Agentも組み込む O K ！ ! 🎉
26. 所感 04
27. 所感 結果的には 「レイヤー + Lambda環境変数 + mai n関数に記述追加」 だけで簡単に導入できた 😊 ただ、結構ドキュメントや情報が点在していて苦戦する場面も.. CloudWatchと比較したときに、もし システムの拡張に合わせてメト リクスやトレースもいい感じにしたい！ だったり 柔軟なアラート設定 したい！ となった場合に 実現の幅が大きいことも嬉しい 😌 またログについては slog のLogs i n Contextに対応してたりする
28. 参考にさせていただいたDocsたち 🙏 Introduction to AWS Lambda monitoring Containerized instrumentation Environment variables for AWS Lambda CloudWatch Logsを介さずにLambdaのテレメトリを行うnewrelic-lambda- extensionとその仕組み SDK based instrumentation > Go Go agent configuration v3/integrations/nrlambda Log event data
29. Thank
    You! ご清聴いただきありがとうございました！