Tweet
Tweet

Slide 1

Slide 1 text

休日・夜間のインスタンス自動停止をSREチー ムで運用してみた 2024年08月27日 株式会社コドモン 小西達大 SRE meetup 〜サービス事業会社のSREが向き合う課題〜

Slide 2

Slide 2 text

2 経歴 1996年生まれ、大阪育ち。前職でアプリケーションエンジニアとし て従事後、株式会社コドモンのSREチームにジョイン。 関心のある分野はコンテナとセキュリティ。 自己紹介 小西 達大 こにし たつひろ

Slide 3

Slide 3 text

3 Mission

Slide 4

Slide 4 text

4 すべての先生に 子どもと向き合う 時間と心のゆとりを こんなプロダクトを開発しています メインプロダクトは、保育・教育施設向けWebアプリケーション。 保護者と施設のやり取りを支えるモバイルアプリケーションや、施設職員向けモバイル版 アプリケーション、外部サービスと連携するAPIなども開発しています。

Slide 5

Slide 5 text

5

Slide 6

Slide 6 text

6 今日話すこと 休日・夜間のインスタンス停止のすすめ インスタンス自動停止の基本的な実装方法 SREチームで運用するために工夫している点 1 2 3

Slide 7

Slide 7 text

7 休日・夜間のインスタンス停止のすすめ

Slide 8

Slide 8 text

8 CONFIDENTIAL - © 2022 CoDMON Inc. 8 休日・夜間のインスタンス停止の概要 ● 土日祝・夜間など人が使わない時間帯で、従量課金されるインスタンス群を 停止することで、AWSコスト削減をねらう ● EC2・RDS・ECS（停止ではなく稼働するタスク台数を0にする）などで実施 可能

Slide 9

Slide 9 text

9 CONFIDENTIAL - © 2022 CoDMON Inc. 9 コスト削減効果（例：Aurora MySQL） 運用方式 \ DBインスタンスクラス db.t4g.medium db.t4g.large db.r5.xlarge デフォルト（オンデマンドインスタ ンスを常時稼働） $81.36 $162 $504 リザーブドインスタンス購入（1年 間全額前払い） $59.16 $118.3 $284 土日24時間・平日00:00~08:00 イ ンスタンスを停止 $39.77 $79.2 $246.4 Aurora MySQL DBインスタンス1台を東京リージョンで運用した際の 月額金額比較　※1カ月を30日・土日8日・祝日なし として計算 参照：https://aws.amazon.com/jp/rds/aurora/pricing/

Slide 10

Slide 10 text

10 CONFIDENTIAL - © 2022 CoDMON Inc. 10 休日・夜間のインスタンス停止の使いどころ ● リザーブドインスタンス・Savings Plans よりも高い費用削減効果が得られ る可能性がある ○ RI・SPの費用節減率や、停止可能時間にもよるので計算が必要 ● 運用(本番)環境はリザーブドインスタンス・Savings Plansを活用してコスト 削減し、開発環境では休日・夜間のインスタンス停止を活用する など使い分 けが重要

Slide 11

Slide 11 text

11 インスタンス自動停止の基本的な実装方法

Slide 12

Slide 12 text

12 CONFIDENTIAL - © 2022 CoDMON Inc. 12 インスタンス自動停止の基本的な実装方法 ● EventBridge Scheduler を用いて簡単に実装可能 ○ 任意のスケジュール日時でAPIを実行することができる

Slide 13

Slide 13 text

13 CONFIDENTIAL - © 2022 CoDMON Inc. 13 EventBridge Schedulerから自動停止/起動を実施する EC2 RDS ECS StartInstances StopInstances StartDBCluster / StartDBInstance StopDBCluster / StopDBInstance UpdateService ↓入力値 { "Cluster": "", "Service": "", "DesiredCount": 0 / 任意のタスク数 }

Slide 14

Slide 14 text

14 CONFIDENTIAL - © 2022 CoDMON Inc. 14 複数のインスタンスを実行対象にしたい場合 ● RDS・ECSではEventBridge Schedulerのターゲットに複数のリソースを指 定することができない... ○ AWS Step Functionsを利用して、複数リソースに対してAPIを実行可能 実行対象リソースを入力値で渡す 複数リソースに対してAPI実行

Slide 15

Slide 15 text

15 SREチームで運用するために工夫している点

Slide 16

Slide 16 text

16 CONFIDENTIAL - © 2022 CoDMON Inc. 16 前提 ● 開発環境Auroraの自動停止について取り上げる ● 各チームごとにAurora DBクラスターが存在し、それらの自動停止/起動を SREチームで運用している ○ Aurora DBクラスターの新設・削除などは各チームに委ねられているので、SRE チームが全て把握はしていない

Slide 17

Slide 17 text

17 工夫1：多数のAurora DBクラスターを休日・夜間 に自動停止させる

Slide 18

Slide 18 text

18 CONFIDENTIAL - © 2022 CoDMON Inc. 18 やりたいこと ● 各開発チームが所有するAurora DBクラスターを抜け漏れなく自動停止/起動 させたい ○ ただし、特定のAurora DBクラスターを自動停止対象から除外したいケースも発 生するので、柔軟に対応できるようにしたい

Slide 19

Slide 19 text

19 CONFIDENTIAL - © 2022 CoDMON Inc. 19 実現方法 { "Ignore_DbClusterIdentifiers": [ "対象外のAurora DBクラスター識別子名", … ] } 自動停止対象外のAurora DBクラス ター識別子名を入力値として渡す 全てのAurora DBクラスター 名を動的に取得 対象外DBはスキップ 対象DBは停止/起動API実行 対象かどうか確認

Slide 20

Slide 20 text

20 CONFIDENTIAL - © 2022 CoDMON Inc. 20 実現方法 ● 最初に全てのAurora DBクラスター名を動的に取得しているので、新規DBが 増えても抜け漏れが発生しない ● 対象外のAurora DBクラスター識別子名を渡す入力値箇所はコード管理して おり、柔軟に対応可能

Slide 21

Slide 21 text

21 工夫2：土日だけでなく、祝日もAuroraを自動停 止させる

Slide 22

Slide 22 text

22 CONFIDENTIAL - © 2022 CoDMON Inc. 22 やりたいこと ● 土日だけでなく、祝日もAuroraを自動停止したい ○ 祝日かどうかを判定する仕組みが必要

Slide 23

Slide 23 text

23 CONFIDENTIAL - © 2022 CoDMON Inc. 23 実現方法 ● AWS Systems Manager Change Calendar を利用する ○ サードパーティのカレンダー（Google Calendars・Microsoft Outlook Calendars …）をインポートして、祝日を取り込む ○ GetCalendarState というAPIを呼び出すことで、実行日が祝日かどうか判定可能

Slide 24

Slide 24 text

24 CONFIDENTIAL - © 2022 CoDMON Inc. 24 実現方法 ・月~金 08:00 自動起動 ・月~金 00:00 自動停止 実行日が祝日の場合、08:00 の自動起動をスキップ → 祝 日もAuroraを停止状態に

Slide 25

Slide 25 text

25 CONFIDENTIAL - © 2022 CoDMON Inc. 25 実現方法 ・月~金 08:00 自動起動 ・月~金 00:00 自動停止 実行日が祝日の場合、08:00 の自動起動をスキップ → 祝 日もAuroraを停止状態に Change Calendar更新作業が手間な場 合は、外部APIを実行して祝日取得 ~ 判 定する方法もある

Slide 26

Slide 26 text

26 まとめ

Slide 27

Slide 27 text

27 CONFIDENTIAL - © 2022 CoDMON Inc. 27 まとめ ● 休日・夜間のインスタンス停止は、AWSコスト削減に効果がある ● 自動停止/起動の仕組みは簡単に実装でき、要件に合わせてカスタマイズも可 能

Slide 28

Slide 28 text

28 最後に

Slide 29

Slide 29 text

29 コドモン採用ページ 開発ブログ コドモンでは一緒に働きたい仲間を募集しています！

Slide 30

Slide 30 text

No content