Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
小さなものでも Step Functions / Serverless Meetup Fukuoka Re:boot
Search
cohalz
February 17, 2024
Programming
0
87
小さなものでも Step Functions / Serverless Meetup Fukuoka Re:boot
https://serverless.connpass.com/event/305300/
の発表資料です
cohalz
February 17, 2024
Tweet
Share
More Decks by cohalz
See All by cohalz
SREのキャリア、 あるいは生態 / #ya8
cohalz
11
1.3k
カンファレンスのボランティアスタッフって何やるの? / DAIMYO Meetup #4
cohalz
0
34
ECSのCI/CD改善と標準化の取り組み / JAWS FESTA 2023 in Kyushu
cohalz
8
4.8k
ecspressoへの貢献を振り返る / JAWS-UG コンテナ支部 #24 ecspresso MeetUp
cohalz
1
5.1k
はてなフォトライフをECSに移行した話 / Hatena Engineer Seminar #20
cohalz
1
17k
SREの異動と働き方 〜はてなブログ編〜 / Hatena Engineer Seminar #13
cohalz
0
2.1k
Envoy.なんか / Kyoto.なんか #5
cohalz
0
110
CDKを用いたモダンなECSクラスタの構築と運用 / AWS Cloud Development Kit -CDK- Meetup
cohalz
6
3k
SREと私 / SRE and I
cohalz
0
2.6k
Other Decks in Programming
See All in Programming
効率化に挑戦してみたらモバイル開発が少し快適になった話
ryunakayama
0
140
Goのmultiple errorsについて (2024年4月版)
syumai
4
1.1k
Komplexe Oberflächen mit SVG und der Web Animation API
joergneumann
0
680
dbtのドメイン分割による データ基盤の改善とDigdagとの連携
sakama
0
440
What We Can Learn From OSS
inouehi
0
430
GitHub Copilotのススメ
marcy731
1
220
大規模UIKitベースアプリへのTCAの段階的導入/gradual-adoption-of-tca-in-a-large-scale-uikit-based-app
takehilo
2
200
PHPの次期バージョンはこの時期どうなっているのか - Internalsの開発体制について - PHPカンファレンス小田原
youkidearitai
PRO
1
220
OpenAPIを中心に考えるAPI開発入門 / Introduction to API Development with a Focus on OpenAPI
seike460
PRO
2
170
Hanami and htmx
bkuhlmann
0
220
SwiftUIで使いやすいToastの作り方 / How to build a Toast system which is easy to use in SwiftUI
lovee
3
170
Node.js v22 で変わること
yosuke_furukawa
PRO
11
3.9k
Featured
See All Featured
BBQ
matthewcrist
80
8.8k
No one is an island. Learnings from fostering a developers community.
thoeni
16
2.1k
How to name files
jennybc
65
93k
What the flash - Photography Introduction
edds
64
11k
Code Reviewing Like a Champion
maltzj
515
39k
From Idea to $5000 a Month in 5 Months
shpigford
378
45k
The Invisible Side of Design
smashingmag
294
49k
Building an army of robots
kneath
300
41k
The Psychology of Web Performance [Beyond Tellerrand 2023]
tammyeverts
14
1.5k
A Philosophy of Restraint
colly
197
16k
[Rails World 2023 - Day 1 Closing Keynote] - The Magic of Rails
eileencodes
8
1.3k
Docker and Python
trallard
35
2.7k
Transcript
小さなものでも Step Functions id:cohalz / @cohalz Serverless Meetup Fukuoka Re:boot
1
自己紹介 • こはる(@cohalz) • 株式会社はてな SRE ◦ はてなブックマーク ◦ はてなブログ
• 費用削減・MySQL・OpenTelemetry • 福岡でリモート勤務 2
3 Step Functions 使ってますか?
社内のStep Functions過去事例 • はてなブログの独自ドメインHTTPS配信 ◦ AWSではてなブログの常時HTTPS配信をバーンとやる話 / The Epic of
migration from HTTP to HTTPS on Hatena Blog with AWS • はてなダイアリーや魔法のiらんどのデータ移行 ◦ ちょっぴりDiveDeepするAWSの時間 AWS Dev Day 2023 Tokyo 延長 戦 実践データ移行 〜はてなダイアリーや魔法のiらんどの事例と共に〜 4
大規模なものだけ? • ちょっとした運用ツールにもStep Functions を使い始めています ◦ 定期・不定期でLambdaやCIから実行しているもの ◦ 既存のものを置き換える形で使い始めている 5
小さなものがあると学習しやすい • Step Functions自体は初見は難しい • 処理を想像できるサイズのものを用意するこ とで大規模なものを作成・運用できるように 6
Lambda運用の課題 • 長時間は動かせない(最大15分) ◦ 待ち時間があるような処理にはあまり向いてない • ランタイムの更新が必要(Go, Node, …) ◦
別の人が書いたものをメンテする場合はさらに大変 • エラーもCloudWatch Logsから探しにくい ◦ どういう入力でどういうエラーになったのか 7
Step Functionsだと • 時間制限がない ◦ 状態遷移数による課金 ◦ 時間かかる場合は組み込みのWaitを使える • ランタイムのことを考えなくて良い
• 処理の流れやエラーが追いやすい ◦ リトライやエラー処理を組み込みやすい ◦ 組み込んでも流れを把握しやすい 8
成功・失敗のログが わかりやすい • 失敗した時にどこが失敗 したのかわかりやすい ◦ 赤・橙、緑、白 • 失敗したところから再実 行できる
◦ redrive機能(2023/11) 9
Step Functionsの機能追加 • AWS SDK統合(2021/09) ◦ 大抵のAWSの操作はできるように • HTTPリクエスト(2023/11) ◦
認証が必要なエンドポイントもリクエスト可能 ◦ GitHubやSlackなども操作できるように 10
Lambdaを採用した方が良いケース • VPC内のリソースにアクセスする • 複雑な文字列処理 ◦ Step Functions組み込みの文字列関数が貧弱 ◦ もし作れたとしても読み解くのが難しいものになる
11
例: ステージング環境の作成・停止 • はてなブックマークのステージング環境を支 える技術 - Hatena Developer Blog ◦
毎日営業時間になったらステージング環境が本番の データでコピーされ定時後には終了する ◦ Aurora, ElastiCache, OpenSearchで実施 ◦ ほぼAWS SDK統合と少しのLambdaで実現 12
気をつけてる ポイント • コードコメントと GitHubでMermaid記 法を使い図を出す • コードやプルリクを見 ただけで処理の流れが わかるように
13
どうやって実装してる? • コンソールで作って試してその後CDKで同じコー ドを書くと言う流れで実装 ◦ コンソールは試行錯誤しやすい ◦ CDKは依存関係を記述しやすい • Application
Composerとか使ったら楽になる? ◦ 良い方法知っていたら教えてください 14
おわり • 細かいLambdaもStep Functionsに置き換えて 運用を楽にしています ◦ メンテしやすくしていきましょう ◦ 最近のStep Functionsも進化しています
• Step Functions事例聞きたいです 15