Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Speaker Deck
PRO
Sign in
Sign up for free
DatadogをCloud Loggingと統合してエラーをスケスケにしたい!
株式会社ビットキー / Bitkey Inc.
PRO
October 05, 2022
Technology
0
120
DatadogをCloud Loggingと統合してエラーをスケスケにしたい!
株式会社ビットキー / Bitkey Inc.
PRO
October 05, 2022
Tweet
Share
More Decks by 株式会社ビットキー / Bitkey Inc.
See All by 株式会社ビットキー / Bitkey Inc.
デイリースクラムの”守破離” - 日々をより楽しく有意義にするヒント -
bitkey
PRO
0
6
IoT × 不動産業界のPMF
bitkey
PRO
0
110
OpenTelemetry入門へGo
bitkey
PRO
0
120
Goから学ぶ脆弱性対応ポリシー
bitkey
PRO
0
110
システム全体の一部としてFWを考える
bitkey
PRO
0
55
SoCの上にも三年
bitkey
PRO
0
60
たまにはオンプレもいいぞ?GKE と Armadillo IoT で実現するハイブリッドクラウド
bitkey
PRO
0
32
EMの役割とは何か、TLやICの役割と合わせての考察
bitkey
PRO
0
170
常設アプリ運用で遭遇した珍トラブル
bitkey
PRO
0
240
Other Decks in Technology
See All in Technology
plotlyで動くグラフを作る
kosshi
0
710
グローバルチームことはじめ / Bootstrapping a global team
tasshi
1
590
WebLogic Server for OCI 概要
oracle4engineer
PRO
3
840
Virtual Thread - 導入の背景と、効果的な使い方 -
skrb
3
250
20230123_FinJAWS
takuyay0ne
0
110
Amazon Forecast を使って売上予測をしてみた
tomuro
0
300
MoT/コネヒト/Kanmu が語るプロダクト開発xデータ分析 - 分析から機械学習システムの開発まで一人で複数ロールを担う大変さ
masatakashiwagi
2
560
目指せCoverage100%! AutoScale環境におけるSavings Plans購入戦略 / JAWS-UG_SRE_Coverage
taishin
0
270
RDS/Aurora バージョンアップのポイント
hmatsu47
PRO
8
1.6k
OpenShiftでスポットVMを使おう.pdf
jpishikawa
1
150
Optimizing your Swift code
kateinoigakukun
0
1.3k
インフラ技術基礎勉強会 開催概要
toru_kubota
0
130
Featured
See All Featured
How GitHub (no longer) Works
holman
298
140k
Embracing the Ebb and Flow
colly
75
3.6k
Product Roadmaps are Hard
iamctodd
38
7.7k
Raft: Consensus for Rubyists
vanstee
130
5.7k
Producing Creativity
orderedlist
PRO
335
37k
Visualizing Your Data: Incorporating Mongo into Loggly Infrastructure
mongodb
32
6.7k
実際に使うSQLの書き方 徹底解説 / pgcon21j-tutorial
soudai
44
14k
Writing Fast Ruby
sferik
613
58k
Stop Working from a Prison Cell
hatefulcrawdad
263
18k
WebSockets: Embracing the real-time Web
robhawkes
58
6k
No one is an island. Learnings from fostering a developers community.
thoeni
12
1.5k
Imperfection Machines: The Place of Print at Facebook
scottboms
254
12k
Transcript
DatadogΛCloud Loggingͱ౷߹ͯ͠ΤϥʔΛεέεέʹ͍ͨ͠ʂ 43&ా܆
0VUMJOF 1. ͳͥDatadogΛಋೖͨ͠ͷ͔ 2. Log PipelineΛ׆༻ͨ͠Τϥʔϩάͷ ՄࢹԽ 3. ֶͼ
ా܆ ,BPSV5TVEB גࣜձࣾϫʔΫεΞϓϦέʔγϣϯζʹೖࣾ *%ཧͷ։ൃΛ୲ ϏοτΩʔࢀը &$αΠτ4$.γεςϜͳͲͷ։ൃΛ୲ IPNFνʔϜҟಈ
CJUMPDLBQQͷ։ൃIPNFIVCͷઃܭɾ։ൃΛ୲ 43&νʔϜҟಈ ओʹ੬ऑੑஅΠϯγσϯτཧϓϩηεͷߏ ஙɺ%BUBEPHಋೖΛ୲
1. Datadogಋೖཧ༝
1. Datadogಋೖཧ༝ എܠ - 43&νʔϜര - രͷܦҢͪ͜ΒͷεϥΠυͰ - $FOUSBM43& &NCFEEFE43&ମ੍ΛਐΊ͓ͯΓɺνʔϜΛ·͍ͨͰ
ԣஅతͳࢹମ੍Λߏங͍ͨ͠ - ΠϯγσϯτͷৼΓฦΓͳͲ͔Βࢹͷॏཁੑߴ·͍ͬͯͨ
1. Datadogಋೖཧ༝ എܠ - 43&νʔϜര - രͷܦҢͪ͜ΒͷεϥΠυͰ - $FOUSBM43& &NCFEEFE43&ମ੍ΛਐΊ͓ͯΓɺνʔϜΛ·͍ͨͰ
ԣஅతͳࢹମ੍Λߏங͍ͨ͠ - ΠϯγσϯτͷৼΓฦΓͳͲ͔Βࢹͷॏཁੑߴ·͍ͬͯͨ → Datadogಋೖ
1. Datadogಋೖཧ༝ ظ - 4-*ͷܭଌͱΞϥʔτ - ΦϯϓϨαʔόʔͷՄࢹԽ - "1.36.Λ͍͍ͬͯײ͡ͷՄࢹԽΛਐΊ͍ͨ -
*P5σόΠεͷՄࢹԽ
1. Datadogಋೖཧ༝ ͬ͘͟ΓαʔϏεશମ૾
1. Datadogಋೖཧ༝ ݁ - SLIͷܭଌͱΞϥʔτ -> ֤छΠϯςάϨʔγϣϯ͔ΒऔΕΔϝτϦΫεʴ֎ܗࢹͰ࣮ݱ - ΦϯϓϨαʔόʔͷՄࢹԽ -
ύϑΥʔϚϯεͷଌఆɾվળ - *P5σόΠεͷՄࢹԽ
1. Datadogಋೖཧ༝ SLIͷܭଌͱΞϥʔτ ϑϩϯτ֎ܗࢹ͔Β 4-0ϞχλʔΛ࡞ όοΫΠϯςάϨʔγϣ ϯʹΑͬͯऩू͞ΕΔϝτ ϦΫε͔Β4-0ϞχλʔΛ ࡞
1. Datadogಋೖཧ༝ ݁ - 4-*ͷܭଌͱΞϥʔτ - ΦϯϓϨαʔόʔͷՄࢹԽ -> Datadog AgentͰ࣮ݱ
- ύϑΥʔϚϯεͷଌఆɾվળ - *P5σόΠεͷՄࢹԽ
1. Datadogಋೖཧ༝ ΦϯϓϨͷՄࢹԽ ΦϯϓϨʹσϓϩΠ͞Εͯ ͍Δ8JOEPXT4FSWFSʹ %BUBEPH"HFOUΛΠϯε τʔϧ͠ɺϝτϦΫεΛऩ ू
1. Datadogಋೖཧ༝ ظ - 4-*ͷܭଌͱΞϥʔτ - ΦϯϓϨαʔόʔͷՄࢹԽ - ύϑΥʔϚϯεͷଌఆɾվળ ->
RUM/APMΛͬͯɺϑϩϯτɾόοΫͷࢹମ੍ߏங - *P5σόΠεͷՄࢹԽ
1. Datadogಋೖཧ༝ ύϑΥʔϚϯεͷଌఆ ϑϩϯτ36.Λಋೖ͠ɺ 8FC$PSF7JUBMTΛத৺ͱ ͨ͠ύϑΥʔϚϯεܭଌ όοΫ4-0ͱಉ༷֤छϝ τϦΫεΛ׆༻ͯ͠ϨΠς ϯγΛܭଌ
"1.ΛೖΕͯτϨʔεΛݟ ͯվળɻ
1. Datadogಋೖཧ༝ ظ - 4-*ͷܭଌͱΞϥʔτ ֤छΠϯςάϨʔγϣϯ͔ΒऔΕΔϝτϦΫεʴ֎ܗࢹ - ΦϯϓϨαʔόʔͷՄࢹԽ -
ύϑΥʔϚϯεͷଌఆɾվળ - IoT σόΠεͷՄࢹԽ -> Serverless + APMͰ࣮ݱ
1. Datadogಋೖཧ༝ IoTσόΠεͷࢹ ΠϯςάϨʔγϣϯʹΑΔ "84*P5ͷϝτϦΫεɺ ͔ͦ͜Βݺͼग़͞ΕΔ -BNCEBʹ"1.ΛೖΕɺՄ ࢹԽ
݁ - ಋೖ͔ͯ͠Βܦͬͯ֓ͶظΛୡʂ - ҟৗࣄଶʹΞΫςΟϒʹؾͮ͘͜ͱ͕Ͱ͖ΔΑ͏ʹͳͬͨ - ֤։ൃνʔϜேձͰ֬ೝ͠ɺҟৗʹର͢ΔΞϯςφཱ͕ͬͨ 1. Datadogಋೖཧ༝
2. Log PipelineΛ׆༻ͨ͠ΤϥʔϩάͷՄࢹԽ
2. Log PipelineΛ׆༻ͨ͠ΤϥʔϩάͷՄࢹԽ എܠ - ػೳ֦ॆਐΜͰ͖͍ͯΔ͕ݩΛݻΊ͖Ε͍ͯͳ͍ - ಋೖॳͷతୡͨ͠ͷͷɺ࠷ݶ͔͠Ͱ͖͍ͯͳ͍ - ;ͱݟͯΈΔͱͦ͜ʹେྔͷແࢹ͞Ε͍ͯΔΤϥʔϩά͕ɾɾɾ
- ͔͠͠ͳ͕Βɺશମྔ͕ݟ͑ͣ༏ઌ͕͚ͭΒΕͳ͍ - ΧελϜϝτϦΫεͳͲΛద༻͢Δʹશ෦ͷΤϯυϙΠϯτʹखΛ ೖΕͳ͍ͱ͍͚ͳ͍ɾɾɾ
എܠ - ػೳ֦ॆਐΜͰ͖͍ͯΔ͕ݩΛݻΊ͖Ε͍ͯͳ͍ - 4-0Λࡦఆͨ͠ͷͷɺ࠷ݶ͔͠Ͱ͖͍ͯͳ͍ - ;ͱݟͯΈΔͱͦ͜ʹେྔͷແࢹ͞Ε͍ͯΔΤϥʔϩά͕ɾɾɾ - ͔͠͠ͳ͕Βɺશମྔ͕ݟ͑ͣ༏ઌ͕͚ͭΒΕͳ͍ -
ΧελϜϝτϦΫεͳͲΛద༻͢Δʹશ෦ͷΤϯυϙΠϯτʹखΛ ೖΕͳ͍ͱ͍͚ͳ͍ɾɾɾ → LogΛ׆༻Ͱ͖ΔͷͰʁ 2. Log PipelineΛ׆༻ͨ͠ΤϥʔϩάͷՄࢹԽ
2. Log PipelineΛ׆༻ͨ͠ΤϥʔϩάͷՄࢹԽ ظ - ΤϥʔϩάͷશମྔΛݟͯରԠ͢Δ༏ઌΛܾΊΒΕΔ - Ͳͷސ٬ͰΑ͘Τϥʔϩά͕ૹग़͞Ε͍ͯΔ͔Λࢹ͠ɺॏࢹର ʹͰ͖Δ -
ͲͷػೳʢʹͲͷ1BUIʣͰΑ͘Τϥʔϩά͕ૹग़͞Ε͍ͯΔ͔Λࢹ ͠ɺػೳվमͷ༏ઌΛ͚ͭΒΕΔ
2. Log PipelineΛ׆༻ͨ͠ΤϥʔϩάͷՄࢹԽ Ռ
2. Log PipelineΛ׆༻ͨ͠ΤϥʔϩάͷՄࢹԽ લఏ - $MPVE-PHHJOH%BUBEPHͷઃఆެࣜυΩϡϝϯτʹैͬͯઃఆ - ͨͩɺͯ͢ͷϩάΛ࣋ͬͯ͘Δͱྉ͕ۚΤά͍ - ྫ݄͑ͷϩάྔ5J#ऑɺΠϕϯτ
. - ͓Αͦ ͘Β͍ɺ͓Αͦ= υϧԁ - -PH3PVUFSͷઃఆͰɺA4FWFSJUZ&3303Aʹߜͬͯ࿈ܞ
ͬͨ͜ͱ - -PH1JQFMJOFTΛ࣮ - 'BDFUTͷ࡞ - .FUSJDTͷ࡞ 2. Log PipelineΛ׆༻ͨ͠ΤϥʔϩάͷՄࢹԽ
2. Log PipelineΛ׆༻ͨ͠ΤϥʔϩάͷՄࢹԽ -PH1JQFMJOFTͷ࣮ ฐࣾͷέʔε (SPLύʔαʔͰΤϯυϙΠϯτͷ63-͔Βސ٬ͷ66*%Λநग़ 4USJOH#VJMEFSͰQBUIΛ݁߹
3FNBQQFSͰϩάͷΦϒδΣΫτʹ࠶֨ೲ
2. Log PipelineΛ׆༻ͨ͠ΤϥʔϩάͷՄࢹԽ 'BDFUTͷ࡞ - 1JQFMJOFͰ࡞ͨ͠ϑΟʔϧυͰ'BDFUΛ࡞ - .FUSJDTʹͯ͠ɺظؒʹΘͨͬͯൺֱͰ͖Δ Α͏ʹ 5JQT
- %JTQMBZ/BNFʹ໊લΛ͚ͭΔͱཧղ͢͠ ͘ͳΔ - 'BDFU࡞Δͱ͖(SPVQͰ·ͱΊΔͱݟ௨͠ ͕Α͘ͳΔ
2. Log PipelineΛ׆༻ͨ͠ΤϥʔϩάͷՄࢹԽ ϩά͔Β.FUSJDTΛੜ - .FUSJDTΛੜ͢Δͱ͖ͷάϧʔϓʹ࡞ͨ͠GBDFUΛࢦఆ͢Δ 5JQT - zGBDFU͕ଘࡏ͢ΔzҎ֎ͷ'JMUFS݅άϧʔϓʹͪ͠Όͬͯμογϡ ϘʔυଆͰGJMUFSֻ͚ΒΕΔΑ͏ʹ͓ͯ͘͠ͱऔΓճͦ͢͠͏
Ͱ͖͍ͯͳ͍͚ͲΕͨΒྑ͔ͬͨ͜ͱ - 'BDFUT.FUSJDTͷ໋໊نଇࡦఆ - ͦΕͧΕ͕ࣗ༝ʹ໊લΛ͚ͭͨΓงғؾΛಡΜͰΔɾɾɾ - طଘϝτϦΫεͱݟ͚Δͷ͘͠ͳ͍ͬͯΔɾɾɾ 2. Log PipelineΛ׆༻ͨ͠ΤϥʔϩάͷՄࢹԽ
3. ֶͼ
3. ֶͼ ڞ௨Loggerͷ༻ҙɺେࣄ ࢦඪΛϩά͔Β࡞ΔͷɺՄೳͰ͋Δ͕ෛՙߴ͍ ͷͰ43&͕ओಋͯ͠-PHHFSΛ࡞ͨ͠
݁ - (SPL1BSTFSݱ࣌Ͱར༻͍ͯ͠ͳ͍ - ϝϯςφϯε͕͍ͨΜʹਏ͍ͷͰ - ͦΕΑΓɺڞ௨ͷ-PHHFSΛվળ͍ͯͬͨ͠΄͏͕কདྷతͳίετΛ ݟͨͱ͖ʹ͍҆ - ͦͦ-PHHFSͬͯͳ͔ͬͨΒɺ͏Α͏ʹ͢Δ
- ϩάͷΨΠυϥΠϯͳͲͰઌΜͯ͡ݴޠԽ͓ͯ͘͠ͱྑͦ͞͏ - ߏԽͨ͠Γɺ$POUFYUΛϩάʹग़͢Α͏ʹͨ͠ΓɺWFSTJPOؚΊ ͨΓ 3. ֶͼ