Linuxos_for_system_metrics

1 -JOVY04͔ΒݟΔ .BDLFSFMͷ ύϑΥʔϚϯεϞχλϦϯά .BDLFSFM/FX3FMJD &MBTUJDTFBSDI 4FNJOBS

3 • ીࠜ ૖େ JE4PVEBJ • גࣜձࣾ ͸ͯͳ • .BDLFSFMνʔϜ
• $VTUPNFS3FMJBCJMJUZ&OHJOFFS ٕज़Ͱօ༷ͷ໰୊Λղܾ͢Δ͓࢓ࣄͰ͢ ࣗݾ঺հ

4 ࠓ೔ͷΰʔϧ ΞϓϦέʔγϣϯ ϛυϧ΢ΣΞɾ04ɾωοτϫʔΫ ςΩετɾϩά αʔϏε

5 ࠓ೔ͷΰʔϧ ΞϓϦέʔγϣϯ ϛυϧ΢ΣΞɾ04ɾωοτϫʔΫ ςΩετɾϩά αʔϏε

6 ύϑΥʔϚϯεϞχλϦϯά͸৬ਓܳ ࠓ೔ͷΰʔϧ

7 ԿΛݟΕ͹͍͍͔Θ͔Βͳ͍ʜ ࠓ೔ͷΰʔϧ

8 άϥϑΛݟͯ΋Կॲ͕ѱ͍ͷ͔Θ͔Βͳ͍ʜ ࠓ೔ͷΰʔϧ

9 ͦ͜Ͱʂʂ ࠓ೔ͷΰʔϧ

10 -JOVYͷύϑΥʔϚϯεϞχλϦϯάΛ ஌ΔɾݟΔɾվળ͢Δ ࠓ೔ͷΰʔϧ

11 -JOVYͷύϑΥʔϚϯεϞχλϦϯάΛ ஌ΔɾݟΔɾվળ͢Δ ࠓ೔ͷΰʔϧ

12 -JOVYͷύϑΥʔϚϯεϞχλϦϯάΛ ஌ΔɾݟΔɾվળ͢Δ ࠓ೔ͷΰʔϧ Ͱ͖Δʂ-JOVYͷϞχλϦϯάʂʂ

13 .BDLFSFMͱ͸ -JOVYͷϞχλϦϯά ύϑΥʔϚϯεϞχλϦϯάͷεεϝ ·ͱΊ ࠓ೔ͷΞδΣϯμ

15 ௚ײతͳϢʔβʔମݧ

16 ΞʔΩςΫνϟ Mackerel͔Β ֎෦αʔϏε ΁ͷ௚઀؂ࢹ ΤʔδΣϯτ͔Β ϝτϦοΫΛ౤ߘ HTTPS REST API

17 ؆୯ɻ͙͢ ͸͡ΊΒΕ·͢ • ΨΠυʹ͕ͨͬͯ͠ίϚϯυΛ࣮ߦ͢Δ͚ͩ • ਺෼͋Ε͹े෼Ͱ͢ mackerel-agent written in
Go

18 .BDLFSFMͱ͸ -JOVYͷϞχλϦϯά ύϑΥʔϚϯεϞχλϦϯάͷεεϝํ ·ͱΊ ࠓ೔ͷΞδΣϯμ

19 -JOVYͰΑ͘ݟΒΕΔϝτϦοΫ -JOVYͷϞχλϦϯά

20 • MPBEBWH • DQV • NFNPSZ -JOVYͷϞχλϦϯά • EJTL
• JOUFSGBDF • GJMFTZTUFN γεςϜʹؔΘΔϝτϦοΫ

22 ࣮ߦ଴ͪͷʢ࣮ߦΩϡʔ಺ʹ͋Δʣϓϩηεͷ਺ͱ σΟεΫͷ*0଴ͪͷϓϩηεͷ਺ͷ߹ܭ஋ ϩʔυΞϕϨʔδ

23 ࣮ߦ଴ͪͷʢ࣮ߦΩϡʔ಺ʹ͋Δʣϓϩηεͷ਺ͱ σΟεΫͷ*0଴ͪͷϓϩηεͷ਺ͷ߹ܭ஋ ϩʔυΞϕϨʔδ ͭ·ΓϩʔυΞϕϨʔδ͕ߴ͚Ε͹ $16΍%JTL*0͕٧·͍ͬͯΔ͜ͱΛද͢

24 VQUJNF VQ VTFS MPBEBWFSBHF ϩʔυΞϕϨʔδ

27 VQUJNF VQ VTFS MPBEBWFSBHF ϩʔυΞϕϨʔδ 3つ並んでいる値は左から順番に「1分間の平均値」
「5分間の平均値」「10分間の平均値」

28 VQUJNF VQ VTFS MPBEBWFSBHF ϩʔυΞϕϨʔδ 3つ並んでいる値は左から順番に「1分間の平均値」
「5分間の平均値」「10分間の平均値」

• JOUFSGBDF • GJMFTZTUFN γεςϜʹؔΘΔϝτϦοΫ ϩʔυΞϕϨʔδͷ෼ؒͷฏۉ஋

31 $16࢖༻཰ͷׂ߹Λ஌Δ $16

32 $16࢖༻཰ͷׂ߹Λ஌Δ $16 $16͕ͷ৔߹ʹ Ͳ͜Ͱ࢖͍ͬͯΔ͔Λ஌Δ

33 UPQ 5BTLTUPUBM SVOOJOH TMFFQJOH TUPQQFE [PNCJF $QV T VT
TZ OJ JE XB IJ TJ TU .FNLUPUBM LVTFE LGSFF LCVGGFST 4XBQLUPUBM LVTFE LGSFF LDBDIFE $16

36 UPQ $QV T VT TZ OJ JE XB IJ
TJ TU VTFSTZTUFNOJDFJEMF *0XBJUIBSEXBSFTPGUXBSFTUFBM $16

37 $16Ͱ཈͑Δ΂͖ϝτϦοΫ $16 • DQVVTFS • DQVJPXBJU • DQVTZTUFN •
DQVJEMF

DQVJEMF ΧʔωϧҎ֎͕࢖༻ͨ࣌ؒ͠ͷׂ߹

DQVJEMF *0଴ͪʹΑΓΞΠυϧঢ়ଶͰ ͋ͬͨ࣌ؒͷׂ߹

DQVJEMF Χʔωϧ͕࢖༻ͨ࣌ؒ͠ͷׂ߹

DQVJEMF *0଴͕ͪͳ͘ɺ͔ͭ$16͕ ΞΠυϧঢ়ଶͰ͋ͬͨ࣌ؒͷׂ߹

• JOUFSGBDF • GJMFTZTUFN γεςϜʹؔΘΔϝτϦοΫ ࠓ೔͸͕࣌ؒͳ͍ͷͰׂѪ

44 .BDLFSFMຊ

• JOUFSGBDF • GJMFTZTUFN γεςϜʹؔΘΔϝτϦοΫ શͯͷ߲໨ʹ͍ͭͯৄࡉ͕͋Γ·͢ʂ

48 ͜Μͳܦݧ͋Γ·ͤΜ͔ʁ ύϑΥʔϚϯεϞχλϦϯάͷεεϝ

49 ͸ͯͳϒοΫϚʔΫͷϗοτΤϯτϦʔೖΓͯ͠ ΞΫηεٸ૿ʂʂ ύϑΥʔϚϯεϞχλϦϯάͷεεϝ

50 ߴ໐ΔΞϥʔτɺߴ·ΔϩʔυΞϕϨʔδ ύϑΥʔϚϯεϞχλϦϯάͷεεϝ

51 MPBEBWH্͕͕ΔͱγεςϜʹෛՙ͕͔͔͍ͬͯΔ ߴ·ΔϩʔυΞϕϨʔδ

52 MPBEBWH্͕͕ΔͱγεςϜʹෛՙ͕͔͔͍ͬͯΔ ߴ·ΔϩʔυΞϕϨʔδ ͔͠͠ଈো֐ͱ͸ݶΒͳ͍

53 ॠؒతʹॲཧ͕ूதͯ͠΋ɺ ฏৗ࣌ͷෛՙʹ·Ͱམͪண͘͜ͱ͕Ͱ͖Δ͔Ͳ͏͔ ߴ·ΔϩʔυΞϕϨʔδ

54 ʮ࣮ࡍʹࡹ͍͍ͯΔॲཧྔʢ Y ʣʯ ʮࡹ͘΂͖ॲཧͷ૯ྔʢ Z ʣʯ ͕ YZ ʹͳ͍ͬͯͳ͍͔
ϩʔυΞϕϨʔδ

55 ϩʔυΞϕϨʔδ

56 ϩʔυΞϕϨʔδ εύΠΫ͍ͯ͠Δ͕ ͙͢ʹऩଋ͍ͯ͠ΔͷͰ໰୊͸ແ͍

57 ϩʔυΞϕϨʔδ

58 ϩʔυΞϕϨʔδ X < Y の状態を放っておくと、どんどんと処理待ちプロセスが溜まり、処理されるのが遅れてくる一方になる

59 ϩʔυΞϕϨʔδ 根本的な対策を講じる必要があり、 CPUかDISCにボトルネックがあると推測できる

60 $16ͷϝτϦοΫ͔ΒݪҼΛಡΈऔΔ MPBEBWH ͷ্ঢத

61 σΟεΫͷ*0ੑೳ͕ωοΫ DQVJPXBJU͕ߴಅ͍ͯ͠Δ৔߹

62 σΟεΫͷ*0ੑೳ͕ωοΫ DQVJPXBJU͕ߴಅ͍ͯ͠Δ৔߹ %JTDͷϝτϦοΫͷ3FBEͱ8SJUFΛ֬ೝ

63 ΧʔωϧҎ֎ͷϓϩηε͕ݪҼ DQVVTFS͕ߴಅ͍ͯ͠Δ৔߹

64 ΧʔωϧҎ֎ͷϓϩηε͕ݪҼ DQVVTFS͕ߴಅ͍ͯ͠Δ৔߹ ྫ͑͹ΞϓϦέʔγϣϯ

65 ΧʔωϧҎ֎ͷϓϩηε͕ݪҼ DQVVTFS͕ߴಅ͍ͯ͠Δ৔߹ ྫ͑͹ΞϓϦέʔγϣϯ ΞϓϦͷվળΛߦ͏͔ɺ$16ͷεϖοΫΛ্͛Δ͜ͱͰ վળ͞ΕΔՄೳੑ͕͋Δ

66 ϞχλϦϯά͓ͯ͘͜͠ͱͰཧ༝͕Θ͔Δ

67 ΦʔόʔεϖοΫͷαʔόΛར༻͍ͯ͠Δ $16Λ࢖༻཰͕ৗʹ௿͍৔߹

68 ΦʔόʔεϖοΫͷαʔόΛར༻͍ͯ͠Δ $16Λ࢖༻཰͕ৗʹ௿͍৔߹ ίετμ΢ϯͷνϟϯεʂ ແବͳϦιʔεΛ࡞Βͳ͍

70 ύϑΥʔϚϯεϞχλϦϯά͸೉͍͠ ·ͱΊ

71 ύϑΥʔϚϯεϞχλϦϯά͸೉͍͠ ·ͱΊ ݟΔ΂͖஋ɺ৚݅͸αʔϏε΍αʔόͷ໾ׂʹΑͬͯҧ͏

72 ύϑΥʔϚϯεϞχλϦϯά͸೉͍͠ ·ͱΊ ݟΔ΂͖஋ɺ৚݅͸αʔϏε΍αʔόͷ໾ׂʹΑͬͯҧ͏ 8FCαʔόͱ%#αʔόͰ΋ݟΔ΂͖ϝτϦοΫ͸มΘΔ 8FCαʔϏε͔ۀ຿ܥ͔Ͱ΋ݟΔ΂͖ϝτϦοΫ͸มΘΔ

73 ύϑΥʔϚϯεϞχλϦϯά͸೰·͍͠ ·ͱΊ

74 ύϑΥʔϚϯεϞχλϦϯά͸೰·͍͠ ·ͱΊ εύΠΫͳͷ͔ɺগ্ͮͭ͠ঢͨ͠ͷ͔͸࣌ܥྻσʔλ͕ඞཁ

75 ύϑΥʔϚϯεϞχλϦϯά͸೰·͍͠ ·ͱΊ εύΠΫͳͷ͔ɺগ্ͮͭ͠ঢͨ͠ͷ͔͸࣌ܥྻσʔλ͕ඞཁ աڈͷσʔλ͸औΔ͜ͱ͕ग़དྷͳ͍ ͔ͩΒͦ͜໰୊͕ى͜Δલ͔ΒϞχλϦϯά͢Δࣄ͕େࣄ

76 ϞχλϦϯάͷ஌ݟΛ.BDLFSFM͕ڞ༗͢Δ ·ͱΊ

77 1MVHJOʹΑΔऩू͢΂͖ϝτϦοΫͷछྨ ϩʔϧʹΑΔαʔόͷ·ͱΊํ άϥϑΞϊςʔγϣϯ΍άϥϑϘʔυʹΑΔ Θ͔Γ΍͍͢ϝτϦοΫͷݟํ ʜ FUD
.BDLFSFM͕ڞ༗͢Δ஌ݟ

78 ҰาਐΜͩ.BDLFSFMͷར༻๏ .BDLFSFMͰ৽ͨͳੈքΛ

79 ॊೈͳάϥϑදݱʢܭࢉࣜʣ ࠩ෼ લिͱͷॏͶ͋Θͤ ࠷େ ࠷େɾฏۉɾ࠷খ ߹ܭ

80 কདྷ༧ଌ • աڈͷ܏޲Λ෼ੳ͠ɺকདྷͷ༧ଌʹج͍ͮͯܯࠂ • ྫ͑͹ɺσΟεΫ͕ރׇ͢Δ1ϱ݄લʹ͓஌Βͤ͢Δ͜ͱ΋ Critical > 80% কདྷ
Trends 1ϱ݄લ ݱࡏ

81 ϗετ؅ཧͱͯ͠ͷ.BDLFSFM • ͓࢖͍ͷπʔϧͱ࿈ܞ͠ɺ༻్ʹԠͯ͡૊Έ߹ΘͤΔ͜ͱ͕Ͱ͖ ·͢ Server Server Server Server Deploy
Configuration API mkr

82 ؾʹͳΔํ͸.BDLFSFMຊ

83 Έͳ͞Μ΋Ұॹʹָ͠Έ·͠ΐ͏ʂ ·ͱΊ

84 ͝ਗ਼ௌ͋Γ͕ͱ͏͍͟͝·ͨ͠

Linuxos_for_system_metrics

Linuxos_for_system_metrics

Transcript

More Decks by soudai sone

Other Decks in Technology

Featured