インフラ運用ツール開発組織を1から組織した話

JANOG53での登壇資料です。

https://www.janog.gr.jp/meeting/janog53/devorg/

Transcript

1. ˜
   -:
   $PSQPSBUJPO Πϯϑϥӡ༻πʔϧ։ൃ૊৫Λ ͔Β૊৫ͨ͠࿩ -*/&Ϡϑʔגࣜձࣾ 4JUF
   0QFSBUJPOຊ෦ ωοτϫʔΫ෦ ωοτϫʔΫΦϖϨʔγϣϯνʔϜ ञҪ ږ 4BLBJ
   5PSV
2. ˜
   -:
   $PSQPSBUJPO "HFOEB 
   ࣗݾ঺հ ͜ͷਓԿऀ 
   /8։ൃνʔϜൃ଍ͷ͖͔͚ͬ 
   /8։ൃνʔϜCFGPSFBGUFS ։ൃνʔϜͷલͱɺޙ 
   Կ͔Β࢝ΊΑ͏ ্ཱͪ͛ظʹԿΛߟ͑ͯԿΛ͔ͨ͠ 
   
   νʔϜͷ੒௕ʹ൐͏՝୊ͱղܾ ࣮ମݧ͔ΒޮՌ͕͋ͬͨ΋ͷΛ঺հ  ऴΘΓʹ ೥ؒΛ;Γ͔͑ͬͯ  ࣭໰ٞ࿦ 
3. ˜
   -:
   $PSQPSBUJPO 
   ࣗݾ঺հ
4. ˜
   -:
   $PSQPSBUJPO  ˎܦྺˎ l 4*FS  ৽ଔೖࣾɻωοτϫʔΫΤϯδχΞɻ Ӧۀࢧԉ͔ΒઃܭɺߏஙΛ୲౰ɻ l 8FCܥαʔϏε  ωοτϫʔΫΛத৺ʹɺαʔόʔ؅ཧɺΞϓϦέʔγϣϯ։ൃ౳෯޿͘୲౰ɻ l -*/&גࣜձࣾ ݱ-*/&Ϡϑʔגࣜձࣾ
    ωοτϫʔΫΠϯϑϥ૊৫ͷωοτϫʔΫҎ֎શൠɻ͜΅Εٿर͍ɻ ωοτϫʔΫΤϯδχΞͱΞϓϦέʔγϣϯ։ൃऀͷܨ͗ɻۀ຿վળɻ ˎࣗݾ঺հˎ -*/&Ϡϑʔגࣜձࣾ4JUF
   0QFSBUJPOຊ෦ ωοτϫʔΫ෦
   ωοτϫʔΫΦϖϨʔγϣϯνʔϜ ञҪ ږ
5. ˜
   -:
   $PSQPSBUJPO 
   /8։ൃνʔϜൃ଍ͷ͖͔͚ͬ
6. ˜
   -:
   $PSQPSBUJPO • ωοτϫʔΫͷن໛͕੒௕͠ɺࣗಈԽͷػӡ͕ߴ·ͬͨ • /0$͕Քಇ͠ɺ୭Ͱ΋࡞ۀ͕Ͱ͖ΔΑ͏ͳӡ༻ͷ࢓૊Έ͕ඞཁʹͳͬͨ  ͖͔͚ͬ ೥        Քಇத/8ػث             ۓٸΞϥʔτ݅਺        Πϕϯτ $-04
   /8
   ӡ༻։࢝ /0$Քಇ ։ൃνʔϜൃ଍
7. ˜
   -:
   $PSQPSBUJPO 
   /8։ൃνʔϜCFGPSFBGUFS
8. ˜
   -:
   $PSQPSBUJPO  #FGPSF
   ӡ༻ମ੍ • ମ੍ िྠ൪Ͱࣾһ͕ӡ༻Λશͯ୲౰ ౰൪੍ • ఆৗۀ຿ • ໰͍߹ΘͤରԠ • ো֐ରԠ ໷ؒΦϯίʔϧରԠؚΉ • ࡞ۀํ๏ • ౰൪͕खॱॻΛ࡞੒ͯ͠खಈରԠ Ұ෦ɺݸਓͰ։ൃͨ͠πʔϧΛར༻ͯ͠ରԠ
9. ˜
   -:
   $PSQPSBUJPO  "GUFS
   ӡ༻ମ੍ • ମ੍ • ఆৗۀ຿
   /0$ • ໰͍߹ΘͤରԠ
   /0$ • ো֐ରԠ /0$ • ೔தΤεΧϨʔγϣϯ
   ωοτϫʔΫΦϖϨʔγϣϯνʔϜ • ໷ؒΤεΧϨʔγϣϯ
   ౰൪ • ࡞ۀํ๏ • πʔϧΛ࢖ͬͯରԠ • ϚχϡΞϧԽ͞Εͨखॱʹैͬͯ࡞ۀ
10. ˜
    -:
    $PSQPSBUJPO  #FGPSF
    ։ൃ؀ڥ • -BOHVBHF • 'SPOUFOE
    +BWB4DSJQU • #BDLFOE
    1ZUIPO • 'SBNFXPSL • 'SPOUFOE
    #PPUTUSBQ • #BDLFOE
    'MBTL
11. ˜
    -:
    $PSQPSBUJPO  "GUFS
    ։ൃ؀ڥ • -BOHVBHF • 'SPOUFOE
    +BWB4DSJQU
    5ZQF4DSJQU • #BDLFOE
    1ZUIPO • 'SBNFXPSL • 'SPOUFOE
    3FBDU
    /FYUKT • #BDLFOE
    'MBTL
    'BTU"1* • "SDIJUFDUVSF • υϝΠϯۦಈઃܭ %%%
    ϨΠϠʔυΞʔΩςΫνϟ • $POGJHVSBUJPO
    .BOBHFNFOU • "OTJCMF
    LVTUPNJ[FIFMN GPS
    LT • $*$% • %SPOF$*
    "SHP$% GPS
    LT • *%& • 74
    $PEF
    %FW DPOUBJOFST
    $PQJMPU͸͍͍ͧʂ
12. ˜
    -:
    $PSQPSBUJPO  #FGPSF
    Πϯϑϥ։ൃ؀ڥ$*$% 7FSEB 1SJWBUF
    $MPVE 7.1. BQQ -FHBDZ BQQ 1. ௚઀ϩάΠϯ ߏஙσϓϩΠ ։ൃऀ
13. ˜
    -:
    $PSQPSBUJPO  "GUFS
    Πϯϑϥ։ൃ؀ڥ$*$% 7FSEB 1SJWBUF
    $MPVE LT 7.1. BQQ -FHBDZ BQQ 1. BQQ؂ࢹ BQQ BQQ ؂ࢹ ؂ࢹ ௨஌ ߏ੒؅ཧ ։ൃऀ ڞ௨ σϓϩΠࢦࣔ σϓϩΠίϚϯυൃߦ σϓϩΠ TMBDLCPU
14. ˜
    -:
    $PSQPSBUJPO 
    Կ͔Β࢝ΊΑ͏
15. ˜
    -:
    $PSQPSBUJPO λεΫ؅ཧ +*3" • λεΫϘʔυ Χϯόϯ • λεΫͷ಺༰ΛͪΌΜͱॻ͘ • λεΫʹΑͬͯୡ੒͍ͨ͜͠ͱ • എܠ • ׬ྃ৚݅ • ਐߦதͷه࿥ εΫϥϜ ։ൃ • εϓϦϯτ
    िؒ ਫ༵೔Ր༵೔ • όοΫϩά࡞੒ • ேձ • ;Γ͔͑Γ • ϨϏϡʔ ౎౓։࠵ ࢀߟॻ੶ • ΧΠθϯɾδϟʔχʔ ஶ ࢢ୩ ૱ܒɺ৽Ҫ ߶ ՄࢹԽͱվળͷαΠΫϧΛճ͢  ੒ՌΛग़͠ଓ͚Δ࢓૊Έ࡞Γ
16. ˜
    -:
    $PSQPSBUJPO άϥϯυϧʔϧ • શྗΛਚͨ͘͜͠ͱΛٙΘͳ͍ • ݪҼͷ௥ٻ͸ͯ͠΋੹೚ͷ௥ٻ͸͠ͳ͍ ,15 ϑϨʔϜϫʔΫ • ,FFQ
    ଓ͚Δ͜ͱɺ͏·͍ͬͨ͘͜ͱɺͰ͖ͨ͜ͱ • ͍͍࢓ࣄΛͯͨ͠ਓ΁ͷ৆ࢍɾײँ • 1SPCMFN
    ͏·͍͔͘ͳ͔ͬͨ͜ͱɺ΋΍΋΍ͨ͜͠ͱ • ଞͷϝϯόʔʹ΋ৼͬͯߟ͑ΛγΣΞͯ͠΋Β͏ • 5SZ
    ͜Ε͔Β΍Δ͜ͱ • ۩ମతͳΞΫγϣϯʹམͱ͠ࠐ·Ε͍ͯΔ͔ΛݟΔ • ͕Μ͹ΔɺؾΛ͚ͭΔɺҙࣝ͢Δ 
    ԫ৭৴߸ • ϧʔϧ͸कΒΕͳ͍ 
    ՄೳͳݶΓ࢓૊ΈԽΛݕ౼͢Δ ;Γ͔͑Γ  ੒ՌΛग़͠ଓ͚Δ࢓૊Έ࡞Γ
17. ˜
    -:
    $PSQPSBUJPO ೿ݣࣾһ • 1ZUIPO։ൃܦݧ೥Ҏ্ ਖ਼ࣾһ • ։ൃΠϯϑϥωοτϫʔΫͷ͍ͣΕ͔ʹڧΈ͕͋ΓɺଞͷྖҬʹ΋ڵຯ͕͋Δ • ωοτϫʔΫͷεΩϧܦݧ౳͸ඞਢͰ͸ͳ͍ • ϓϩδΣΫτϦʔυͷܦݧ • Կ͔طଘͷ࢓૊ΈΛվળͨ͠ܦݧ • طଘϝϯόʔͱ΍͍͚ͬͯͦ͏͔  ਓһ࠾༻ ͲΜͳਓΛ࠾༻͔ͨ͠
18. ˜
    -:
    $PSQPSBUJPO • ϏζϦʔν
    -JOLFE*O౳ͰͷεΧ΢τ݄ • ݕࡧ IJU • ΧδϡΞϧ໘ஊґཔ ݅ • ΧδϡΞϧ໘ஊ dճ • Ԡื d݅ • ࣗࣾ࠾༻Πϕϯτͷొஃ೥ • ૊৫঺հ • ۀ຿಺༰঺հ • ϙδγϣϯ঺հ • ։ൃࣄྫ঺հ  ਓһ࠾༻ ۩ମతͳΞΫγϣϯ
19. ˜
    -:
    $PSQPSBUJPO "
    ΍͍͚ͬͯ·͢  ෼୲͢Δ • /8ͷυϝΠϯ஌͕ࣝ͋Δϝϯόʔ͕ઃܭΛ୲౰͠ɺ࣮૷Λߦͳͬͯ΋Β͏ • /8ػثૢ࡞Λ൐͏࣮૷͸/8ΤϯδχΞͷϨϏϡʔඞਢ • ઃܭଆ͕ϘτϧωοΫʹͳΔ • υϝΠϯۦಈઃܭΛۃΊͨΒઃܭΛ෼୲Ͱ͖Δ  /8ͷυϝΠϯ஌͕ࣝෆཁͳۀ຿Λ୲౰ͯ͠΋Β͏ • ։ൃ૊৫ࣗମͷվળۀ຿ • ίʔυͷ඼࣭޲্ • $*$% • ڞ௨తͳπʔϧͷ࡞੒ • ӡ༻ࢧԉπʔϧ TMBDLCPU
    ΤεΧϨʔγϣϯπʔϧ • /8؂ࢹج൫ߏங ؂ࢹ৚݅ઃఆҎ֎͸044ͷྖҬ  ਓһ࠾༻ /8ͷυϝΠϯ஌͕ࣝͳ͍ϝϯόʔ͕/8։ൃ૊৫Ͱ΍͍͚ͬͯΔͷ
20. ˜
    -:
    $PSQPSBUJPO 
    νʔϜͷ੒௕ʹ൐͏՝୊ͱվળ
21. ˜
    -:
    $PSQPSBUJPO ମ੍ ໊ ࣾһ໊ ՝୊ • ϨϏϡʔͷෛՙ͕ߴ͍ • ࡉ͔͍࡞๏·ͰݟͯͨΒΩϦ͕ͳ͍ • ίʔυΛಡΉͷʹ͕͔͔࣌ؒΔ • ಈ࡞͸։ൃऀଆͰอূͯ͠ཉ͍͠ • ςετͷ࣮ߦΛ๨ΕΔ ରԠ • ίʔσΟϯάϧʔϧ౷Ұ MJOUFSಋೖ GMBLF • ܕ Ξϊςʔγϣϯ Λॻ͘ NZQZ • ୯ମςετΛॻ͘ QZUFTU • $* ࣗಈςετ ಋೖ %SPOF$* ൃ଍ॳظ d  νʔϜͷ੒௕ʹ൐͏՝୊
22. ˜
    -:
    $PSQPSBUJPO ମ੍ ໊ ࣾһ໊ ՝୊ • 7.ͷ؅ཧ͕ͭΒ͍ • ઃఆϑΝΠϧ͕ҙਤͤͣมߋ͞Ε͍ͯΔ • 7. πʔϧ ͝ͱʹEFQMPZखॱ͕ඍົʹҧ͏ͷ͕େม • ͦ΋ͦ΋7.ͩͱ׬શͳߏ੒؅ཧ͸ແཧͰ͸ʜ ରԠ • *B$ಋೖ • "OTJCMF
    QMBZCPPLͰ؅ཧ • "QQMJDBUJPOͷEFQMPZखॱΛ$%Խ %SPOF$* • LT؀ڥ΁ͷҠߦ ΠϯϑϥͭΑͭΑ43&͕+PJO d  νʔϜͷ੒௕ʹ൐͏՝୊
23. ˜
    -:
    $PSQPSBUJPO ମ੍ ໊ ࣾһ໊ ՝୊ • ଞਓͷॻ͍ͨίʔυΛཧղɾվम͢Δͷ͕ͭΒ͍ • ϓϦϛςΟϒܕ JOU
    TUS
    EJDU
    MJTU ͸৘ใྔ͕௿͍ • FH EJDU EJDU<TUS MJTU<EJDU>> • σΟϨΫτϦͷߏ଄ɺؔ਺ͷ੹຿͕ਓʹΑͬͯҟͳΔ ରԠ • σʔλΛͪΌΜͱܕͱͯ͠ѻ͏ QZEBOUJDར༻ • ࣮ߦ࣌ͷܕνΣοΫ • ܕͷ٧Ίସ͕͑ศར • όοΫΤϯυͷઃܭख๏ΞʔΩςΫνϟͱͯ͠υϝΠϯۦಈઃܭ %%% ϨΠϠʔυΞʔΩςΫνϟΛ࠾༻ • ॳݟͷίʔυͰ΋໨తͷ࣮૷͕Ͳ͜ʹ͋Δͷ͔ཧղͰ͖Δঢ়ଶΛ໨ࢦ͢ɻ • lυϝΠϯzͷଊ͑ํ͕ਓʹΑͬͯҟͳΔͨΊɺ୭͕΍ͬͯ΋ಉ͡ͱ͸ͳΒͳ͍ %%%೉͍͠ʜɻ ݱࡏ d  νʔϜͷ੒௕ʹ൐͏՝୊
24. ˜
    -:
    $PSQPSBUJPO 
    ऴΘΓʹ
25. ˜
    -:
    $PSQPSBUJPO l ։ൃ૊৫Λ࡞ͬͨ͜ͱ l ϊ΢ϋ΢Λ஝ੵ͢Δ৔͕Ͱ͖ͨ l ωοτϫʔΫΤϯδχΞʹݶΒͣɺ֤෼໺ʹڧΈͷ͋Δਓࡐʹ࠾༻ͷ෯Λ޿͛ΒΕͨ l ωοτϫʔΫͷӡ༻ͱ։ൃ͕ಉ͡νʔϜʹॴଐ͍ͯ͠Δ͜ͱ l ӡ༻͸ɺۀ຿ΛఆܕԽ͢ΔͷͰ։ൃ ࣗಈԽ ͱ૬ੑ͕ྑ͍ l ӡ༻ͷ,1*Λڞ༗Ͱ͖Δ l վળ͠ଓ͚Δ࢓૊ΈΛ࡞Γҡ͖࣋ͯͨ͜͠ͱ l ίϛϡχέʔγϣϯػձ૑ग़ l ࣦഊͷϋʔυϧ͕Լ͕ͬͨ l ੒௕࣮ײ ͏·͍ͬͨ͘ཁҼΛ;Γ͔͑ͬͯ  ऴΘΓʹ
26. ˜
    -:
    $PSQPSBUJPO  ࣭໰ٞ࿦
27. ˜
    -:
    $PSQPSBUJPO l Έͳ͞Μͷ૊৫Ͱ͏·͘ϫʔΫ͍ͯ͠Δࢪࡦ l Έͳ͞Μͷ૊৫ʹ͓͚Δ՝୊ l ಛఆͷπʔϧʹ͓͍ͯ͸ɺ։ൃऀ͕࠷΋ৄ͍ͦ͠ͷਓʹ։ൃ͕ूத͢Δ໰୊ʹͲͷΑ͏ʹରॲ͍ͯ͠ Δ͔ l ։ൃऀʹωοτϫʔΫͷ஌ࣝΛಘͯ΋Βͬͨࣄྫ ٞ࿦  ࣭໰ٞ࿦
28. ˜
    -:
    $PSQPSBUJPO ͝ਗ਼ௌ͋Γ͕ͱ͏͍͟͝·ͨ͠