Upgrade to Pro — share decks privately, control downloads, hide ads and more …

CI/CDを使い倒して数段上のソフトウェア開発をしよう (デブサミ関西)

Kim, Hirokuni
September 27, 2019

CI/CDを使い倒して数段上のソフトウェア開発をしよう (デブサミ関西)

デブサミ関西の登壇資料です

Kim, Hirokuni

September 27, 2019
Tweet

More Decks by Kim, Hirokuni

Other Decks in Technology

Transcript

  1. 1
    CI/CDを使い倒して数段上の
    ソフトウェア開発しよう
    #circlecijp #devsumi

    View Slide

  2. 2
    CI/CD 戦国時代
    Google GCP Cloud Build
    Microsoft Azure Pipelines
    AWS CodeBuild GitHub Actions

    View Slide

  3. 3
    CI/CD 戦国時代

    View Slide

  4. 4
    最初の疑問
    なぜCI/CDへの関心がこれほど高まっているのか?

    View Slide

  5. 5
    自己紹介:
    Kim, Hirokuni (金 洋国)
    - 元CircleCI 開発者
    - CircleCI Japan TechLead
    - CircleCI SRE
    - 灘生まれ、谷上育ち

    View Slide

  6. 6
    モチベーションについて

    View Slide

  7. 7
    このセッションの基本の流れ
    What
    Why
    Why Not
    Beyond

    View Slide

  8. 8
    CI / 継続的インテグレーション

    View Slide

  9. 9
    What is CI?

    View Slide

  10. 10
    その前に確認
    もちろんテストは書いてますよね?

    View Slide

  11. 11
    なぜテストを書くべきか
    ● 何度も同じ手順を繰り返さないといけない
    ● 人の目や手に頼ると必ず見落としが発生する

    View Slide

  12. 12
    なぜテストを書くべきか
    ● 何度も同じ手順を繰り返さないといけない
    ● 人の目や手に頼ると必ず見落としが発生する
    それコンピューターにやらせようよ!

    View Slide

  13. 13
    CIとはテストを自動で実行する仕組み
    開発者のコード変更に対して
    ● 常に
    ● 同じ環境で
    テストを実行してくれる

    View Slide

  14. 14
    CIとはテストを自動で実行する仕組み
    開発者のコード変更に対して
    ● 常に
    ● 同じ環境で
    テストを実行してくれる
    ※ テストは自分たちで用意する必要がある

    View Slide

  15. 15
    Why CI?

    View Slide

  16. 16
    ただテストを書くだけでは不十分
    ● テストがあるけど実行し忘れた
    ● 昔書いたテストが壊れていて動かない
    ● テスト結果が環境依存

    View Slide

  17. 17
    ただテストを書くだけでは不十分
    ● テストがあるけど実行し忘れた
    ● 昔書いたテストが壊れていて動かない
    ● テスト結果が環境依存
    テストの信頼性がない

    View Slide

  18. 18
    問題: テストの実行忘れ
    ● リリース前にテストをしわすれる
    ● バグを見落とす
    ● 修正でリリースが遅れる

    View Slide

  19. 19
    解答: 常にテストを回す
    ● GitHub (VCS)の変更をCI/CDが検知
    ● 全変更に対してテスト実行

    View Slide

  20. 20
    問題: テストが壊れてしまう
    ● 古いテストが壊れている
    ● テストが悪いのかコードがわからない

    View Slide

  21. 21
    解答: 壊れたテストを素早く検知
    ● テストが壊れた時点で検知
    ● 直さないとマージできない (後述)

    View Slide

  22. 22
    使われていない自動化は壊れていく
    “サイボウズを支える CircleCI”より

    View Slide

  23. 23
    問題: テスト結果が環境依存
    僕のマシンだとテスト通ってます
    (`・ω・´) キリッ

    View Slide

  24. 24
    解答: CIを唯一のテスト環境にする
    ● 毎回同じテスト環境が構築される
    ● まっさらな環境でテストを実行
    ● いつ実行しても同じテスト結果になる

    View Slide

  25. 25
    CIの目的
    テストの新陳代謝を高めて信頼性をあげる

    View Slide

  26. 26
    Why NOT CI?

    View Slide

  27. 27
    CI導入を妨げる問題
    ● テストがない
    ● メンテナンス

    View Slide

  28. 28
    問題: テストがない
    ● CIを始めたい
    ● でも実行するテストが存在しない
    ● テスト文化の布教にはコストと時間がかかる
    CIを導入する上でいちばんやっかいな問題

    View Slide

  29. 29
    テストがない状態からCIを始める5ステップ
    Step 1: お好みのCI/CDツールを選ぶ
    Step 2: タスクの自動化
    Step 3: 可視化する
    Step 4: マージブロック
    Step 5: テストを追加していく

    View Slide

  30. 30
    Step 1: お好みのCI/CDツールを選ぶ

    View Slide

  31. 31
    ステップ2: 様々なタスクを自動化しよう
    テスト以外のタスクを自動化
    ● 構文チェック(linting)
    ● カバレッジ計測
    ● 循環的複雑度のチェック
    ● ドキュメントの自動生成

    View Slide

  32. 32
    ステップ3: 可視化しよう
    CI結果を可視化しよう
    ● ステータスバッジ
    ● ダッシュボードの作成
    ● メール・チャットでの通知

    View Slide

  33. 33
    CIやってる感が出てくる
    ”お、俺たちCIしてるっぽい”

    View Slide

  34. 34
    Step 4: マージブロック有効化
    マージするための条件をブランチごとに
    指定できる機能
    ● CIが通らないとマージできない
    ● 管理者しかマージできない
    ● Force Push禁止
    ● Etc, etc
    CircleCIが通らないとマージできない

    View Slide

  35. 35
    Step 5: テストの追加
    少しずつテストを追加していく
    ● ユニットテストはとりあえず後回し
    ● 最も大事なビジネスロジック
    ● この時点では無理は禁物....

    View Slide

  36. 36
    CI導入を妨げる問題
    ● テストがない
    ● メンテナンス

    View Slide

  37. 37
    問題: メンテナンス
    ● CI/CDツールのメンテナンスは大変
    ● 通常専任のエンジニアが必要
    ● CircleCIのようなクラウド型がおすすめ

    View Slide

  38. 38
    クラウド型 VS オンプレミス型
    クラウド型 オンプレミス型
    AWS CodeBuild CircleCI
    GCP Cloud Build Travis CI
    Jenkins
    Concourse CI

    View Slide

  39. 39
    CIのまとめ
    ● テストの信頼性と品質を向上させる
    ● テストがなくてもCIは始めれる
    ● できる自動化からはじめよう
    ● クラウド型のツールで運用コストを下げる

    View Slide

  40. 40
    Beyond CI

    View Slide

  41. 41
    開発フロー
    コードをPush

    View Slide

  42. 42
    開発フロー
    コードをPush CIでテスト

    View Slide

  43. 43
    開発フロー
    コードをPush CIでテスト masterへマージ

    View Slide

  44. 44
    開発フロー
    コードをPush CIでテスト masterへマージ
    自動

    View Slide

  45. 45
    開発フロー
    コードをPush CIで自動テスト masterへマージ
    自動
    リリース
    手動

    View Slide

  46. 46
    CD / 継続的デプロイメント

    View Slide

  47. 47
    What is CD?

    View Slide

  48. 48
    CDとは?
    Continuous Deployment (継続的デプロイメント)
    自動でステージング・本番環境へデプロイ
    Continuous Delivery (継続的デリバリー)
    常にリリース可能な状態を維持する

    View Slide

  49. 49
    Continuous Delivery (継続的デリバリー)
    リリース作業に人間の意思が介在する
    コードプッ
    シュ
    JARファイル
    CI
    Dockerイメージ
    ステージング
    本番環境
    人間が
    決定
    CD
    Continuous
    Delivery

    View Slide

  50. 50
    Continuous Deployment (継続的デプロイメント)
    リリースに人の意思が介在しない
    コードプッシュ
    JARファイル
    Dockerイメージ
    ステージング
    本番環境
    Continuous
    Delivery
    CD
    CI CD
    Continuous
    Deployment

    View Slide

  51. 51
    Why CD?

    View Slide

  52. 52
    リリース後に発覚する仕様バグ
    ● リリースして実際に使ってみた
    ● ユーザーの要求を満たしていない
    ● 仕様が全然間違っていた

    View Slide

  53. 53
    なぜこのようなことが起こるのか
    本当に必要な機能はクライアント/ユーザー
    にも使ってみないとわからない

    View Slide

  54. 54
    解答: フィードバックループを使おう
    ● 細かい単位でリリースする
    ● フィードバックを早めに得る
    ● カイゼンする

    View Slide

  55. 55
    CDなしだとだとループが回らない
    ● リリースの許可が必要
    ● ヒューマンエラー
    フィードバックループが回
    らない

    View Slide

  56. 56
    CDなくしてフィードバックループなし
    No CD, No Feedback Loop

    View Slide

  57. 57
    Why NOT CD?

    View Slide

  58. 58
    Why NOT CD?
    ● エンタープライズなアーキテクチャー
    ● レガシー (技術的負債が多い) アーキテクチャー
    そもそもシステムがCDに向いてない

    View Slide

  59. 59
    解答: 時間をかけてアップデート
    ● サービスの疎結合
    ● 徐々にモダン化
    CD導入の銀の弾丸はない

    View Slide

  60. 60
    CircleCIでの事例
    Before:
    ● 常に200台以上のビルドマシンからなるフリート
    ● Chat Ops (hubot)でデプロイ
    ● およそ2日で完全に入れ替わる
    ● しばらく古いコードと新しいコードが混在する問題

    View Slide

  61. 61
    CircleCIでの事例
    1年かけて以下を実施した
    ● DockerとKubernetesの導入
    ● マイクロサービス化

    View Slide

  62. 62
    新システムにはまずCI/CDを導入しよう
    家永 英治さんのブログより

    View Slide

  63. 63
    CDのまとめ
    ● CDが回るとフィードバックループも回る
    ● CDに向いていないシステムはある
    ● 既存システムに導入が無理なら新システムから

    View Slide

  64. 64
    Beyond CD

    View Slide

  65. 65
    CDのその先1: 迅速なロールバック
    $ git revert CD 修正完了

    View Slide

  66. 66
    CDのその先2: 本番環境でのテスト

    View Slide

  67. 67
    テスト環境での失敗例
    1週間テスト環境でテスト

    View Slide

  68. 68
    テスト失敗例
    1週間テスト環境でテスト

    リリース (完璧だ!)

    View Slide

  69. 69
    テスト失敗例
    1週間テスト環境でテスト

    リリース (完璧だ!)

    本番環境のDockerのバージョンが古くて
    バグを踏む

    View Slide

  70. 70
    テスト失敗例
    Dockerのバージョンも同じにした!

    View Slide

  71. 71
    テスト失敗例
    Dockerのバージョンも同じにした!

    リリース (今度こそ完璧だ!)

    View Slide

  72. 72
    例 2
    Dockerのバージョンも同じにした!

    リリース (今度こそ完璧だ!)

    GitHubのAPI使用制限にひっかかる

    View Slide

  73. 73
    なぜこんなことが起こるか?
    テスト可能部分
    外部サービス
    ビジネス要求
    仕様
    トラフィック・負荷
    テスト可能な部分はとても小さい!

    View Slide

  74. 74
    なぜこんなことが起こるか?
    テスト可能部分
    外部サービス
    ビジネス要求
    仕様
    トラフィック・負荷
    テスト可能な部分はとても小さい!

    View Slide

  75. 75
    開発者たちの重大な学び
    リリースしてみないと結局わからない!

    View Slide

  76. 76
    デプロイとリリースの違い
    デプロイ
    コードを本番環境に配置すること
    リリース
    配置したコードでトラフィックをさばくこと

    View Slide

  77. 77
    CDのその先3: 高度なリリース手法
    ● カナリーリリース
    ● ブルー グリーン デプロイ

    View Slide

  78. 78
    CDをつかいこなすと、、、
    ● 迅速なロールバック
    ● 本番環境でのテスト
    ● 高度なリリース手法
    これらがもたらすものは、、、

    View Slide

  79. 79
    CDをつかいこなすと、、、
    ● 迅速なロールバック
    ● 本番環境でのテスト
    ● 高度なリリース手法
    これらがもたらすものは、、、
    プログラミングに対する
    圧倒的な心理的安全

    View Slide

  80. 80
    Why CD?
    CI/CD Makes Programming
    FUN!!

    View Slide

  81. 81
    CI/CDの未来

    View Slide

  82. 82
    CI/CDはどこへ向かうのか?
    CI

    View Slide

  83. 83
    CI/CDはどこへ向かうのか?
    CI CDelivery

    View Slide

  84. 84
    CI/CDはどこへ向かうのか?
    CI CDelivery CDeployment

    View Slide

  85. 85
    CI/CDはどこへ向かうのか?
    CI CDelivery CDeployment ????

    View Slide

  86. 86
    CI/CDはどこへ向かうのか?
    CI CDelivery CDeployment ????
    自動化
    自動化
    自動化
    CI/CDの歴史は自動化の歴史

    View Slide

  87. 87
    確実な自動化の未来
    今手動でやっていることを意識しなくてもいい時代
    ● CIやCDの設定
    ● モニタリング
    ● デプロイ環境の構築

    View Slide

  88. 88
    CI/CDの未来
    $ git commit -m “First commit” && git push
    最初からクライマックス!!

    View Slide

  89. 89
    CircleCI ユーザコミュニティ
    東京
    大阪
    福岡
    ソウル
    バンコク
    ジャカルタ

    View Slide

  90. 90
    CircleCIファンのためのコミュニティ!
    #circlecijp
    circleci.connpass.com
    CircleCI ユーザコミュニティ
    circlecijp = “学ぶ” と “つながる”
    ● Learn
    機能だけでなく、運用のハナシも!
    ● Connect
    うまく使っている人だけでなく、
    これから使う人の HUB に!
    ● Output
    あなたのアウトプットが、誰かの躓きを防ぐ!
    あればあるほど、自分の疑問も解消しやすい!

    View Slide

  91. 91
    ご静聴ありがとうございました

    View Slide