Kubernetes撤退、 その後のはてなの取り組み / kubernetes meetup tokyo number 52

Transcript

1. Kubernetes撤退、
   その後のはてなの取り組み
   id:hayajo_77 / @hayajo
   2022/8/17 Kubernetes Meetup Tokyo #52
   1
   

   View Slide

2. 自己紹介
   ● 今井隼人
   ● id:hayajo_77,
   @hayajo
   ● 株式会社はてな
   ● Mackerelチーム
   ● SRE
   2
   

   View Slide

3. 3
   Mackerel?
   

   View Slide

4. SaaS型サーバー監視サービス
   4
   https://mackerel.io/
   

   View Slide

5. 5
   Mackerelにおける
   Kubernetes導入・撤退の
   振り返り
   

   View Slide

6. Kubernetes Meetup Tokyo #22
   6
   https://speakerdeck.com/hayajo/kubernetes-meetup-tokyo-number-22
   

   View Slide

7. Kubernetesの導入目的
   ● コンテナ運用のキャッチアップ
   ● ドッグフーディング
   ● インフラ管理コストの削減
   7
   

   View Slide

8. Amazon EC2でKubernetesクラスタを構築
   ● レイテンシを考慮するとAWS以外での運用は
   難しい
   ● 当時は日本リージョンにAmazon EKSが提供
   されていなかった
   8
   

   View Slide

9. Kubernetesの撤退理由
   ● 高い学習コスト
   ● 運用リソース不足
   ● クラスタアップデートへの対応の遅れ
   9
   

   View Slide

10. 10
    Mackerelでは
    (一時的に)Kubernetesを撤退したが、
    はてなとして
    Kubernetesを撤退したわけではない
    

    View Slide

11. 11
    現在の
    はてなにおける
    Kubernetesへの取り組み
    

    View Slide

12. 12
    導入・運用
    

    View Slide

13. サービスプラットフォームチームの事例
    13
    https://developer.hatenastaff.com/entry/2022/02/03/100525
    https://speakerdeck.com/masayoshimaezawa/hatena-engineer-semi
    nar-number-20
    

    View Slide

14. Amazon EKS導入の背景
    ● 社内にKubernetesの知見を広める
    ● 新旧多くのサービスを効率的に運用したい
    ● エコシステムとGitOpsを利用し、自動的で統
    一されたリリースを実現したい
    14
    

    View Slide

15. ビジネスプラットフォームチームの事例
    15
    https://blog.pokutuna.com/entry/born-digital-summit-2022
    

    View Slide

16. Google Kubernetes Engine導入の背景
    ● マネージドサービスの利用で運用を省力化
    ● ElasticSearchからBigQueryへ移行してコス
    ト改善
    ● システムをクラウドネイティブ化
    16
    

    View Slide

17. 17
    普及・学習
    

    View Slide

18. チームを横断した組織で取り組む
    18
    チームA チームB チームC
    SRE標準化委員会
    CloudNative推進会
    

    View Slide

19. 社内システム標準構成の提案
    ● チームごとにシステム構成はさまざま
    ● 標準構成を採用することで運用知見や
    ツールを共有し、システム構築・運用の
    効率化、省力化を目指す
    ● 多くのチームではAmazon ECSを採用し
    ているが、EKS/GKEも選択可能にする
    19
    

    View Slide

20. EKS社内標準構成の検討
    ● 社内システム標準構成のEKS部分
    ● 周辺ツールやサービスの調査と検証
    ● EKS, Kuberenetesの学習
    20
    

    View Slide

21. デプロイフローの共通化
    ● デプロイ効率の向上
    ● 知見やツールの共有
    ● 学習コストの低減
    ● 社内標準ツールとして
    ecspresso(ECS),
    ArgoCD(EKS)を採用
    ● GitOpsを基本として設計
    21
    

    View Slide

22. ツール、ライブラリの開発・提供
    ● Terraform module, AWS CDK library
    ● GitHub ActionsのComposite Actionや
    Reusable Workflow
    ● Mackerelプラグインや周辺監視ツール
    22
    

    View Slide

23. mackerel-container-agent-sidecar-injectorの開発
    23
    https://developer.hatenastaff.com/entry/2022/08/17/093000
    

    View Slide

24. mackerel-container-agent-sidecar-injectorの開発
    24
    ● Kubernetesを使いこなせていないという課題意識
    ● 開発を通してCRD, CustomController,
    AdmissionWebhookなどを学ぶ
    

    View Slide

25. 25
    これからの
    はてなにおける
    Kubernetesへの取り組み
    

    View Slide

26. さらなるKubernetesの普及と学習
    ● 社内向けのシステムなど、リスクが少ないと
    ころからEKSを導入して多くのエンジニアが
    Kubernetesに触れる機会を増やす
    ● 社内勉強会など、Kubernetesの学びの機会を
    提供する
    26
    

    View Slide

27. Mackerelでは...
    ● はてなのKubernetesの運用知見をサービスへ反映
    ● クラスタ監視のさらなる知見を得るために、システ
    ムをECSからEKSへ移行
    ● OpenTelemetryやメトリックのラベル対応など、
    Kubernetesを含めたクラウドネイティブなシステ
    ムへの親和性を高める
    27
    

    View Slide

28. 28
    まとめ
    

    View Slide

29. まとめ
    29
    ● はてなではいくつかのチームでKuberentesを
    導入して運用している
    ● チームを横断した組織でKubernetesの普及・
    学習に取り組んでいる
    ● 今後も積極的にKubernetesを導入し、その運
    用知見をサービスへ反映していく
    

    View Slide

30. 30
    curl -sIL mackerel.io | grep career
    

    View Slide