cloudnative days tokyo online 2021 - 311

Transcript

1. AKS with Istioで運⽤しているサービスのUpgradeをし てみた Mar 11th, 2021 Koichi Yanagimoto Ecosystem Services Dept. Rakuten, Inc.
2. 2 Hello, My name is Koichi Yanagimoto (@kyanagimoto) Rakuten, Inc. Software Engineer Joined in 2009. Organizer of Nikotama.rb 趣味 • スノボ（温泉︖） • ポイ活 • キーボード集め CloudNative歴 • ２〜３年くらい︖ Self Introduction
3. 3 Today’s Topic
4. 4 How upgraded? Component Version AKS 1.16.13 -> 1.19.3 Istio 1.4.1 -> 1.8.2 Flagger 0.21 -> 1.6.1 Ruby 2.6 -> 2.7.2 Rails 6.0.2 -> 6.0.3.4
5. 5 AKS upgrade Breaking Changes • Kubernetes Version • Ubuntu Version • Ubuntu 16 -> Ubuntu 18 What happened? • Artifactoryに置いてあるContainer imageがpull出来ない問題
6. 6 xxxx.local→
7. 7 How solved? DaemonSetでresolv.confのリンクの付け替えを実施 • Azureの公式ドキュメント • https://docs.microsoft.com/ja-jp/azure/aks/support-policies#user-customization-of-agent-nodes • Microsoftへの問い合わせ • Githubのissue(対応継続中) • https://github.com/Azure/AKS/issues/2052
8. 8 Istio upgrade -> Istio operator • AddOn周りのinstall結構変わった • Custom ingressgateway manifestを ⾃分で書かなければいけなかった （Helmのときも書いてた） • そのほかは結構すんなりとupgrade!
9. 9 Flagger upgrade https://docs.flagger.app/ canary.yaml apiVersion: flagger.app/v1beta1 kind: Canary metadata: name: sample spec: targetRef: apiVersion: apps/v1 kind: Deployment name: sample progressDeadlineSeconds: 600 autoscalerRef: apiVersion: autoscaling/v2beta1 kind: HorizontalPodAutoscaler name: sample service: port: 80 targetPort: 3000 gateways: - istio-ingressgateway hosts: - "*" trafficPolicy: loadBalancer: simple: LEAST_CONN match: - uri: prefix: /sample method: exact: "GET" kubectl apply してみると、エラーが…
10. https://github.com/fluxcd/flagger/pull/777
11. 11 Flagger upgrade https://docs.flagger.app/ Re-Apply︕ . . . Canaryが終わらない…w Issueでなんか上がってないかな… 同じ状態のissue発⾒︕ https://github.com/fluxcd/flagger/issues/780
12. https://github.com/fluxcd/flagger/pull/781
13. 13 Takeaways • Cloudベンダー側の設定でどうにもならないもの はDaemonSet. • IstioはInstall周りからゴロっと変えたけど、そこ まで苦労しなかった. (Linkerd試してみたい) • OSSで問題に直⾯した時は、まずIssues.
14. 14 My teammates’ talk Vault on Kubernetes~秘匿情報の安全な管理~ https://event.cloudnativedays.jp/cndo2021/talks/371 デプロイメント⼿法を選択する ~ Flagger/Argo Rollouts ~ https://event.cloudnativedays.jp/cndo2021/talks/401 Dashboard as Codeでダッシュボード管理は改善するか︖ https://event.cloudnativedays.jp/cndo2021/talks/621 https://rakuten.wd1.myworkdayjobs.com/ja-JP/RakutenInc/job/Tokyo-Japan/SRE-Application-Engineer--EC- Platform----ECID_00008349 Job Information