ZOZOTOWNのクラウド活用戦略 / Zozotown Cloud Strategy (Yamato DX Night2)

Title: ZOZOTOWNのクラウド活用戦略

Event: 【ヤマトHD × ZOZOテクノロジーズ】
マルチクラウド実践企業から学ぶ最新クラウド事例勉強会 - Yamato DX Night #2
Event Report: https://techplay.jp/column/1404

https://techplay.jp/event/791380
#YDX #techplayjp

Transcript

1. ZOZOTOWNのクラウド活用戦略
 【ヤマトHD × ZOZOテクノロジーズ】
 マルチクラウド実践企業から学ぶ最新クラウド事例勉強会 - Yamato DX Night #2
 株式会社ZOZOテクノロジーズ
 SRE部 
 川崎庸市 @yokawasa
 Copyright © ZOZO Technologies, Inc.
2. © ZOZO Technologies, Inc. 株式会社ZOZOテクノロジーズ SRE部 川崎 庸市 Yoichi Kawasaki 株式会社ZOZOテクノロジーズ SRE部所属のエンジニア。過去に国内 大手インターネット企業にて大規模サービスの基盤プラットフォーム 開発に従事、外資系ソフトウェアベンダーにてエンタープライズ検索製品の コンサルやクラウドサービスのアーキテクチャ策定支援に従事。 現在はインフラ運用の自動化・効率化が目下の関心事。業務外では NoOps Japanコミュニティーの運営に従事。趣味はサウナ。
 2 Twitter / GitHub: @yokawasa
3. © ZOZO Technologies, Inc. https://zozo.jp/
 • 日本最大級のファッション通販サイト
 • 1,300以上のショップ、7,900以上のブランドの取り扱い（ともに2020年6 月末時点）
 • 常時83万点以上の商品アイテム数と毎日平均3,000点以上の新着商品 を掲載
 • 即日配送サービス
 • ギフトラッピングサービス
 • ツケ払い など
 3
4. © ZOZO Technologies, Inc. 4 クラウド活用 〜方針と学び〜
 ZOZOTOWNにおけるクラウド活用方針とクラウドリプレイスで得た知見

5. © ZOZO Technologies, Inc. ZOZOTOWNのクラウドリプレイスの背景
 5 ZOZOTOWN運営開始 クラウドリプレイス開始 マイクロサービス
 アーキテクチャに移行開始 2004年 2018年 2020年 オンプレミス オンプレ＋クラウド（ハイブリッド） • ビジネスの拡大 • 高まるインフラの拡張性・俊敏性の要求 • 巨大化するモノリス • コードの肥大化、特定技術への依存
6. © ZOZO Technologies, Inc. アーキテクチャーの変遷
 オンプレからクラウドベースに、モノリスからマイクロサービスへ 6 フロントエンド 統合DB フロントエンド API / BFF フロントエンド API Gateway API DB DB API API API API オンプレ DC クラウド 参照系機能のAPI化 マイクロサービス化 参照・書き込みすべてAPI化 Read Only Read & Write APIはサービスごとに 独立しDBも分離 弾力性・可用性を要する 参照系機能をクラウドで提供 書き込み系はオンプレ BFF 絶賛取り組み中
7. © ZOZO Technologies, Inc. ZOZOTOWNにおけるクラウドテナンシーの方針
 • 基本はシングルクラウド ◦ まずはシングルクラウドでアプリやインフラの信頼性の向上に集中 ◦ できることはたくさんある：マルチAZ・リージョンの可用性構成、回復性設計、運 用基盤・体制強化 • 要件に応じてマルチクラウドを検討 ◦ シングルクラウドでは実現できない高い信頼性が必要とされる場合において、 信頼性とコストのトレードオフを考慮しマルチクラウドを検討する ◦ コストとは学習コスト、設計・運用コスト、設備コストなど 7
8. © ZOZO Technologies, Inc. ZOZOTOWNにおけるクラウド利用パターン
 • ハイブリッド ◦ オンプレF/EとクラウドのAPIやデータ基盤の連携 ◦ オンプレのサーバ仮想環境をクラウドに拡張（VMware Cloud on AWS） • シングルクラウド ◦ マイクロサービス主要機能（AWS）、データ基盤（GCP） • マルチクラウド ◦ パーソナライズ検索基盤：AWSとGCPでマルチクラウドで提供 8
9. © ZOZO Technologies, Inc. パーソナライズ検索 - マルチクラウド例
 利用者の行動履歴・属性を元にパーソナライズされたおすすめ順機能のための仕組み 負荷分散・可用性向上のためElasticsearch（Elastic Cloud）をAWSとGCPに構築 9 • ZOZOTOWNの検索基盤におけるElasticsearch移行で得た知見 https://techblog.zozo.com/entry/migrating-zozotown-search-platform • ZOZOTOWNを支える検索パーソナライズ基盤 　https://speakerdeck.com/dama_yu/zozotech-gcp-01 API Gateway API / BFF GCP AWS フロントエンド 検索データ更新のための仕組み クロスクラウドで 検索実行
10. © ZOZO Technologies, Inc. 一般論 - マルチクラウドのメリット・デメリット
 • 信頼性向上 ◦ リスク分散 ◦ 可用性向上 • 柔軟な選択肢 ◦ 可搬性確保 ◦ ベンダーロックイン回避 10 • アーキテクチャの複雑化 • コスト増の可能性 ◦ 学習コスト ◦ 運用コスト ◦ インフラコスト メリット デメリット
11. © ZOZO Technologies, Inc. ZOZOTOWNリプレイスで得たマルチクラウド知見
 • 信頼性 ◦ 単一クラウドのSLAを越える信頼性確保が可能になる。ただし、中途半端な複数クラウド 活用は逆に信頼性低下になる可能性がある • 制約条件 ◦ 選択肢は増える一方、効率性、共通化やベンダーロックイン回避のために特定クラウド に依存しない選択を取ることでシングルクラウド以上に制約条件が増え、また最大公約 数のメリットしか得られない可能性がある • アーキテクチャの複雑化・学習コスト増がもたらす主な弊害 ◦ アジリティが低下してビジネスチャンスを逃す可能性がある 11 求められるビジネス要件、得られる信頼性、必要とするコスト、開発体制、習熟度レ ベルなどのトレードオフで考えるべき
12. © ZOZO Technologies, Inc. 12 クラウド活用 〜実践〜
 サイトの信頼性を高めつつ効果的にクラウドを活用するために実践していること
 

13. © ZOZO Technologies, Inc. N%リリースによる段階的な移行
 • サブシステムごとに段階的（N%: 0→100）にクラウドベースに移行 • 新規システムではなく既存サービスを回しながらの段階的移行（ストラングラーパ ターン）であるため、移行期間中のシステム全体の複雑性は高くなり、リスク要因が 多いことが特徴 • 基本的にクラウドで構築するアプリはコンテナーベースで、アプリ基盤に Kubernetesを採用したクラウドネイティブを前提とする 13 ストラングラーパターンのイメージ
14. © ZOZO Technologies, Inc. 利用技術・ツール選定方針
 信頼性・柔軟性・コストなどを考慮したケースバイケースの選択 • マネージドサービスの活用 ◦ 運用負荷軽減、ポータビリティなどが考慮ポイント ◦ 必要に応じて自作も考える • オープンソース、またはオープンソース互換の採用 • 特定クラウドに依存する技術・ツールも必要に応じて採用 ◦ ステートレスなアプリ基盤に対しデータ基盤はクラウド特化になりがち 14 Automation / Configuration CloudFormation, Terraform Observability Datadog, Sentry, PagerDuty, CloudWatch, Stackdriver Code Repo, CI/CD GitHub, GitHub Actions, CircleCI DB, Analytics RDS (SQL), Aurora (MySQL), BigQuery, AWS Athena 利用ツール・サービス例
15. © ZOZO Technologies, Inc. 堅牢性より回復性 - Design for Resiliency
 • クラウドは進化（Update）し続ける ⇒ クラウドは壊れる可能性がある • 回復性を重視した設計思想 ◦ 堅牢性より壊れること前提として、ダウンタイムやデータ損失を回避しサービス 提供を維持できる回復性のための設計や仕組みを構築する • その他、回復性を支えるために重視している能力・活動 ◦ 構成管理力（IaC、CI/CD） ◦ 可観測性（ログ、メトリクス、可視化、分散トレーシング） ◦ DevOps + サイト信頼性のためのエンジニアリング（SRE）
 15
16. © ZOZO Technologies, Inc. 構成管理の自動化の徹底 - IaCとCI/CD
 • CI/CDを起点としたアプリ・インフラ環境の構築、リリース、構成変更 ◦ コード化： IaC（Infrastructure as Code） ◦ リリース・構成変更作業の自動化： CI/CD • 初期コストはかかるものの得られるメリットはとても大きい ◦ ミスの低減、開発効率とリリーススピードの向上 ◦ 運用・開発業務の非属人化でスケール拡大が見込める 16 ZOZOTOWNマイクロサービスプロジェクトにおける 継 続 的 な 改 善 を 支 えるCI/CD 戦 略 https://techblog.zozo.com/entry/zozotown-cicd-strategy　 アプリ・インフラIaC + CI/CD例
17. © ZOZO Technologies, Inc. 17 We’re hiring! https://tech.zozo.com/recruit/ ZOZOテクノロジーズでは、一緒にサービスを作り上げてくれる 方を募集しています。ご興あ味がある方は以下のリンクから 是非ご応募ください！