GitHub Copilotは開発者の生産性をどれだけ上げるのか？ZOZOでの全社導入とその効果 / How Much Does GitHub Copilot Improve Developer Productivity? The Company-wide Implementation and Its Effects at ZOZO

by Ryosuke Horie

Slide 1

Slide 1 text

Slide 2

Slide 2 text

Slide 3

Slide 3 text

Slide 4

Slide 4 text

Slide 5

Slide 5 text

Slide 6

Slide 6 text

Slide 7

Slide 7 text

● ファッションEC ● 1,600以上のショップ、9,000以上のブランドの取り扱い ● 常時95万点以上の商品アイテム数と毎日平均2,900点以上の新着商品を掲載 ● ブランド古着のファッションゾーン「ZOZOUSED」やコスメ専門モール「ZOZOCOSME」、靴の専門モール「ZOZOSHOES」、ラグジュアリー＆デザイナーズゾーン「ZOZOVILLA」を展開 ※数値は2023年12月末時点

Slide 8

Slide 8 text

● ファッションコーディネートアプリ ● 1,700万ダウンロード突破、コーディネート投稿総数は1,400万件以上 ● ピックアップタグから最新のトレンドをチェック ● コーディネート着用アイテムを公式サイトで購入可能 ● WEAR公認の人気ユーザーをWEARISTAと認定。モデル・タレント・デザイナー・インフルエンサーといった各界著名人も参加 ※数値は2023年12月末時点

Slide 9

Slide 9 text

Slide 10

Slide 10 text

Slide 11

Slide 11 text

Slide 12

Slide 12 text

Slide 13

Slide 13 text

Slide 14

Slide 14 text

Slide 15

Slide 15 text

Slide 16

Slide 16 text

Slide 17

Slide 17 text

Slide 18

Slide 18 text

Slide 19

Slide 19 text

Slide 20

Slide 20 text

Slide 21

Slide 21 text

© ZOZO, Inc. 21 GitHub Copilotとは何か？ ● GitHub社が提供するAIペアプログラマー ● AIのサポートを受けコードをよりすばやく記述可能 ● 継続的な能力の強化 ○ かつてGitHub Copilot Xとして発表された機能群は続々と正規版に ○ GitHub Copilot X: ソフトウェア開発ライフサイクルのすべての段階で AIを活用することを目的とした次世代のGitHub Copilotを表すビジョン GitHub Copilot X：AIを搭載した開発者体験 : https://github.blog/jp/2023-03-23-github-copilot-x-the-ai-powered-developer-experience/

Slide 22

Slide 22 text

© ZOZO, Inc. 22 GitHubはAIを駆使した開発者プラットフォームへ ● Copilotの上に「再構築」されるGitHub ○ GitHub Copilot Enterprise ■ GitHub Copilot ChatのGitHub.comへの統合 ● エディタの枠を超えて活用可能 ■ コーディング以外の開発プロセスへのGitHub Copilotの適用 ○ Next: GitHub Copilot Workspace ■ Issueの起票を基点としてAIによる実装プランの策定... ■ 開発のライフサイクル全体を通したAIのサポート参照: GitHub Universe 2023 https://githubuniverse.com/

Slide 23

Slide 23 text

Slide 24

Slide 24 text

Slide 25

Slide 25 text

Slide 26

Slide 26 text

Slide 27

Slide 27 text

Slide 28

Slide 28 text

Slide 29

Slide 29 text

© ZOZO, Inc. 29 ● 量から取り組むことを意思決定 (レベル1生産性の改善) ● 質にあたるレベル2,3生産性の計測と改善はより難易度が高い ● どのように向き合っていくかは継続して検討量 × 質の最大化にどう取り組むか引用: 開発生産性について議論する前に知っておきたいこと https://qiita.com/hirokidaichi/items/53f0865398829bdebef1

Slide 30

Slide 30 text

Slide 31

Slide 31 text

Slide 32

Slide 32 text

© ZOZO, Inc. 32 「完璧な状態」を目指す ● 「完璧な状態」をどう目指していくか？ ○ フロー効率を計測可能な状態へ ○ リードタイムを計測する仕組みを構築 ○ フロー効率から高める効率性の孤島完璧な状態荒野効率性の海低高低高リソース効率フロー効率引用: This is Lean, 効率性マトリックス https://www.shoeisha.co.jp/book/detail/9784798169521

Slide 33

Slide 33 text

Slide 34

Slide 34 text

Slide 35

Slide 35 text

© ZOZO, Inc. 35 GitHub Copilotが開発効率に与える影響 ● GitHub社により行われた調査結果 ○ GitHub Copilotを使用した開発者の60-75％が開発の満足度が向上したと回答 ○ GitHub Copilotを使用した73％の開発者が集中して作業ができたと回答 ○ GitHub Copilotを使用した87％の開発者が繰り返し作業中の精神的疲労を軽減できたと回答 ○ GitHub Copilotを使用した開発者群が55％早くタスクを完了 ● GitHub Copilotを導入することで開発効率を向上させる効果が期待できる調査：GitHub Copilotが開発者の生産性と満足度に与える影響を数値化 https://github.blog/jp/2022-09-15-research-quantifying-github-copilots-impact-on-developer-productivity-and-happiness/

Slide 36

Slide 36 text

Slide 37

Slide 37 text

Slide 38

Slide 38 text

Slide 39

Slide 39 text

Slide 40

Slide 40 text

Slide 41

Slide 41 text

© ZOZO, Inc. ● CTOブロック、コーポレートITブロックが共同で調査 ● GitHub社へのヒアリングと相談 ● GitHub社からの発表、公式ドキュメント、利用規約の確認 ● 類似ツールとの比較 ● 既にGitHub Copilot利用経験のある社員へのヒアリング ● 社内生成AIガイドラインに準拠するか ● 個人・他社の事例確認 ● 自分達でも使用 41 GitHub Copilotとは何か？を知る

Slide 42

Slide 42 text

Slide 43

Slide 43 text

Slide 44

Slide 44 text

Slide 45

Slide 45 text

Slide 46

Slide 46 text

Slide 47

Slide 47 text

Slide 48

Slide 48 text

Slide 49

Slide 49 text

© ZOZO, Inc. ● 脆弱性の混入リスクの低減 ○ GitHub Copilotに組み込まれたAIベースの脆弱性防止システムの利用 ○ 開発者は自身が書いたコードの内容をGitHub Copilotの提案を含め理解した上でPull Requestを作成 ○ レビュアーによるコードレビューを必ず実施 49 セキュリティ上の懸念の低減 GitHub Copilot now has a better AI model and new capabilities https://github.blog/2023-02-14-github-copilot-now-has-a-better-ai-model-and-new-capabilities/#filtering-out-security-vulnerabilities-with-a-new-ai-system

Slide 50

Slide 50 text

Slide 51

Slide 51 text

Slide 52

Slide 52 text

Slide 53

Slide 53 text

© ZOZO, Inc. ● セキュリティ(ソースコード流出)リスクの低減 ○ プロダクトのコードはGitHub Copilotの学習に使用されない ● ライセンス侵害リスクの低減 ○ 「Suggestions matching public code」をOrganization全体に強制 ○ GitHub Copilotの提案が GitHubのパブリックコードに一致するとブロック ○ 第三者からの賠償請求に対しての補償 ■ 契約内容によって異なる可能性があるので必ずGitHub社に確認 53 GitHub Copilot Business GitHub Copilot Business について: https://docs.github.com/ja/enterprise-cloud@latest/copilot/overview-of-github-copilot/about-github-copilot-business

Slide 54

Slide 54 text

Slide 55

Slide 55 text

Slide 56

Slide 56 text

Slide 57

Slide 57 text

Slide 58

Slide 58 text

Slide 59

Slide 59 text

Slide 60

Slide 60 text

Slide 61

Slide 61 text

Slide 62

Slide 62 text

Slide 63

Slide 63 text

Slide 64

Slide 64 text

Slide 65

Slide 65 text

Slide 66

Slide 66 text

Slide 67

Slide 67 text

Slide 68

Slide 68 text

Slide 69

Slide 69 text

Slide 70

Slide 70 text

Slide 71

Slide 71 text

Slide 72

Slide 72 text

Slide 73

Slide 73 text

Slide 74

Slide 74 text

Slide 75

Slide 75 text

Slide 76

Slide 76 text

Slide 77

Slide 77 text

Slide 78

Slide 78 text

Slide 79

Slide 79 text

Slide 80

Slide 80 text

Slide 81

Slide 81 text

Slide 82

Slide 82 text

Slide 83

Slide 83 text

Slide 84

Slide 84 text

Slide 85

Slide 85 text

Slide 86

Slide 86 text

© ZOZO, Inc. ● GitHub CopilotはZOZOの開発効率にプラスの影響を与える ○ 78.9％がGitHub Copilotを使用することでより生産的になったと回答 ○ 58%が1日あたり30分以上時間を節約できたと回答 ○ 開発者の満足度と幸福度が向上し、タスクをより速く完了できる ● 言語・開発環境での効果のバラつき ○ 試験導入ではiOS・Swift・Xcodeで「そう思わない」「全くそう思わない」が増加 ○ GitHub CopilotのXcodeサポートが公式で提供されていない 86 アンケート結果の集計と考察: まとめ

Slide 87

Slide 87 text

Slide 88

Slide 88 text

Slide 89

Slide 89 text

Slide 90

Slide 90 text

Slide 91

Slide 91 text

Slide 92

Slide 92 text

Slide 93

Slide 93 text

Slide 94

Slide 94 text

© ZOZO, Inc. ● GitHub Copilot利用環境の整備 ○ 全社に対してGitHub Copilot利用希望者のリストアップ ○ 利用料金の見積もりと稟議申請 ○ 社内承認フロー、運用ルールの整備 ● GitHub Copilotについての知見の共有 ○ 開発者がGitHub Copilotの様々な使い方を知ることは活用する上で重要 ○ LT会の実施 ○ 試験導入の連絡用チャンネルを情報共有チャンネルとして転用 ○ GitHub Copilot活用に関するtipsを集約 94 全社展開

Slide 95

Slide 95 text

Slide 96

Slide 96 text

© ZOZO, Inc. 96 LT会の実施タイトル GitHub Copilot × 言語・フレームワーク GitHub CopilotとAndroid開発 GitHub Copilot × Kotlin/Java PowerShellでGitHub Copilot利用 GitHub Copilot × PowerShell How to use Copilot Successfully with jQuery GitHub Copilot × jQuery Terraform, YAMLでの利用例 GitHub Copilot × Terraform/YAML GitHub Copilotを使ってみた感想 GitHub Copilot × Java iOSアプリ開発におけるGitHub Copilotの活用方法 GitHub Copilot × Swift Copilot使ってみてLT GitHub Copilot × TypeScript GitHub Copilot × VBScript GitHub Copilot × VBScript

Slide 97

Slide 97 text

Slide 98

Slide 98 text

Slide 99

Slide 99 text

Slide 100

Slide 100 text

Slide 101

Slide 101 text

Slide 102

Slide 102 text

Slide 103

Slide 103 text

Slide 104

Slide 104 text

Slide 105

Slide 105 text

Slide 106

Slide 106 text

Slide 107

Slide 107 text

Slide 108

Slide 108 text

Slide 109

Slide 109 text

Slide 110

Slide 110 text

Slide 111

Slide 111 text

Slide 112

Slide 112 text

Slide 113

Slide 113 text

Slide 114

Slide 114 text

Slide 115

Slide 115 text

Slide 116

Slide 116 text

© ZOZO, Inc. ● 試験導入時との比較で全ての項目で「そう思う」「とてもそう思う」の回答が増加 ● GitHub Copilotの導入は導入後半年以上時間が経過した時点でも開発者の「満足度と幸福度」「効率とフロー」に良い影響を与えている ● フロー状態に入りやすいか？への回答 ○ 41.7%が入りやすいと回答 ○ 回答の傾向: 一日の中でコーディングに費やす時間が長いほどフロー状態に入りやすいと回答 116 導入後の効果: 「満足度と幸福度」「効率とフロー」への影響

Slide 117

Slide 117 text

Slide 118

Slide 118 text

Slide 119

Slide 119 text

Slide 120

Slide 120 text

Slide 121

Slide 121 text

Slide 122

Slide 122 text

Slide 123

Slide 123 text

Slide 124

Slide 124 text

Slide 125

Slide 125 text

Slide 126

Slide 126 text

Slide 127

Slide 127 text

© ZOZO, Inc. ● GitHub Copilot Chatが2024年1月からZOZO全社で有効化 ● 近日中: GitHub.com、モバイルアプリでGitHub Copilot Chatが利用可能に 127 まとめと今後の展望 GitHub Universe 2023 opening keynote- Copilot in the Age of AI: https://www.youtube.com/watch?v=NrQkdDVupQE

Slide 128

Slide 128 text

© ZOZO, Inc. ● 2月GitHub Copilot Enterpriseが一般提供開始予定 ● Pull Requestサマリー、コードレビュー、ドキュメントの検索と要約、Chatのパーソナライズ、ﬁne チューンモデル ● コーディング以外の開発プロセスへのGitHub Copilotの適用 128 まとめと今後の展望 GitHub Universe 2023 opening keynote- Copilot in the Age of AI: https://youtu.be/NrQkdDVupQE?si=lcx5xi5BE_auXMoH

Slide 129

Slide 129 text

© ZOZO, Inc. ● 「」スマートアクションがGitHub.com全体で利用可能に 129 まとめと今後の展望 https://docs.github.com/ja/enterprise-cloud@latest/copilot/github-copilot-enterprise/copilot-pull-request-summaries/creating-a-pull-request-summary-with-github-copilot

Slide 130

Slide 130 text

© ZOZO, Inc. 130 ● 2024年 GitHub Copilot Workspace ○ Issueを基点として意図した変更を実装するためのプランを提案 ○ Copilot Workspaceでコードをビルド、実行、テスト ○ プロジェクトの隅々までを知っているパートナーとのペアプロ ● 開発サイクル全体を通してのAIの活用へまとめと今後の展望 https://github.blog/jp/2023-11-09-universe-2023-copilot-transforms-github-into-the-ai-powered-developer-platform