KubeCon + CloudNativeCon Japan 2025 Recap by CA

https://cyberagent.connpass.com/event/358095/

Transcript

1. AbemaTV, Inc. All Rights Reserved
 AbemaTV, Inc. All Rights Reserved
 1 KubeCon + CloudNativeCon Japan 2025 Recap 2025 July 2nd Yuya Koda 〜印象に残ったセッションを振り返る〜
2. AbemaTV, Inc. All Rights Reserved
 Yuya Koda 2025年4月に ABEMA の Cloud Platform Team に中途入社 しました。Google Cloud / AWS を見たり、ツールを書い たり、CI/CD を整えたりしています。 前職は DeNA で全社向けの CI 基盤を見ていました。 2 Profile ponkio_o ponkio-o ponkio_o SNS のサムネはコダックなことが多い 社内向けのサムネはだいたいこれ
3. AbemaTV, Inc. All Rights Reserved
 印象に残ったセッション 3
4. AbemaTV, Inc. All Rights Reserved
 印象に残ったセッション 4 サマリ: ネットワーク転送量を削減するために Cluster レベルのキャッシュを提供し、複数クラスタで 安全にキャッシュの共有を行うために、CIRC (サークと発音していた) と呼ばれる OCI Artifact の キャッシュ用のプロキシを開発した話
5. AbemaTV, Inc. All Rights Reserved
 マルチテナントでセキュアにキャッシュを共有することを 目的に開発されたため、レイヤーレベルで認証をかけるこ とができる。これにより複数クラスタでセキュアにキャッ シュを共有することができる。 レイヤーレベルで認証できる セッションのポイント 5 Proxy 型のキャッシュシステムを利用しており、マニフェスト のイメージ名などは変更不要になっている。 内部的には containerd の設定を書き換えて Proxy を通過する ようにしている。 Proxy 型なのでマニフェストの変更不要
6. AbemaTV, Inc. All Rights Reserved
 CIRC に対して同じリクエストが送信された時に無駄を防ぐた めに Kubernetes の Lease を利用して、ロックを取って単一 のリクエストで Origin から取得できるようにしている。 複数 pull の lock に lease を使用 セッションのポイント 6 CIRC は Pull だけでなく Push にも対応しており、CIRC に 既にキャッシュが存在する場合には高速に Push が完了する ようになっている。 Push にも対応
7. AbemaTV, Inc. All Rights Reserved
 印象に残ったセッション 7 サマリ: 99.995% の可用性を実現するために PSN で実践しているテクニックの紹介。スライド中に何度 か出てくる「普通のことを普通にやる」という言葉通り、基本的な (だけどとても大切な) 設定などが紹 介されている。
8. AbemaTV, Inc. All Rights Reserved
 低い Priority Class の Pod を予め稼働させることでノード のスケールアウトを高速化する Placeholder Pod と EKS において EC2 を直接操作する Karpenter の利用 Placeholder pods と Karpenter セッションのポイント 8 ロールアウト時に Pod の稼働台数を保証するための Pod Disruption Budget と任意のトポロジで Pod を分散させる Pod Topology Spread Constraints の設定 PDB と PTSC
9. AbemaTV, Inc. All Rights Reserved
 Argo や Prometheus など重要なコンポーネントは専用の ノードに配置することで、他のワークロードの影響を受け ないようにしている Dedicated Node セッションのポイント 9 Platform チームが Helm を利用してベースとなるマニフェス トを提供しており、Deprecated API などの更新も自動的に 行うようにしている Deprecated API の自動対応
10. AbemaTV, Inc. All Rights Reserved
 印象に残ったセッション 10 サマリ: Kubernetes のローカルストレージは高パフォーマンスを発揮できるメリットがある一方、作成 後のリサイズができないなどのデメリットが存在する。それを解決すべく Cybozu で開発された CSI Plugin の TopoLVM に関する発表
11. AbemaTV, Inc. All Rights Reserved
 TopoLVM では作成された PVC に対応する論理ボリューム をノードから切り出して PV を作成し、Pod から利用可能 ディスクのリサイズやそれに伴う PV の更新にも対応して いる Dynamic provisioning セッションのポイント 11 Local Storage は、Node に対して直接アタッチする方式で高 スループットなどのメリットがある一方でリサイズができない といったデメリットが存在する。そこで開発されたのが論理ボ リュームを利用できる CSI Plugin の TopoLVM Local Storage について
12. AbemaTV, Inc. All Rights Reserved
 各ノードで動作する daemon がノードのストレージに関す る Annotation を付与しており、kube-scheduler からは scheduler extender 経由で topolvm-scheduler を呼び出 し、フィルタリングとスコアリングを行っている。 topovlm-scheduler セッションのポイント 12 TopoLVM では、ストレージの空き容量を考慮したスケ ジューリングに対応しており、複数候補がある時にストレー ジ容量に応じてフィルタリング/スコアリングを行っている Topology-Aware Volume Provisioning
13. AbemaTV, Inc. All Rights Reserved
 KubeCon の思い出 13
14. AbemaTV, Inc. All Rights Reserved
 写真で振り返る KubeCon 14 弁当 (Day1) 弁当 (Day2)
15. AbemaTV, Inc. All Rights Reserved
 写真で振り返る KubeCon 15 懇親会 BBQ CA 参加者集合写真