CA_kube-scheduler

Transcript

1. CyberAgent MLPlatform インターン 最終発表 設楽 朗人
2. - FragileGroupScheduling の isAllPrioritySame 関数において PreemptionPolicy == Never であれば許容するように修正 - FragileGroupScheduling の PreFilter Phase において、Group 内 Pod 間の Affinity / Anti-Affinity が満たされているかを早期に 検査するように機能を追加 やったこと
3. PreemptionPolicy
4. PreemptionPolicy PreemptionPolicy が nil の場合はデフォルトが指定される デフォルトは LowerPriority らしい
5. PreemptionPolicy テストケースに Higher Priority であり Preemption が Never である Pod を追加
6. PreemptionPolicy テストケースに Higher Priority であり Preemption が Never である Pod を追加 ↓ テストケースが正しく通ることを確認
7. Affinity / Anti-Affinity 何が嬉しいか PodGroup は全て Bind されるか全て棄却されるか のどちらかであるため、 PodGroup 内に Pod 間で Affinity / Anti-Affinity を違反する Pod が 一つでも存在した時点で全て棄却されることが確定する。 これを PodGroup の中の一つの Pod を見るだけで判断できる ようになれば、パフォーマンスの向上が期待できるのではないか
8. Affinity / Anti-Affinity
9. Affinity / Anti-Affinity
10. Affinity / Anti-Affinity PodGroup
11. Affinity / Anti-Affinity PodGroup 相互の Affinity 関係を検証
12. Affinity / Anti-Affinity PodGroup ダメだったらその時点で Group 全て棄却
13. Affinity / Anti-Affinity PreFilter 関数で Group 内の Pod の Affinity をチェック
14. Affinity / Anti-Affinity 実装は本家 Kubernetes の kubernetes/pkg/scheduler/framework/plugins/interpodaffinity/filtering.go の podMatchesAllAffinityTerms 関数をほぼパクった
15. Affinity / Anti-Affinity ハマりポイント Affinity Term は自身には適用すべきでないので、Kubernetes 本家のように Terms をまとめて検査することができなかった。 ↓ UID で判定して自身以外の Pod のみを Term に適用するように修正した。
16. Affinity / Anti-Affinity テスト 新たなテストを定義し、 - GroupSize を 2 とした basic な Pod - PodAffinity として GroupSize=2 を指定した Pod - PodAffinity として GroupSize=3 を指定した Pod - PodAntiAffinity として GroupSize=2 を指定した Pod - PodAntiAffinity として GroupSize=3 を指定した Pod を宣言
17. Affinity / Anti-Affinity テスト - Affinity Pod が PodGroup に含まれており、Affinity に違反しないケース - Affinity Pod が PodGroup に含まれており、Affinity に違反するケース - Anti-Affinity Pod が PodGroup に含まれており、Anti-Affinity に違反しないケース - Anti-Affinity Pod が PodGroup に含まれており、Anti-Affinity に違反するケース - Affinity Pod, Anti-Affinity Pod が含まれており、違反しないケース - Affinity Pod, Anti-Affinity Pod が含まれており、Affinity に違反するケース - Affinity Pod, Anti-Affinity Pod が含まれており、Anti-Affinity に違反するケース - Affinity Pod, Anti-Affinity Pod が含まれており、どちらにも違反するケース において、正しく動作することを確認
18. Affinity / Anti-Affinity テスト テスト網羅性は ふわっと
19. まとめ - やったこと - PreemptionPolicy - PreemptionPolicy が nil の場合の話 - テストを書いたよ、という話 - Affinity / Anti-Affinity - 何が嬉しいか - 図解 - 実装の説明 - ハマりポイント - テスト