Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Speaker Deck
PRO
Sign in
Sign up for free
LT : Strimziの紹介 : Apache Kafka on OpenShift
Tomonari Yamashita
November 08, 2018
Technology
0
680
LT : Strimziの紹介 : Apache Kafka on OpenShift
11/08/2018 Red Hat Tech Night にてLTを行った際のスライドです。
Tomonari Yamashita
November 08, 2018
Tweet
Share
Other Decks in Technology
See All in Technology
Autonomous Database Cloud 技術詳細 / adb-s_technical_detail_jp
oracle4engineer
PRO
10
18k
DeepL の用語集が(いつのまにか)日本語に対応してたので試してみた
irokawah0
0
180
Citizen 개발기
outsider
0
300
OpsJAWS Meetup21 システム運用アンチパターンのすすめ
yoshiiryo1
0
1.5k
History of the ML system in KARTE
kargo113
1
670
Security Hub のマルチアカウント 管理・運用をサーバレスでやってみる
ch6noota
0
930
Introduction to MLOps
asei
7
1.2k
要約 "Add Live Text interaction to your app"
ushisantoasobu
0
150
20220628event_ogura_part
caddi_eng
0
120
プログラマがオブジェクト指向しても幸せになれない理由
shirayanagiryuji
0
160
Empath Company Deck
empathpr
0
150
Strategyパターン
hankehly
0
160
Featured
See All Featured
Keith and Marios Guide to Fast Websites
keithpitt
404
21k
Refactoring Trust on Your Teams (GOTO; Chicago 2020)
rmw
19
1.4k
How STYLIGHT went responsive
nonsquared
85
3.9k
Put a Button on it: Removing Barriers to Going Fast.
kastner
56
2.3k
Producing Creativity
orderedlist
PRO
334
37k
I Don’t Have Time: Getting Over the Fear to Launch Your Podcast
jcasabona
12
920
What the flash - Photography Introduction
edds
62
10k
We Have a Design System, Now What?
morganepeng
35
3k
Raft: Consensus for Rubyists
vanstee
126
5.5k
Six Lessons from altMBA
skipperchong
14
1.4k
The Straight Up "How To Draw Better" Workshop
denniskardys
225
120k
Imperfection Machines: The Place of Print at Facebook
scottboms
253
12k
Transcript
LT : Strimziの紹介 Apache Kafka on OpenShift Tomonari Yamashita Senior
Technical Support Engineer (Red Hat Fuse / AMQ) 11/08/2018
Strimzi の紹介 2 10/25 AMQ Streams GA 1.0 リリース AMQ
Streams = +
Strimzi の紹介 3 • 超高スループット • 大規模にスケール • 高い耐障害性 •
Linuxの機能を利用して高効率 ストリーム処理のデファクト
Strimzi の紹介 4 でもKafkaの運用は大変 • 構築、設定、全体的な整合性 ◦ Kafkaブローカー群、Zookeeper ◦ ネットワーク、認証、暗号化
◦ トピックやパーティション • 下位インフラ ◦ ヘルスチェック、ログ集約、メトリクス、 etc • 運用管理 ◦ 設計、運用手順書、障害管理、体制、 etc...
Strimzi の紹介 「Welcome to the Kubernetes Era!」 5
Strimzi の紹介 6 • Kubernetes上のyaml (CRD)に一元管理 ◦ 本来Kafka設定していた項目を含む • クラスタに求める姿を記述(宣言的)
• Kafkaの各種リソース定義 ◦ ブローカー、Zookeeper ◦ Kafkaトピック、パーティション ◦ ユーザ、ACL、暗号化 ◦ CPU、メモリ、ストレージ ◦ JVM、ログ 1: 一元管理されたリソース定義
Strimziの紹介 7 リソース定義 [欲しい姿] オペレータ [同期する] Kafkaクラスタ [実体] 2:オペレータによる運用管理の自動化 リソース定義とクラスタ状態の差分を継続的に検出して同期させる
Strimzi の紹介 8 3:インフラはKubernetesにお任せ • StrimziはKubernetesのさまざま機能を積極的に活かして実現 ◦ Kubernetes Nativeな統合のためにKafka本来の設定方法とは異なることも •
KubernetesやOpenShiftの提供する共通インフラの利用 ◦ ヘルスチェック ◦ ログ収集 ◦ メトリクス ◦ ビルドデプロイ
Strimzi の紹介 「Kubernetesはクラウド時代のLinuxだ」 9 Jim Zemlin Executive Director, Linux Foundation
THANK YOU plus.google.com/+RedHat linkedin.com/company/red-hat youtube.com/user/RedHatVideos facebook.com/redhatinc twitter.com/RedHatNews