Upgrade to Pro — share decks privately, control downloads, hide ads and more …

3. 데이터 레이어 다중화

kakao
PRO
December 08, 2022
Programming
0
410

3. 데이터 레이어 다중화

#HA #DR

지난 10월 15일, 카카오가 사용하고 있던 SKC&C 판교 데이터센터에 화재가 났습니다. 이로 인해 카카오 전체 서버의 1/3의 전원이 꺼지면서 서비스에 장시간 장애가 발생하여, 이용자분들에게 많은 불편을 드렸습니다.

그 후 카카오는 '데이터센터 단위로 어떻게 다중화를 해야 이번과 같은 화재시에도 장애를 최소화 할 수 있는지' 광범위하고 깊은 원인 분석을 했고, 해결책을 고민하고 오늘도 계속 보완/실행해가고 있습니다.
이번 이프카카오에서 '1015장애 회고' 트랙을 통해, 각 시스템 레이어별로 어떻게 다중화할지 그 방안을 상세히 공유드리고자 합니다.

'1015장애 회고' 트랙은 다음과 같이 총 5개의 발표로 구성하였습니다. 카카오는 데이터를 RDBMS군, NOSQL, 빅데이터 클러스터 이렇게 세 가지의 카테고리로 구분하여 관리하고 있으며 이 데이터레이어의 다중화에 대해 설명드리는 영상입니다.

1. 데이터센터 단위의 다중화를 위한 고민
2. 인프라 설비 레이어 다중화
3. 데이터 레이어 다중화
4. 서비스 플랫폼 레이어 다중화
5. 애플리케이션 레이어 다중화

발표자 : tonny.yi
카카오 데이터플랫폼팀 tonny입니다

kakao
PRO

December 08, 2022
Tweet

More Decks by kakao

See All by kakao
나의 컨텍스트를 아는 친구, Context-Aware AI Mate
kakao
PRO
0
30
카카오i를 통한 AIOT 서비스의 사례와 미래
kakao
PRO
0
49
데이터 분석과 머신러닝을 통한 유저 방문 맛집 발굴하기
kakao
PRO
0
28
최애 작품 이용권 선물해주는 ‘Helix 푸시’ 개발기
kakao
PRO
0
15
지연 시간 순삭! LLM 추론 구조와 효율적 애플리케이션 설계
kakao
PRO
0
21
문서 검토는 이제 Document AI로 한방에!
kakao
PRO
0
43
이미지까지 이해하는 Multimodal LLM의 학습 방법 밝혀내기
kakao
PRO
0
42
나만의 프로필 이미지를 만드는 Personlized T2I 모델 개발기
kakao
PRO
0
28
생성형AI를 활용한 개체명인식(NER)
kakao
PRO
0
21

Other Decks in Programming

See All in Programming
React への依存を最小にするフロントエンド設計
takonda
20
7.3k
[Do iOS '24] Ship your app on a Friday...and enjoy your weekend!
polpielladev
0
140
シェーダーで魅せるMapLibreの動的ラスタータイル
satoshi7190
1
490
flutterkaigi_2024.pdf
kyoheig3
0
250
3 Effective Rules for Using Signals in Angular
manfredsteyer
PRO
0
110
Nurturing OpenJDK distribution: Eclipse Temurin Success History and plan
ivargrimstad
0
1.3k
ActiveSupport::Notifications supporting instrumentation of Rails apps with OpenTelemetry
ymtdzzz
1
260
TypeScript Graph でコードレビューの心理的障壁を乗り越える
ysk8hori
3
1.3k
受け取る人から提供する人になるということ
little_rubyist
0
260
Laravel や Symfony で手っ取り早く
OpenAPI のドキュメントを作成する
azuki
2
130
.NET のための通信フレームワーク MagicOnion 入門 / Introduction to MagicOnion
mayuki
1
2.3k
CSC509 Lecture 12
javiergs
PRO
0
160

Featured

See All Featured
Performance Is Good for Brains [We Love Speed 2024]
tammyeverts
6
450
Making Projects Easy
brettharned
115
5.9k
Learning to Love Humans: Emotional Interface Design
aarron
273
40k
Designing Dashboards & Data Visualisations in Web Apps
destraynor
229
52k
Cheating the UX When There Is Nothing More to Optimize - PixelPioneers
stephaniewalter
280
13k
Bash Introduction
62gerente
608
210k
How to train your dragon (web standard)
notwaldorf
88
5.7k
Why You Should Never Use an ORM
jnunemaker
PRO
54
9.1k
Rails Girls Zürich Keynote
gr2m
94
13k
GraphQLとの向き合い方2022年版
quramy
43
13k
How to Think Like a Performance Engineer
csswizardry
20
1.1k
Git: the NoSQL Database
bkeepers
PRO
427
64k

Transcript

  1. JG LBLBP  ؘ੉ఠۨ੉য׮઺ച пઙؘ੉ఠ߬੉झ ࠻ؘ੉ఠ೒ۖಬ١ ੉కਮUPOOZZJ ஠஠য়

  2. ,BLBP%BUB $BUFHPSJFT • 3%#.4.Z42- 1PTUHSF42- 0SBDMF • .POHP%# • #JH%BUB)#BTF

    %SVJE )BEPPQ

  3. • 3%#.4 .Z42- 1PTUHSF42- 0SBDMF  • 3%#.4ҳࢿ੗୓۽ੋೠޙઁחহ঻਺ )"%3਍৔ 

    • ࢚द࠙ࢳ੘স੄૑ো߂઺ױࢲ࠺झী૒੽੸ੋ৔ೱহ਺ • ղࠗߔসझషܻ૑੢গ߂%3ߔসझషܻ૑੽Ӕࠛо • .POHP%# • दझమ੄࢚दоਊࢿҳࢿਸઁೠೞחࢲߡਤ஖ о࢚ ੢࠺੄ ੋझఢझࠗ઒  • ੢গਤ஖ীٮܲ%3ز੘ৈࠗ ֢٘زद੢গद 3FBE0OMZ۽੹ജ  • #JH%BUB )#BTF %SVJE )BEPPQ  • ௿۞झఠ׮઺ചҳࢿ੉উػ௿۞झఠߊѼ • *%$р֢٘࠙࢑੉੉ܖয૑૑ঋ਷ѐ੄௿۞झఠ ޙઁ੼

  4. • 3%#.4 .Z42- 1PTUHSF42- 0SBDMF  • 3%#.4ҳࢿ੗୓۽ੋೠޙઁחহ঻਺ )"%3਍৔ 

    • ࢚द࠙ࢳ੘স੄૑ো߂઺ױࢲ࠺झী૒੽੸ੋ৔ೱহ਺ • ղࠗߔসझషܻ૑੢গ߂%3ߔসझషܻ૑੽Ӕࠛо • .POHP%# • दझమ੄࢚दоਊࢿҳࢿਸઁೠೞחࢲߡਤ஖ о࢚ ੢࠺੄ ੋझఢझࠗ઒  • ੢গਤ஖ীٮܲ%3ز੘ৈࠗ ֢٘زद੢গद 3FBE0OMZ۽੹ജ  • #JH%BUB )#BTF %SVJE )BEPPQ  • ௿۞झఠ׮઺ചҳࢿ੉উػ௿۞झఠߊѼ • *%$р֢٘࠙࢑੉੉ܖয૑૑ঋ਷ѐ੄௿۞झఠ ޙઁ੼

  5. • 3%#.4 .Z42- 1PTUHSF42- 0SBDMF  • 3%#.4ҳࢿ੗୓۽ੋೠޙઁחহ঻਺ )"%3਍৔ 

    • ࢚द࠙ࢳ੘স੄૑ো߂઺ױࢲ࠺झী૒੽੸ੋ৔ೱহ਺ • ղࠗߔসझషܻ૑੢গ߂%3ߔসझషܻ૑੽Ӕࠛо • .POHP%# • दझమ੄࢚दоਊࢿҳࢿਸઁೠೞחࢲߡਤ஖ о࢚ ੢࠺੄ ੋझఢझࠗ઒  • ੢গਤ஖ীٮܲ%3ز੘ৈࠗ ֢٘زद੢গद 3FBE0OMZ۽੹ജ  • #JH%BUB )#BTF %SVJE )BEPPQ  • ௿۞झఠ׮઺ചҳࢿ੉উػ௿۞झఠߊѼ • *%$р֢٘࠙࢑੉੉ܖয૑૑ঋ਷ѐ੄௿۞झఠ ޙઁ੼

  6. • 3%#.4 .Z42- 1PTUHSF42- 0SBDMF  • 3%#.4ҳࢿ੗୓۽ੋೠޙઁחহ঻਺ )"%3਍৔ 

    • ࢚द࠙ࢳ੘স੄૑ো߂઺ױࢲ࠺झী૒੽੸ੋ৔ೱহ਺ • ղࠗߔসझషܻ૑੢গ߂%3ߔসझషܻ૑੽Ӕࠛо • .POHP%# • दझమ੄࢚दоਊࢿҳࢿਸઁೠೞחࢲߡਤ஖ о࢚ ੢࠺੄ ੋझఢझࠗ઒  • ੢গਤ஖ীٮܲ%3ز੘ৈࠗ ֢٘زद੢গद 3FBE0OMZ۽੹ജ  • #JH%BUB )#BTF %SVJE )BEPPQ  • ௿۞झఠ׮઺ചҳࢿ੉উػ௿۞झఠߊѼ • *%$р֢٘࠙࢑੉੉ܖয૑૑ঋ਷ѐ੄௿۞झఠ ޙઁ੼

  7. • 3%#.4 .Z42- 1PTUHSF42- 0SBDMF  • %3֢٘੄4DBMF6Q 0SBDMF 

    • *%$ҳࢿ .Z42- 1PTUHSF42- ୭ࣗ%3ҳࢿ 1PTUHSF42-ੌࠗ  • ݣ౭ܻ੹ਸഝਊೠо࢚੢࠺ੋझఢझਊ۝ഛࠁ • ղࠗߔসझషܻ૑दझమ੄ݣ౭ܻ੹ҳࢿ ࢚दоਊࢿഛࠁ • .POHP%# • *%$ҳࢿഛ؀ • ݣ౭ܻ੹ਸഝਊೠо࢚੢࠺ੋझఢझਊ۝ഛࠁ • #JH%BUB )#BTF %SVJE )BEPPQ  • ௿۞झఠ׮઺ച • *%$р֢٘࠙࢑ ѐࢶࢎ೦

  8. • 3%#.4 .Z42- 1PTUHSF42- 0SBDMF  • %3֢٘੄4DBMF6Q 0SBDMF 

    • *%$ҳࢿ .Z42- 1PTUHSF42- ୭ࣗ%3ҳࢿ 1PTUHSF42-ੌࠗ  • ݣ౭ܻ੹ਸഝਊೠо࢚੢࠺ੋझఢझਊ۝ഛࠁ • ղࠗߔসझషܻ૑दझమ੄ݣ౭ܻ੹ҳࢿ ࢚दоਊࢿഛࠁ • .POHP%# • *%$ҳࢿഛ؀ • ݣ౭ܻ੹ਸഝਊೠо࢚੢࠺ੋझఢझਊ۝ഛࠁ • #JH%BUB )#BTF %SVJE )BEPPQ  • ௿۞झఠ׮઺ച • *%$р֢٘࠙࢑ ѐࢶࢎ೦

  9. • 3%#.4 .Z42- 1PTUHSF42- 0SBDMF  • %3֢٘੄4DBMF6Q 0SBDMF 

    • *%$ҳࢿ .Z42- 1PTUHSF42- ୭ࣗ%3ҳࢿ 1PTUHSF42-ੌࠗ  • ݣ౭ܻ੹ਸഝਊೠо࢚੢࠺ੋझఢझਊ۝ഛࠁ • ղࠗߔসझషܻ૑दझమ੄ݣ౭ܻ੹ҳࢿ ࢚दоਊࢿഛࠁ • .POHP%# • *%$ҳࢿഛ؀ • ݣ౭ܻ੹ਸഝਊೠо࢚੢࠺ੋझఢझਊ۝ഛࠁ • #JH%BUB )#BTF %SVJE )BEPPQ  • ௿۞झఠ׮઺ച • *%$р֢٘࠙࢑ ѐࢶࢎ೦

  10. • 3%#.4 .Z42- 1PTUHSF42- 0SBDMF  • %3֢٘੄4DBMF6Q 0SBDMF 

    • *%$ҳࢿ .Z42- 1PTUHSF42- ୭ࣗ%3ҳࢿ 1PTUHSF42-ੌࠗ  • ݣ౭ܻ੹ਸഝਊೠо࢚੢࠺ੋझఢझਊ۝ഛࠁ • ղࠗߔসझషܻ૑दझమ੄ݣ౭ܻ੹ҳࢿ ࢚दоਊࢿഛࠁ • .POHP%# • *%$ҳࢿഛ؀ • ݣ౭ܻ੹ਸഝਊೠо࢚੢࠺ੋझఢझਊ۝ഛࠁ • #JH%BUB )#BTF %SVJE )BEPPQ  • ௿۞झఠ׮઺ച • *%$р֢٘࠙࢑ ѐࢶࢎ೦

  11. दझమ߹࢚ࣁࢸݺ

  12. दझమ߹࢚ࣁࢸݺ ਍৔ )" %3

  13. ߔস߂࠙ࢳӝמઁೠ അ੤ҳࢿ ࢚ݶࠗ઒੉ग۽ੌࠗࢲߡ%3޷੸ਊ о࢚੢࠺ੋझఢझӝزࠛמ )"दझమ%3޷੸ਊ *%$ҳࢿߔস࠙ࢳ࢚दоਊ ѐࢶ੼ ݣ౭ܻ੹о࢚੢࠺ੋझఢझഛࠁ $MVTUFSҳࢿ )"दझమ%3ҳࢿ

    ਍৔ )" %3 .Z42- .Z42- *%$ *%$ • 5ZQF.JOPS 4JOHMF4JOHMF)" • 5ZQF.BKPS 4JOHMF4JOHMF%3 .Z42- .Z42- )"दझమ *%$ *%$ • 5ZQF.BKPS *%$%3 .Z42- )"दझమ *%$ .Z42- .Z42- )"दझమ )"दझమ • 5ZQF/FYU(FO *%$%3 *OOP%#$MVTUFS .Z42- .Z42- .Z42- .Z42- .Z42- .Z42-

  14. ߔস߂࠙ࢳӝמઁೠ അ੤ҳࢿ ࢚ݶࠗ઒੉ग۽ੌࠗࢲߡ%3޷੸ਊ о࢚੢࠺ੋझఢझӝزࠛמ )"दझమ%3޷੸ਊ *%$ҳࢿߔস࠙ࢳ࢚दоਊ ѐࢶ੼ ݣ౭ܻ੹о࢚੢࠺ੋझఢझഛࠁ $MVTUFSҳࢿ )"दझమ%3ҳࢿ

    ਍৔ )" %3 .Z42- .Z42- *%$ *%$ • 5ZQF.JOPS 4JOHMF4JOHMF)" • 5ZQF.BKPS 4JOHMF4JOHMF%3 .Z42- .Z42- )"दझమ *%$ *%$ • 5ZQF.BKPS *%$%3 .Z42- )"दझమ *%$ .Z42- .Z42- )"दझమ )"दझమ • 5ZQF/FYU(FO *%$%3 *OOP%#$MVTUFS .Z42- .Z42- .Z42- .Z42- .Z42- .Z42-

  15. *%$ҳࢿߔস࠙ࢳ࢚दоਊ ѐࢶ੼ ୭ࣗ*%$%3 ੌ֢ࠗࣗࣻ٘ )"दझమ%3ҳࢿ ߔস߂࠙ࢳӝמઁೠ അ੤ҳࢿ ࢚ݶࠗ઒੉ग۽ੌࠗࢲߡ%3޷੸ਊ о࢚੢࠺ੋझఢझӝزࠛמ )"दझమ%3޷੸ਊ

    ਍৔ )" %3 1PTUHSF42- 1PTUHSF42- 1PTUHSF42- 1PTUHSF42- *%$ *%$ • 5ZQF.BKPS 4JOHMF4JOHMF%3 • 5ZQF.JOPS 4JOHMF4JOHMF)" )"दझమ *%$ *%$ • 5ZQF.JOPS 4JOHMF4JOHMF%3 • 5ZQF.BKPS *%$%3 1PTUHSF42- )"दझమ 1PTUHSF42- *%$ 1PTUHSF42- 1PTUHSF42- 1PTUHSF42- )"दझమ )"दझమ 1PTUHSF42-

  16. *%$ҳࢿߔস࠙ࢳ࢚दоਊ ѐࢶ੼ ୭ࣗ*%$%3 ੌ֢ࠗࣗࣻ٘ )"दझమ%3ҳࢿ ߔস߂࠙ࢳӝמઁೠ അ੤ҳࢿ ࢚ݶࠗ઒੉ग۽ੌࠗࢲߡ%3޷੸ਊ о࢚੢࠺ੋझఢझӝزࠛמ )"दझమ%3޷੸ਊ

    ਍৔ )" %3 1PTUHSF42- 1PTUHSF42- 1PTUHSF42- 1PTUHSF42- *%$ *%$ • 5ZQF.BKPS 4JOHMF4JOHMF%3 • 5ZQF.JOPS 4JOHMF4JOHMF)" )"दझమ *%$ *%$ • 5ZQF.JOPS 4JOHMF4JOHMF%3 • 5ZQF.BKPS *%$%3 1PTUHSF42- )"दझమ 1PTUHSF42- *%$ 1PTUHSF42- 1PTUHSF42- 1PTUHSF42- )"दझమ )"दझమ 1PTUHSF42-

  17. ਍৔ )" %3 %3֢٘झಖ࠺؀ட അ੤ҳࢿ ੢গद3FBE0OMZ਍৔ 03$ 03$ 03$ 03$

    03$ 03$ *%$ *%$ • 5ZQF.BKPS 3"$3"$%3 • 5ZQF.BKPS 3"$4JOHMF%3 • 5ZQF.JOPS 4JOHMF4JOHMF%3 03$ 03$ 03$ 03$ 03$ 03$ 03$ 03$ 03$ 03$ *%$ *%$ • 5ZQF.BKPS 3"$3"$%3 • 5ZQF.BKPS 3"$4JOHMF%3 • 5ZQF.JOPS 4JOHMF4JOHMF%3 03$ 03$ %3֢٘झಖݒட ѐࢶ੼ 0SBDMF

  18. ਍৔ )" %3 %3֢٘झಖ࠺؀ட അ੤ҳࢿ ੢গद3FBE0OMZ਍৔ 03$ 03$ 03$ 03$

    03$ 03$ *%$ *%$ • 5ZQF.BKPS 3"$3"$%3 • 5ZQF.BKPS 3"$4JOHMF%3 • 5ZQF.JOPS 4JOHMF4JOHMF%3 03$ 03$ 03$ 03$ 03$ 03$ 03$ 03$ 03$ 03$ *%$ *%$ • 5ZQF.BKPS 3"$3"$%3 • 5ZQF.BKPS 3"$4JOHMF%3 • 5ZQF.JOPS 4JOHMF4JOHMF%3 03$ 03$ %3֢٘झಖݒட ѐࢶ੼ 0SBDMF

  19. ֢٘زद੢গद3FBE0OMZ۽੹ജ അ੤ҳࢿ о࢚੢࠺ੋझఢझӝزࠛמ *%$ҳࢿߔস࠙ࢳ࢚दоਊ ѐࢶ੼ ਍৔ )" %3 *%$ *%$

    • 5ZQF.JOPS 144144 • 5ZQF.BKPS %$%3 .POHP%# .POHP%# *%$ .POHP%# .POHP%# .POHP%# .POHP%# *%$ *%$ • 5ZQF *%$%3 .POHP%# *%$ .POHP%# .POHP%# .POHP%#

  20. ֢٘زद੢গद3FBE0OMZ۽੹ജ അ੤ҳࢿ о࢚੢࠺ੋझఢझӝزࠛמ *%$ҳࢿߔস࠙ࢳ࢚दоਊ ѐࢶ੼ ਍৔ )" %3 *%$ *%$

    • 5ZQF.JOPS 144144 • 5ZQF.BKPS %$%3 .POHP%# .POHP%# *%$ .POHP%# .POHP%# .POHP%# .POHP%# *%$ *%$ • 5ZQF *%$%3 .POHP%# *%$ .POHP%# .POHP%# .POHP%#

  21. $MVTUFS%3৮ܐ അ੤ҳࢿ ѐࢶ੼ ҳઑ੸ѐࢶ੼হ਺ ਍৔ )" %3 *%$ *%$ •

    5ZQF.BKPS $MVTUFS%3 /PEF /PEF /PEF /PEF /PEF /PEF *%$ *%$ *%$ • 5ZQF ௿۞झఠࠂઁ ৮ܐ /PEF /PEF /PEF /PEF /PEF /PEF ॳӝزӝച )#BTF

  22. $MVTUFS%3৮ܐ അ੤ҳࢿ ѐࢶ੼ ҳઑ੸ѐࢶ੼হ਺ ਍৔ )" %3 *%$ *%$ •

    5ZQF.BKPS $MVTUFS%3 /PEF /PEF /PEF /PEF /PEF /PEF *%$ *%$ *%$ • 5ZQF ௿۞झఠࠂઁ ৮ܐ /PEF /PEF /PEF /PEF /PEF /PEF ॳӝزӝച )#BTF

  23. $MVTUFS%3೙ਃ അ੤ҳࢿ ௿۞झఠ׮઺ച ѐࢶ੼ ਍৔ )" %3 *%$ *%$ •

    5ZQF.BKPS 4JOHMF$MVTUFS /PEF /PEF /PEF *%$ *%$ *%$ • 5ZQF ௿۞झఠࠂઁ ৮ܐ /PEF /PEF /PEF /PEF /PEF /PEF %SVJE

  24. $MVTUFS%3೙ਃ അ੤ҳࢿ ௿۞झఠ׮઺ച ѐࢶ੼ ਍৔ )" %3 *%$ *%$ •

    5ZQF.BKPS 4JOHMF$MVTUFS /PEF /PEF /PEF *%$ *%$ *%$ • 5ZQF ௿۞झఠࠂઁ ৮ܐ /PEF /PEF /PEF /PEF /PEF /PEF %SVJE

  25. *%$р֢٘࠙࢑ ѐࢶ੼ ௿۞झఠ׮઺ച ਍৔ )" %3 $MVTUFS%3೙ਃ അ੤ҳࢿ *%$ *%$

    • 5ZQF.BKPS 4JOHMF$MVTUFS • 5ZQF.JOPS $MVTUFS%3 /PEF /PEF /PEF /PEF /PEF /PEF /PEF /PEF /PEF *%$ *%$ *%$ /PEF /PEF • 5ZQF *%$р֢٘࠙࢑ /PEF • 5ZQF ӝઓ௿۞झఠࠂઁ /PEF /PEF /PEF /PEF /PEF /PEF )BEPPQ

  26. *%$р֢٘࠙࢑ ѐࢶ੼ ௿۞झఠ׮઺ച ਍৔ )" %3 $MVTUFS%3೙ਃ അ੤ҳࢿ *%$ *%$

    • 5ZQF.BKPS 4JOHMF$MVTUFS • 5ZQF.JOPS $MVTUFS%3 /PEF /PEF /PEF /PEF /PEF /PEF /PEF /PEF /PEF *%$ *%$ *%$ /PEF /PEF • 5ZQF *%$р֢٘࠙࢑ /PEF • 5ZQF ӝઓ௿۞झఠࠂઁ /PEF /PEF /PEF /PEF /PEF /PEF )BEPPQ