Upgrade to Pro — share decks privately, control downloads, hide ads and more …

3. 데이터 레이어 다중화

kakao
December 08, 2022
Programming
0
380

3. 데이터 레이어 다중화

#HA #DR

지난 10월 15일, 카카오가 사용하고 있던 SKC&C 판교 데이터센터에 화재가 났습니다. 이로 인해 카카오 전체 서버의 1/3의 전원이 꺼지면서 서비스에 장시간 장애가 발생하여, 이용자분들에게 많은 불편을 드렸습니다.

그 후 카카오는 '데이터센터 단위로 어떻게 다중화를 해야 이번과 같은 화재시에도 장애를 최소화 할 수 있는지' 광범위하고 깊은 원인 분석을 했고, 해결책을 고민하고 오늘도 계속 보완/실행해가고 있습니다.
이번 이프카카오에서 '1015장애 회고' 트랙을 통해, 각 시스템 레이어별로 어떻게 다중화할지 그 방안을 상세히 공유드리고자 합니다.

'1015장애 회고' 트랙은 다음과 같이 총 5개의 발표로 구성하였습니다. 카카오는 데이터를 RDBMS군, NOSQL, 빅데이터 클러스터 이렇게 세 가지의 카테고리로 구분하여 관리하고 있으며 이 데이터레이어의 다중화에 대해 설명드리는 영상입니다.

1. 데이터센터 단위의 다중화를 위한 고민
2. 인프라 설비 레이어 다중화
3. 데이터 레이어 다중화
4. 서비스 플랫폼 레이어 다중화
5. 애플리케이션 레이어 다중화

발표자 : tonny.yi
카카오 데이터플랫폼팀 tonny입니다

kakao

December 08, 2022
Tweet

More Decks by kakao

See All by kakao
이 세상 모든 물체를 검출할 수 있는 AI 기술을 만들 수 있을까요?
kakao
0
430
좌충우돌 애니모지 개발기
kakao
0
300
카카오브레인의 텍스트 기반 이미지 생성 기술
kakao
0
360
AI로 난치병을 치료할 수 있을까요?
kakao
0
230
초거대모델 학습을 위한 이미지-텍스트 데이터셋
kakao
0
480
코끼리를 GPU에 넣는 법
kakao
0
340
의료영상이 인공지능을 만났을 때: To be or Not to be
kakao
0
280
초거대 AI 기술은 헬스케어에 어떻게 활용될까?
kakao
0
340
Druid 반정형 데이터 고군분투기
kakao
0
270

Other Decks in Programming

See All in Programming
ゆるい個人開発のススメ
kuroppe1819
10
900
オブジェクト指向は必要なのか / Is object-oriented needed?
kishida
31
21k
本格ローグライク制作にEbitengineを選んでみた
nagainaganawa
0
280
try!Swift Tokyo 2024 参加報告 LT
akidon0000
1
160
1인 개발자로 행복하게 살기 - GDG 송도 헬로월드 2024
benjaminkim
1
5.5k
チームでモデリングを育てるうえで 考えたこと・気づいたこと / Cultivating Modeling in Teams: Thoughts and Insights
mackey0225
7
4k
Front-end application development, Symfony-style(s)
dunglas
2
1.8k
SwiftUI Performance 不要なViewの再描画と更新を抑える
bigamitiongit
1
150
[技育CAMPアカデミア]アイディアを形に！【超入門】スマホアプリ開発〜リリースまでの流れをご紹介
teamlab
PRO
0
310
9年開発を牽引して見えてきた、共通化すべきものと個別でつくるもの ~プログラム言語~
shinout
1
630
入門 AWS Amplify Gen2 / Introduction to AWS Amplify Gen2
genkiogasawara
1
290
From Spring Boot 2 to Spring Boot 3 with Java 21 and Jakarta EE
ivargrimstad
0
960

Featured

See All Featured
Atom: Resistance is Futile
akmur
258
25k
The MySQL Ecosystem @ GitHub 2015
samlambert
242
12k
Design by the Numbers
sachag
274
18k
Testing 201, or: Great Expectations
jmmastey
27
6.3k
Why You Should Never Use an ORM
jnunemaker
PRO
50
8.6k
Automating Front-end Workflow
addyosmani
1354
200k
Rebuilding a faster, lazier Slack
samanthasiow
72
8.2k
[Rails World 2023 - Day 1 Closing Keynote] - The Magic of Rails
eileencodes
1
1.2k
Making the Leap to Tech Lead
cromwellryan
123
8.5k
Facilitating Awesome Meetings
lara
40
5.6k
How GitHub Uses GitHub to Build GitHub
holman
468
290k
Scaling GitHub
holman
457
140k

Transcript

  1. JG LBLBP  ؘ੉ఠۨ੉য׮઺ച пઙؘ੉ఠ߬੉झ ࠻ؘ੉ఠ೒ۖಬ١ ੉కਮUPOOZZJ ஠஠য়

  2. ,BLBP%BUB $BUFHPSJFT • 3%#.4.Z42- 1PTUHSF42- 0SBDMF • .POHP%# • #JH%BUB)#BTF

    %SVJE )BEPPQ

  3. • 3%#.4 .Z42- 1PTUHSF42- 0SBDMF  • 3%#.4ҳࢿ੗୓۽ੋೠޙઁחহ঻਺ )"%3਍৔ 

    • ࢚द࠙ࢳ੘স੄૑ো߂઺ױࢲ࠺झী૒੽੸ੋ৔ೱহ਺ • ղࠗߔসझషܻ૑੢গ߂%3ߔসझషܻ૑੽Ӕࠛо • .POHP%# • दझమ੄࢚दоਊࢿҳࢿਸઁೠೞחࢲߡਤ஖ о࢚ ੢࠺੄ ੋझఢझࠗ઒  • ੢গਤ஖ীٮܲ%3ز੘ৈࠗ ֢٘زद੢গद 3FBE0OMZ۽੹ജ  • #JH%BUB )#BTF %SVJE )BEPPQ  • ௿۞झఠ׮઺ചҳࢿ੉উػ௿۞झఠߊѼ • *%$р֢٘࠙࢑੉੉ܖয૑૑ঋ਷ѐ੄௿۞झఠ ޙઁ੼

  4. • 3%#.4 .Z42- 1PTUHSF42- 0SBDMF  • 3%#.4ҳࢿ੗୓۽ੋೠޙઁחহ঻਺ )"%3਍৔ 

    • ࢚द࠙ࢳ੘স੄૑ো߂઺ױࢲ࠺झী૒੽੸ੋ৔ೱহ਺ • ղࠗߔসझషܻ૑੢গ߂%3ߔসझషܻ૑੽Ӕࠛо • .POHP%# • दझమ੄࢚दоਊࢿҳࢿਸઁೠೞחࢲߡਤ஖ о࢚ ੢࠺੄ ੋझఢझࠗ઒  • ੢গਤ஖ীٮܲ%3ز੘ৈࠗ ֢٘زद੢গद 3FBE0OMZ۽੹ജ  • #JH%BUB )#BTF %SVJE )BEPPQ  • ௿۞झఠ׮઺ചҳࢿ੉উػ௿۞झఠߊѼ • *%$р֢٘࠙࢑੉੉ܖয૑૑ঋ਷ѐ੄௿۞झఠ ޙઁ੼

  5. • 3%#.4 .Z42- 1PTUHSF42- 0SBDMF  • 3%#.4ҳࢿ੗୓۽ੋೠޙઁחহ঻਺ )"%3਍৔ 

    • ࢚द࠙ࢳ੘স੄૑ো߂઺ױࢲ࠺झী૒੽੸ੋ৔ೱহ਺ • ղࠗߔসझషܻ૑੢গ߂%3ߔসझషܻ૑੽Ӕࠛо • .POHP%# • दझమ੄࢚दоਊࢿҳࢿਸઁೠೞחࢲߡਤ஖ о࢚ ੢࠺੄ ੋझఢझࠗ઒  • ੢গਤ஖ীٮܲ%3ز੘ৈࠗ ֢٘زद੢গद 3FBE0OMZ۽੹ജ  • #JH%BUB )#BTF %SVJE )BEPPQ  • ௿۞झఠ׮઺ചҳࢿ੉উػ௿۞झఠߊѼ • *%$р֢٘࠙࢑੉੉ܖয૑૑ঋ਷ѐ੄௿۞झఠ ޙઁ੼

  6. • 3%#.4 .Z42- 1PTUHSF42- 0SBDMF  • 3%#.4ҳࢿ੗୓۽ੋೠޙઁחহ঻਺ )"%3਍৔ 

    • ࢚द࠙ࢳ੘স੄૑ো߂઺ױࢲ࠺झী૒੽੸ੋ৔ೱহ਺ • ղࠗߔসझషܻ૑੢গ߂%3ߔসझషܻ૑੽Ӕࠛо • .POHP%# • दझమ੄࢚दоਊࢿҳࢿਸઁೠೞחࢲߡਤ஖ о࢚ ੢࠺੄ ੋझఢझࠗ઒  • ੢গਤ஖ীٮܲ%3ز੘ৈࠗ ֢٘زद੢গद 3FBE0OMZ۽੹ജ  • #JH%BUB )#BTF %SVJE )BEPPQ  • ௿۞झఠ׮઺ചҳࢿ੉উػ௿۞झఠߊѼ • *%$р֢٘࠙࢑੉੉ܖয૑૑ঋ਷ѐ੄௿۞झఠ ޙઁ੼

  7. • 3%#.4 .Z42- 1PTUHSF42- 0SBDMF  • %3֢٘੄4DBMF6Q 0SBDMF 

    • *%$ҳࢿ .Z42- 1PTUHSF42- ୭ࣗ%3ҳࢿ 1PTUHSF42-ੌࠗ  • ݣ౭ܻ੹ਸഝਊೠо࢚੢࠺ੋझఢझਊ۝ഛࠁ • ղࠗߔসझషܻ૑दझమ੄ݣ౭ܻ੹ҳࢿ ࢚दоਊࢿഛࠁ • .POHP%# • *%$ҳࢿഛ؀ • ݣ౭ܻ੹ਸഝਊೠо࢚੢࠺ੋझఢझਊ۝ഛࠁ • #JH%BUB )#BTF %SVJE )BEPPQ  • ௿۞झఠ׮઺ച • *%$р֢٘࠙࢑ ѐࢶࢎ೦

  8. • 3%#.4 .Z42- 1PTUHSF42- 0SBDMF  • %3֢٘੄4DBMF6Q 0SBDMF 

    • *%$ҳࢿ .Z42- 1PTUHSF42- ୭ࣗ%3ҳࢿ 1PTUHSF42-ੌࠗ  • ݣ౭ܻ੹ਸഝਊೠо࢚੢࠺ੋझఢझਊ۝ഛࠁ • ղࠗߔসझషܻ૑दझమ੄ݣ౭ܻ੹ҳࢿ ࢚दоਊࢿഛࠁ • .POHP%# • *%$ҳࢿഛ؀ • ݣ౭ܻ੹ਸഝਊೠо࢚੢࠺ੋझఢझਊ۝ഛࠁ • #JH%BUB )#BTF %SVJE )BEPPQ  • ௿۞झఠ׮઺ച • *%$р֢٘࠙࢑ ѐࢶࢎ೦

  9. • 3%#.4 .Z42- 1PTUHSF42- 0SBDMF  • %3֢٘੄4DBMF6Q 0SBDMF 

    • *%$ҳࢿ .Z42- 1PTUHSF42- ୭ࣗ%3ҳࢿ 1PTUHSF42-ੌࠗ  • ݣ౭ܻ੹ਸഝਊೠо࢚੢࠺ੋझఢझਊ۝ഛࠁ • ղࠗߔসझషܻ૑दझమ੄ݣ౭ܻ੹ҳࢿ ࢚दоਊࢿഛࠁ • .POHP%# • *%$ҳࢿഛ؀ • ݣ౭ܻ੹ਸഝਊೠо࢚੢࠺ੋझఢझਊ۝ഛࠁ • #JH%BUB )#BTF %SVJE )BEPPQ  • ௿۞झఠ׮઺ച • *%$р֢٘࠙࢑ ѐࢶࢎ೦

  10. • 3%#.4 .Z42- 1PTUHSF42- 0SBDMF  • %3֢٘੄4DBMF6Q 0SBDMF 

    • *%$ҳࢿ .Z42- 1PTUHSF42- ୭ࣗ%3ҳࢿ 1PTUHSF42-ੌࠗ  • ݣ౭ܻ੹ਸഝਊೠо࢚੢࠺ੋझఢझਊ۝ഛࠁ • ղࠗߔসझషܻ૑दझమ੄ݣ౭ܻ੹ҳࢿ ࢚दоਊࢿഛࠁ • .POHP%# • *%$ҳࢿഛ؀ • ݣ౭ܻ੹ਸഝਊೠо࢚੢࠺ੋझఢझਊ۝ഛࠁ • #JH%BUB )#BTF %SVJE )BEPPQ  • ௿۞झఠ׮઺ച • *%$р֢٘࠙࢑ ѐࢶࢎ೦

  11. दझమ߹࢚ࣁࢸݺ

  12. दझమ߹࢚ࣁࢸݺ ਍৔ )" %3

  13. ߔস߂࠙ࢳӝמઁೠ അ੤ҳࢿ ࢚ݶࠗ઒੉ग۽ੌࠗࢲߡ%3޷੸ਊ о࢚੢࠺ੋझఢझӝزࠛמ )"दझమ%3޷੸ਊ *%$ҳࢿߔস࠙ࢳ࢚दоਊ ѐࢶ੼ ݣ౭ܻ੹о࢚੢࠺ੋझఢझഛࠁ $MVTUFSҳࢿ )"दझమ%3ҳࢿ

    ਍৔ )" %3 .Z42- .Z42- *%$ *%$ • 5ZQF.JOPS 4JOHMF4JOHMF)" • 5ZQF.BKPS 4JOHMF4JOHMF%3 .Z42- .Z42- )"दझమ *%$ *%$ • 5ZQF.BKPS *%$%3 .Z42- )"दझమ *%$ .Z42- .Z42- )"दझమ )"दझమ • 5ZQF/FYU(FO *%$%3 *OOP%#$MVTUFS .Z42- .Z42- .Z42- .Z42- .Z42- .Z42-

  14. ߔস߂࠙ࢳӝמઁೠ അ੤ҳࢿ ࢚ݶࠗ઒੉ग۽ੌࠗࢲߡ%3޷੸ਊ о࢚੢࠺ੋझఢझӝزࠛמ )"दझమ%3޷੸ਊ *%$ҳࢿߔস࠙ࢳ࢚दоਊ ѐࢶ੼ ݣ౭ܻ੹о࢚੢࠺ੋझఢझഛࠁ $MVTUFSҳࢿ )"दझమ%3ҳࢿ

    ਍৔ )" %3 .Z42- .Z42- *%$ *%$ • 5ZQF.JOPS 4JOHMF4JOHMF)" • 5ZQF.BKPS 4JOHMF4JOHMF%3 .Z42- .Z42- )"दझమ *%$ *%$ • 5ZQF.BKPS *%$%3 .Z42- )"दझమ *%$ .Z42- .Z42- )"दझమ )"दझమ • 5ZQF/FYU(FO *%$%3 *OOP%#$MVTUFS .Z42- .Z42- .Z42- .Z42- .Z42- .Z42-

  15. *%$ҳࢿߔস࠙ࢳ࢚दоਊ ѐࢶ੼ ୭ࣗ*%$%3 ੌ֢ࠗࣗࣻ٘ )"दझమ%3ҳࢿ ߔস߂࠙ࢳӝמઁೠ അ੤ҳࢿ ࢚ݶࠗ઒੉ग۽ੌࠗࢲߡ%3޷੸ਊ о࢚੢࠺ੋझఢझӝزࠛמ )"दझమ%3޷੸ਊ

    ਍৔ )" %3 1PTUHSF42- 1PTUHSF42- 1PTUHSF42- 1PTUHSF42- *%$ *%$ • 5ZQF.BKPS 4JOHMF4JOHMF%3 • 5ZQF.JOPS 4JOHMF4JOHMF)" )"दझమ *%$ *%$ • 5ZQF.JOPS 4JOHMF4JOHMF%3 • 5ZQF.BKPS *%$%3 1PTUHSF42- )"दझమ 1PTUHSF42- *%$ 1PTUHSF42- 1PTUHSF42- 1PTUHSF42- )"दझమ )"दझమ 1PTUHSF42-

  16. *%$ҳࢿߔস࠙ࢳ࢚दоਊ ѐࢶ੼ ୭ࣗ*%$%3 ੌ֢ࠗࣗࣻ٘ )"दझమ%3ҳࢿ ߔস߂࠙ࢳӝמઁೠ അ੤ҳࢿ ࢚ݶࠗ઒੉ग۽ੌࠗࢲߡ%3޷੸ਊ о࢚੢࠺ੋझఢझӝزࠛמ )"दझమ%3޷੸ਊ

    ਍৔ )" %3 1PTUHSF42- 1PTUHSF42- 1PTUHSF42- 1PTUHSF42- *%$ *%$ • 5ZQF.BKPS 4JOHMF4JOHMF%3 • 5ZQF.JOPS 4JOHMF4JOHMF)" )"दझమ *%$ *%$ • 5ZQF.JOPS 4JOHMF4JOHMF%3 • 5ZQF.BKPS *%$%3 1PTUHSF42- )"दझమ 1PTUHSF42- *%$ 1PTUHSF42- 1PTUHSF42- 1PTUHSF42- )"दझమ )"दझమ 1PTUHSF42-

  17. ਍৔ )" %3 %3֢٘झಖ࠺؀ட അ੤ҳࢿ ੢গद3FBE0OMZ਍৔ 03$ 03$ 03$ 03$

    03$ 03$ *%$ *%$ • 5ZQF.BKPS 3"$3"$%3 • 5ZQF.BKPS 3"$4JOHMF%3 • 5ZQF.JOPS 4JOHMF4JOHMF%3 03$ 03$ 03$ 03$ 03$ 03$ 03$ 03$ 03$ 03$ *%$ *%$ • 5ZQF.BKPS 3"$3"$%3 • 5ZQF.BKPS 3"$4JOHMF%3 • 5ZQF.JOPS 4JOHMF4JOHMF%3 03$ 03$ %3֢٘झಖݒட ѐࢶ੼ 0SBDMF

  18. ਍৔ )" %3 %3֢٘झಖ࠺؀ட അ੤ҳࢿ ੢গद3FBE0OMZ਍৔ 03$ 03$ 03$ 03$

    03$ 03$ *%$ *%$ • 5ZQF.BKPS 3"$3"$%3 • 5ZQF.BKPS 3"$4JOHMF%3 • 5ZQF.JOPS 4JOHMF4JOHMF%3 03$ 03$ 03$ 03$ 03$ 03$ 03$ 03$ 03$ 03$ *%$ *%$ • 5ZQF.BKPS 3"$3"$%3 • 5ZQF.BKPS 3"$4JOHMF%3 • 5ZQF.JOPS 4JOHMF4JOHMF%3 03$ 03$ %3֢٘झಖݒட ѐࢶ੼ 0SBDMF

  19. ֢٘زद੢গद3FBE0OMZ۽੹ജ അ੤ҳࢿ о࢚੢࠺ੋझఢझӝزࠛמ *%$ҳࢿߔস࠙ࢳ࢚दоਊ ѐࢶ੼ ਍৔ )" %3 *%$ *%$

    • 5ZQF.JOPS 144144 • 5ZQF.BKPS %$%3 .POHP%# .POHP%# *%$ .POHP%# .POHP%# .POHP%# .POHP%# *%$ *%$ • 5ZQF *%$%3 .POHP%# *%$ .POHP%# .POHP%# .POHP%#

  20. ֢٘زद੢গद3FBE0OMZ۽੹ജ അ੤ҳࢿ о࢚੢࠺ੋझఢझӝزࠛמ *%$ҳࢿߔস࠙ࢳ࢚दоਊ ѐࢶ੼ ਍৔ )" %3 *%$ *%$

    • 5ZQF.JOPS 144144 • 5ZQF.BKPS %$%3 .POHP%# .POHP%# *%$ .POHP%# .POHP%# .POHP%# .POHP%# *%$ *%$ • 5ZQF *%$%3 .POHP%# *%$ .POHP%# .POHP%# .POHP%#

  21. $MVTUFS%3৮ܐ അ੤ҳࢿ ѐࢶ੼ ҳઑ੸ѐࢶ੼হ਺ ਍৔ )" %3 *%$ *%$ •

    5ZQF.BKPS $MVTUFS%3 /PEF /PEF /PEF /PEF /PEF /PEF *%$ *%$ *%$ • 5ZQF ௿۞झఠࠂઁ ৮ܐ /PEF /PEF /PEF /PEF /PEF /PEF ॳӝزӝച )#BTF

  22. $MVTUFS%3৮ܐ അ੤ҳࢿ ѐࢶ੼ ҳઑ੸ѐࢶ੼হ਺ ਍৔ )" %3 *%$ *%$ •

    5ZQF.BKPS $MVTUFS%3 /PEF /PEF /PEF /PEF /PEF /PEF *%$ *%$ *%$ • 5ZQF ௿۞झఠࠂઁ ৮ܐ /PEF /PEF /PEF /PEF /PEF /PEF ॳӝزӝച )#BTF

  23. $MVTUFS%3೙ਃ അ੤ҳࢿ ௿۞झఠ׮઺ച ѐࢶ੼ ਍৔ )" %3 *%$ *%$ •

    5ZQF.BKPS 4JOHMF$MVTUFS /PEF /PEF /PEF *%$ *%$ *%$ • 5ZQF ௿۞झఠࠂઁ ৮ܐ /PEF /PEF /PEF /PEF /PEF /PEF %SVJE

  24. $MVTUFS%3೙ਃ അ੤ҳࢿ ௿۞झఠ׮઺ച ѐࢶ੼ ਍৔ )" %3 *%$ *%$ •

    5ZQF.BKPS 4JOHMF$MVTUFS /PEF /PEF /PEF *%$ *%$ *%$ • 5ZQF ௿۞झఠࠂઁ ৮ܐ /PEF /PEF /PEF /PEF /PEF /PEF %SVJE

  25. *%$р֢٘࠙࢑ ѐࢶ੼ ௿۞झఠ׮઺ച ਍৔ )" %3 $MVTUFS%3೙ਃ അ੤ҳࢿ *%$ *%$

    • 5ZQF.BKPS 4JOHMF$MVTUFS • 5ZQF.JOPS $MVTUFS%3 /PEF /PEF /PEF /PEF /PEF /PEF /PEF /PEF /PEF *%$ *%$ *%$ /PEF /PEF • 5ZQF *%$р֢٘࠙࢑ /PEF • 5ZQF ӝઓ௿۞झఠࠂઁ /PEF /PEF /PEF /PEF /PEF /PEF )BEPPQ

  26. *%$р֢٘࠙࢑ ѐࢶ੼ ௿۞झఠ׮઺ച ਍৔ )" %3 $MVTUFS%3೙ਃ അ੤ҳࢿ *%$ *%$

    • 5ZQF.BKPS 4JOHMF$MVTUFS • 5ZQF.JOPS $MVTUFS%3 /PEF /PEF /PEF /PEF /PEF /PEF /PEF /PEF /PEF *%$ *%$ *%$ /PEF /PEF • 5ZQF *%$р֢٘࠙࢑ /PEF • 5ZQF ӝઓ௿۞झఠࠂઁ /PEF /PEF /PEF /PEF /PEF /PEF )BEPPQ