dbt 모델 설계 원칙에 기반한 Airflow DAG 운영 방법론

Transcript

1. dbt 설계 원칙에 기반한 Airflow DAG 운영 방법론 김탄 Data Engineer Mail | tkim0723@gmail.com LinkedIn | https://www.linkedin.com/in/tan-kim-26750311a/
2. 김탄 (모건) • 당근페이, 서비스코어팀 (24~현재) • 우아한형제들, 데이터플랫폼/데이터스트리밍팀 (21~24) • 삼성전자, Data Intelligence팀 (15~21) • # 10ys # DE # GenAI # NL2SQL 발표자 소개
3. 1. 당근페이가 일하는 방식 2. dbt, NOT DBT! 3. Airflow DAG 설계 방법 4. 운영 전략 5. QnA 목차
4. 당근페이가 일하는 방식 1
5. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 당근페이가 일하는 방식
6. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 당근페이가 일하는 방식
7. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 당근페이가 일하는 방식
8. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 당근페이가 일하는 방식 োز ਃ୒
9. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 당근페이가 일하는 방식
10. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 당근페이가 일하는 방식 оҕ ਃ୒
11. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 당근페이가 일하는 방식
12. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 당근페이가 일하는 방식
13. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 당근페이가 일하는 방식
14. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 당근페이가 일하는 방식
15. dbt, NOT DBT! 2
16. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 dbt, NOT DBT!
17. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 dbt, NOT DBT!
18. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 dbt, NOT DBT!
19. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 dbt, NOT DBT!
20. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 dbt, NOT DBT!
21. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 dbt, NOT DBT!
22. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 dbt, NOT DBT!
23. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 dbt, NOT DBT!
24. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 dbt, NOT DBT!
25. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 dbt, NOT DBT!
26. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 dbt, NOT DBT!
27. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 dbt, NOT DBT!
28. Airflow DAG 설계 방법 3
29. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 Airflow DAG 설계 방법
30. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 Airflow DAG 설계 방법
31. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 Airflow DAG 설계 방법 ӡয૓ DAG ౵यਵ۽ ੋೠ झா઴۞ ࠗೞ ֫਷ ௏٘ ࠂ੟ب۽ ੋೠ ਬ૑ࠁࣻ ߂ ٣ߡӦ੄ য۰਑ ࠂ੟ೠ కझ௼ р ੄ઓࢿ DAG పझ౟ ߂ Ѩૐ җ੿੄ ࠂ੟ೣਵ۽ ੋೠ ࢤ࢑ࢿ ੷ೞ
32. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 Airflow DAG 설계 방법
33. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 Airflow DAG 설계 방법
34. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 Airflow DAG 설계 방법 Sensor 1 Sensor 2 Sensor 3
35. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 Airflow DAG 설계 방법 {DAG ֎੉߁ ஶ߮࣌}_{୶୹ػ ప੉࠶ݺ}
36. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 Airflow DAG 설계 방법
37. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 Airflow DAG 설계 방법
38. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 Airflow DAG 설계 방법
39. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 Airflow DAG 설계 방법
40. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 Airflow DAG 설계 방법
41. 운영 전략 4
42. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 운영 전략
43. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 운영 전략
44. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 운영 전략
45. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 운영 전략
46. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 운영 전략
47. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 운영 전략
48. dbt 모델 설계 원칙에 기반한 Air fl ow DAG 운영 방법론 운영 전략
49. 김탄 Data Engineer Mail | tkim0723@gmail.com LinkedIn | https://www.linkedin.com/in/tan-kim-26750311a/ E.O.D