2026TECHFRESH畢業分享會 - Lightning Talk - 資料也要 CI/CD? 用 Airbyte 自動化資料同步

講者： Olaf
活動： https://techfresh.landpress.line.me/20260616/

Transcript

1. 資料也要 CI/CD？ 用 Airbyte 自動化資料同步 Olaf
2. Olaf Tsai NCU MIS LINE TECH FRESH @ SRE
3. 為什麼資料開始變難管理？ 資料不只存在一個地方，而是分散在很多系統裡 3
4. 我們以前怎麼同步資料？ 4
5. CI/CD 讓 code 從開發到部署變成可控流程； Data Pipeline 讓 data 從產生到使用變成可控流程 CI/CD vs Data Pipeline 5
6. Airbyte：把資料同步流程工程化 圖片來源： https://airbyte.com/data-engineering-resources/enterprise-data-architecture 6
7. Airbyte：把資料同步流程工程化 Load Extract Transform Analytics 7
8. DataOps 正在改變資料流程 圖片來源： https://medium.com/towards-data-engineering/dataops-driven-governance-and- analytics-with-dbt-and-starrocks-9b23897688fd 8 8
9. LinkedIn: olaf-tsai