讓測試不再 BB！從 BDD 到 CI/CD，不靠人力也能 MVP

by LINE Developers Taiwan

Slide 1

Slide 1 text

讓測試不再 BB！從 BDD 到 CI/CD，不靠人力也能 MVP Joe Lin & Mia Chu

Slide 2

Slide 2 text

QA 如何測試？ End-to-End Testing Performance Testing QA 角色與任務 CI/CD CONTENT 監控 Monitoring 01 02 03 04 06 05

Slide 3

Slide 3 text

Joe Lin TECH FRESH QA Dev 2021/09 ~ 2025/06 @NTUT EECS 2024/07 ~ 2025/06 @LINE Taiwan

Slide 4

Slide 4 text

01 QA 角色與任務

Slide 5

Slide 5 text

QA 角色與任務需求溝通制定規格確認行為範例與驗收條件討論產品目標與價值開發與測試依需求實作功能並確保符合情境完成驗收通過測試驗證並交付可用產品

Slide 6

Slide 6 text

監控產品狀況 QA 職責與工作提高產品品質加速回歸驗證縮短交付週期驗證真實情境 QA 職責

Slide 7

Slide 7 text

報告整合與測試監控 QA 職責與工作測試規劃與安排自動化測試 CI/CD 手動測試 QA 工作測試工程師自動化測試工程師

Slide 8

Slide 8 text

自動化測試功能性測試非功能性測試整合測試單元測試端對端測試安全性測試相容性測試效能測試

Slide 9

Slide 9 text

02 QA 如何測試？

Slide 10

Slide 10 text

行為驅動開發協作與溝通強調團隊各角色之間的有效溝通使用者情境採用簡單格式來描述功能行為自動化測試 CI/CD 監控/報告

Slide 11

Slide 11 text

行為驅動開發自動化測試 CI/CD 監控/報告需求溝通制定規格確認行為範例與驗收條件討論產品目標與價值開發與測試依需求實作功能並確保符合情境完成驗收通過測試驗證並交付可用產品

Slide 12

Slide 12 text

行為驅動開發自動化測試 CI/CD 監控/報告需要開發的功能具體使用情境前置條件執行動作/功能預期結果補充

Slide 13

Slide 13 text

Slide 14

Slide 14 text

行為驅動開發對應到功能檔案步驟實作自動化測試 CI/CD 監控/報告

Slide 15

Slide 15 text

行為驅動開發 (BDD) 01 跨角色合作開發、測試、業務人員密切溝通 03 活文件規格同時是測試與文件 02 通用語言使用大家都能理解的共通語言 04 由外而內的開發從使用者行為或業務需求出發，再在進行系統設計與實作自動化測試 CI/CD 監控/報告

Slide 16

Slide 16 text

03 End-to-End Testing

Slide 17

Slide 17 text

End-to-End Testing 驗證「使用者」體驗驗證系統整合性捕捉跨層問題自動化測試 CI/CD 監控/報告

Slide 18

Slide 18 text

Page Object Model Test Methods Web Element Methods Page Object Test 基本概念與結構： • 每個網頁對應一個類別 (class) • 每個類別包含： • 要操作的元素 (按鈕, 輸入框…) • 可以進行的動作 (login(), search()…) 自動化測試 CI/CD 監控/報告

Slide 19

Slide 19 text

Page Object Model 01 易維護 UI 改變時，只需更新一個地方 03 可重用性同一頁面類別可在多個測試中使用 02 可讀性高測試步驟像是在讀操作流程 ex: page.login() 04 可擴展性隨著應用成長，測試架構依然清晰自動化測試 CI/CD 監控/報告

Slide 20

Slide 20 text

E2E Testing Tool - Playwright 01 多瀏覽器支援 Chrome、Firefox、Safari 03 內建錄影、截圖、追蹤測試失敗時能快速回溯與重現問題 02 自動等待減少 flakiness （測試不穩定） 04 支援現代測試架構 POM、API 測試、並行執行自動化測試 CI/CD 監控/報告

Slide 21

Slide 21 text

Mia Chu TECH FRESH QA Dev Education • M.S. in Information Management @ NTU • B.S. in Management Information Systems @ NCCU Experience • 2024-2025 TECH FRESH @ LINE TRAVEL • 2023 SDET @ iKala

Slide 22

Slide 22 text

04 Performance Testing

Slide 23

Slide 23 text

為什麼我們需要效能測試？可用性 API / E2E 測試效能測試 + → 自動化測試 CI/CD 監控/報告

Slide 24

Slide 24 text

效能測試分類負載測試 Load Testing 可靠性測試 Reliability Testing 浸泡測試 Soak Testing 壓力測試 Stress Testing 自動化測試 CI/CD 監控/報告 All images sourced from Flaticon

Slide 25

Slide 25 text

壓力測試 Stress Testing 自動化測試 CI/CD 監控/報告 All images sourced from Flaticon 效能測試分類 • 找出系統極限 • 持續提高流量直到系統崩潰 • 像搬箱子不斷加重量直到撐不住

Slide 26

Slide 26 text

負載測試 Load Testing 自動化測試 CI/CD 監控/報告 All images sourced from Flaticon 效能測試分類 • 驗證預期使用量下的穩定性 • 在可預期範圍內逐步增加流量 • 每次加一定重量確認持續工作能力

Slide 27

Slide 27 text

浸泡測試 Soak Testing 自動化測試 CI/CD 監控/報告 All images sourced from Flaticon 效能測試分類 • 檢測長期穩定性問題 • 穩定高負載下執行 48-72 小時 • 像跑馬拉松的持久力測試

Slide 28

Slide 28 text

可靠性測試 Reliability Testing 自動化測試 CI/CD 監控/報告 All images sourced from Flaticon 效能測試分類 • 驗證固定負載下的穩定維持能力 • 持續一段時間的固定負載測試 • 不強調超長時間，重點為穩定性

Slide 29

Slide 29 text

關鍵指標 & 工具 Image sourced from https://sjinnovation.com/fine-tune-your-performance-testing- strategy-learn-how-test-and-optimize-your-application 自動化測試 CI/CD 監控/報告

Slide 30

Slide 30 text

05 CI/CD

Slide 31